NLBとTransfer Family for FTPの組み合わせでのGlobal IPについて

現在、NLBをパブリック側に出し、Transfer Family For FTPと接続を行い、外部からのFTP受信環境を構築しています。 悪質なアクセスを防ぐために、IPアドレスを洗い出して、セキュリティグループで接続できないように制御を行い、負荷がかからないような仕掛けにしたいと考えています。

ただ、NLBからTransfer Familyを通って認証のLambdaでエラーにした時のログには、AWS内部のIPアドレスに変わっており、 IPアドレスの特定はVPCフローログから同じ時間のもので見つけ出すしか方法がなさそうな状況です。

NLBからTransfer Familyを通った時にも、外部からアクセスが来た時のGlobal IPで出力されるようにする方法はありますでしょうか？