マルチテナントサービスの構築におけるs3の使い方に関して、アドバイスを頂けないでしょうか。

新しくマルチテナントサービスを作ろうとしています。
各テナントの機密情報を含むデータを利用者が管理できるアプリケーションの作成をしようとしています。
データの保存先はS3の予定です。
各テナントの利用者として認証されたユーザーがのみが、
上記のデータにアクセスできる作りにしたいのですが、
どのようなアプローチが考えられるでしょうか。

必須条件
・認証にはCognitoを使う。
・少なくとも数万レベルの利用テナントの数は想定される。
・１Gbyteくらいまでのデータを扱う。

できれば条件
・serverless frameworkの枠組みの中で管理したい（コードを一か所で管理したい）