How to merge multiple files from S3 bucket into a single file?

0

I am very new to AWS S3. Currently my database is ingesting the log file into S3 bucket for each month. I would like to merge the files which are currently available in my bucket and save it as one file in the same bucket. All the files are in csv format.

Could anyone please help me on this?

主題

標籤

Amazon Simple Storage Service

語言

English

已提問 6 個月前檢視次數 2302 次

1 個回答

最新
最多得票
最多評論

這些答案是否有幫助？支持正確答案，以幫助社區從您的知識中受益。

0

Hi,

I'd suggest to follow the question https://stackoverflow.com/questions/32448416/amazon-s3-concatenate-small-files on StackOverflow: it explains why and how you should do it + provides the Python code to do it on cloud (you don't want to dowload and re-upload)

Best

Didier

專家

已回答 6 個月前

專家

已審閱 6 個月前

相關內容

S3: 如何取得S3 檔案下載次數
已接受的答案
LumensJeff
已提問 10 天前
Application Load Balancer 在什麼時候會向後端建立新的連線
已接受的答案
Luke W
已提問 5 個月前
amazon polly使用字數異常增加(The characters increased for no reason)
ys_1004
已提問 10 個月前
如何下載 Aurora MySQL binlog 到本地伺服器？
已接受的答案
roose
已提問 1 個月前
如何解決 Athena 中的「HIVE_CANNOT_OPEN_SPLIT: Hive 分割開啟錯誤 s3://awsdoc-example-bucket/: 減速 (服務： Amazon S3；狀態碼： 503；錯誤代碼： 503 減速；」錯誤？
AWS 官方已更新 3 年前
要如何將 bucket-owner-full-control ACL 新增到 Amazon S3 中的物件？
AWS 官方已更新 2 年前
如何解決在將資料從 Amazon Aurora 上傳或下載至 Amazon S3 時收到的錯誤？
AWS 官方已更新 1 年前
我可以使用什麼 S3 儲存貯體政策才能符合 AWS Config 規則 s3-bucket-ssl-requests-only 的規定？
AWS 官方已更新 9 個月前