How to merge multiple files from S3 bucket into a single file?

I am very new to AWS S3. Currently my database is ingesting the log file into S3 bucket for each month. I would like to merge the files which are currently available in my bucket and save it as one file in the same bucket. All the files are in csv format.

Could anyone please help me on this?

Themen

Speicher

Tags

Amazon Simple Storage Service

Sprache

English

aws_finder

gefragt vor 6 Monaten2292 Aufrufe

1 Antwort

Neueste
Die meisten Stimmen
Die meisten Kommentare

Sind diese Antworten hilfreich? Stimmen Sie der richtigen Antwort zu, damit die Community von Ihrem Wissen profitieren kann.

Hi,

I'd suggest to follow the question https://stackoverflow.com/questions/32448416/amazon-s3-concatenate-small-files on StackOverflow: it explains why and how you should do it + provides the Python code to do it on cloud (you don't want to dowload and re-upload)

Best

Didier

EXPERTE

Didier_Durand

beantwortet vor 6 Monaten

EXPERTE

Kallu

überprüft vor 6 Monaten

Relevanter Inhalt

Wie behebe ich den Fehler „Unable to validate the following destination configurations“ in AWS CloudFormation?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie erstelle ich ein AWS Storage Gateway S3-File Gateway mit Amazon EC2 als Host-Plattform?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie verwende ich benutzerdefinierte Ressourcen mit Amazon S3-Buckets in CloudFormation?
AWS OFFICIALAktualisiert vor 2 Jahren
Warum erhalte ich die Fehlermeldung „Unable to validate the following destination configurations“, wenn ich eine Amazon S3-Ereignisbenachrichtigung erstelle?
AWS OFFICIALAktualisiert vor 8 Monaten