Can AWS Glue read data from different SQL Server table, generate csv files and zipping it to S3?

I need to load data from multiple tables in a SQL server to S3 for some batch processing. Can AWS Glue read data from different SQL Server table, generate csv files and zipping it to S3? And can AWS Glue run R script functions?

Themen

Speicher Analysen Datenbank

Tags

Amazon Simple Storage Service Analysen AWS Glue Data Lakes Daten extrahieren, transformieren & laden

Sprache

English

PhoenixRising

gefragt vor 2 Jahren472 Aufrufe

1 Antwort

Neueste
Die meisten Stimmen
Die meisten Kommentare

Akzeptierte Antwort

Hi,

yes, AWS Glue can read from multiple SQL Server tables,apply transformation with Spark (Pyhotn or Scala) and write to Amazon in S3 in different output format, compressed CSV is one of them.

As mentioned, AWS Glue is a Serverless Spark environment and you can build your jobs wit Python and Scala. R is not natively supported.

hope this helps

EXPERTE

Fabrizio@AWS

beantwortet vor 2 Jahren

EXPERTE

Giovanni Lauria

überprüft vor einem Monat

Relevanter Inhalt

Warum fügt meine MSCK REPAIR TABLE-Abfrage keine Partitionen zum AWS Glue Data Catalog hinzu?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie führe ich ein Upgrade oder Downgrade der Edition der SQL-Server-Engine in RDS for SQL Server durch?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie kann ich Benachrichtigungen über Fehlerereignisse in meiner RDS-for-SQL-Server-Instance erfassen und empfangen?
AWS OFFICIALAktualisiert vor 2 Jahren
Wie behebe ich den Fehler „JavasqlSQLException: No more data to read from socket“ (Keine weiteren Daten aus dem Socket ablesbar), wenn ich versuche, eine Verbindung zu meiner Amazon-RDS-for-Oracle-Instance herzustellen?
AWS OFFICIALAktualisiert vor 2 Jahren