标记有以下标签的问题: AWS Glue
AWS Glue is a serverless data integration service that makes it easy to discover, prepare, and combine data for analytics, machine learning, and application development.
内容语言: 中文 (简体)
Select up to 5 tags to filter
排序方式 最新
浏览下面列出的问题和回答,或者筛选和排序以缩小结果范围。
【以下的问题经过翻译处理】 有没有简单的方法告诉Glue将整个Aurora MySQL模式/所有表格仅复制到Redshift?此外,如何告诉它持续运行并更新Redshift?
【以下的问题经过翻译处理】 在按照中提到的内容在本地启动 spark history server 并运行 spark ui 但在启动容器时出错
<https://docs.aws.amazon.com/glue/latest/dg/monitor-spark-ui-history.html> 报错信息如下:
```
2023-02-22 17:54:07 使用 Spark 的默认...
【以下的问题经过翻译处理】 您好,我们正尝试将Athena用作我们的数据消费服务。我们已将大多数Hive数据库/表从外部Hive元存储迁移到了AWS Glue,除了那些具有Hive ACID表的数据库,因为Glue不支持Hive ACID表。为了从Athena读取Hive...
【以下的问题经过翻译处理】 我有一个s3存储桶,路径如下:s3://a/b/c/products
在products文件夹中,每个版本都有一个文件夹(每个版本都是产品表的数据库快照,每周由工作流程获得)。
1. /version\_0
1. \_temporary
1. 0\_$folder$
2. part-00000-c5... ...c000.snappy.parquet
2....
【以下的问题经过翻译处理】 我正在运行一个Glue Job,并且收到以下错误信息:
JobName:... and JobRunId:... failed to execute with exception At least one security group must open all egress ports.To limit traffic, the source security...
【以下的问题经过翻译处理】 你好,我已创建了一个jdbc连接,用于连接到另一台托管在aws ec2实例上的mysql数据库。在创建连接时,我没有找到测试连接选项,我正在按照一个youtube视频来操作,其中他显示了测试连接的选项,但是在我的控制台中没有这样的选项。你能帮我解决这个问题吗?谢谢。
【以下的问题经过翻译处理】 我认为这可能是个愚蠢的问题,但我无法想出如何在Glue上简单地定期执行SQL转换脚本。我的目标是使用Glue调度Snowflake中包含的所有转换(因为我需要的所有数据都已经存在于Snowflake中)。
以下是我想要做的简化示例(将两个单独的销售表中的今天的销售数据插入到一个统一的销售表中):
```
INSERT INTO...
【以下的问题经过翻译处理】 你好,
AWS Glue 抓取器与 CSV 和 XML 分类器配合使用时,对于 UTF-8 编码的文件效果很好,但对于 UTF-16 编码的文件却不好用。
公共文档没有明确说明这一点:
* Glue 抓取器和分类器是否支持 UTF-16?
* 是否有关于 Glue 抓取器和分类器支持的编码的可用文档?
祝好,
Nicolas.
【以下的问题经过翻译处理】 我的客户希望通过Redshift Spectrum提供对由Lake...
【以下的问题经过翻译处理】 AWS合作伙伴正在为一个注重安全的客户设计一个数据仓库系统。该合作伙伴有以下与设计Redshift数据仓库和相关ETL管道相关的问题。我想请您帮忙确认以下问题的理解:
1. 总体上,从源系统到Amazon Redshift进行增量加载/CDC的推荐方法是什么?
2. 建议使用AWS Glue将数据从Amazon Redshift(热数据)导出到Amazon...
【以下的问题经过翻译处理】 我尝试设置跨账户的 Athena 访问权限。我能在目标账户下的 Lake formation、Glue 和 Athena 中看到数据库。一开始,我在目标 Athena 控制台中没有看到任何表格。在我在 Lake formation 控制台(目标账户)做了一些操作后,我才能在目标 Athena...
【以下的问题经过翻译处理】 我在aws-glue-libs:glue\_libs\_3.0.0\_image\_01镜像中遇到问题。
在本地启动正常,但在尝试读取本地存储的csv文件时出现错误:
遇到错误:
路径不存在:file:/home/glue\_user/workspace/employees.csv
Traceback (most recent call last):
File...