标记有以下标签的问题: AWS Glue
内容语言: 中文 (简体)
Select up to 5 tags to filter
排序方式 最新
浏览下面列出的问题和回答,或者筛选和排序以缩小结果范围。
【以下的问题经过翻译处理】 服务名称:AWS Glue
情况:在Glue数据目录中使用Web UI搜索框输入部分表名,搜索结果不正确。例如:
| 名称 | 数据库 | 位置 |
| --- | --- | --- |
| mqtt\_aapl | mydb | mylocation |
| mqtt\_goog | mydb | mylocation |
| mqtt\_tesla |...
1
回答
0
点赞数
33
检视次数
【以下的问题经过翻译处理】 我正在尝试使用复制规则和筛选器从一个包含多个目录的单个存储桶中复制/同步到另一个帐户中的多个不同存储桶。
但是我收到了以下错误提示:
“不同的目标存储桶ARN数量不能超过22个。”
为什么是22个?
是否有 AWS S3 复制规则的配额服务可以增加此限制?
1
回答
0
点赞数
33
检视次数
【以下的问题经过翻译处理】 我将JSON数据存储在S3上,然后在其上创建Glue表。这些数据被分区,我使用Glue爬虫更新表分区。然后,我将这些数据作为Glue作业中的Glue DynamicFrame加载。我使用Glue...
1
回答
0
点赞数
10
检视次数
【以下的问题经过翻译处理】 大家好,有没有最佳实践和推荐的工具可以将生产环境中的数据(在RDS / Dynamo / S3中)移动到dev,并具有检测和匿名化个人身份信息(PII)的能力?
1
回答
0
点赞数
23
检视次数
当没有数据时,如何不执行ETL作业脚本?lg...
【以下的问题经过翻译处理】 我有一个 Glue ETL 脚本,最终将通过S3 event trigger和Lambda执行。但目前我只是定期运行它。如果没有新数据,脚本运行会生成错误,因为我的转换过程有空的 DataFrames。
我用的是Bookmarks。我的摄取和导出部分都在使用转换上下文。但我的普通转换代码没有包装在任何 if...
1
回答
0
点赞数
7
检视次数
【以下的问题经过翻译处理】...
1
回答
0
点赞数
67
检视次数
在S3中使用Glue Crawler,返回403错误("ciphertext refers to a CMK that doesn't exist." (using SSE-S3, not KMS))lg...
【以下的问题经过翻译处理】 当我在一个S3存储桶上运行Glue Crawler时,出现以下错误:
> ERROR : Not all read errors will be logged. com.amazonaws.services.s3.model.AmazonS3Exception: The ciphertext refers to a customer master key that...
1
回答
0
点赞数
141
检视次数
【以下的问题经过翻译处理】 最近发布了Glue 3.0版本,与Glue 2.0相比,它标志着更新的Spark版本和相同的Python版本。据我了解,Glue 2.0仅更新了Spark类型的作业,而没有包括任何针对PyShell类型作业的内容。Glue 3.0是否为Glue PyShell带来了任何更新?即,PyShell是否仍在使用python 3.6?
1
回答
0
点赞数
64
检视次数
【以下的问题经过翻译处理】 我使用glue连接RDS postgreSQL数据库失败,返回如下失败信息:
参照JDBC 数据库的配置,检查您的连接定义是否使用正确的 URL 语法、用户名和密码。不支持身份验证类型 10。检查您是否已将 pg\_hba.conf 文件配置为包括客户端的 IP 地址或子网,并且它正在使用驱动程序支持的身份验证格式。
以错误代码 30...
1
回答
0
点赞数
74
检视次数