迁移与现代化中的问题
内容语言: 中文 (简体)
Select up to 5 tags to filter
排序方式 最新
浏览下面列出的问题和回答,或者筛选和排序以缩小结果范围。
【以下的问题经过翻译处理】 你好,
我在使用DMS进行数据同步时遇到了问题。每周目标Redshift集群进行维护工作会导致少量重复记录,其中一个cloudwatch日志中的错误提示是 `Failed to start rollback apply transaction`,看起来像是DMS无法撤销批处理操作,由于 `RecoverableErrorCount`...
1
回答
0
点赞数
32
检视次数
【以下的问题经过翻译处理】...
1
回答
0
点赞数
14
检视次数
【以下的问题经过翻译处理】 我有一个由我的Glue Job生成的pyspark脚本,旨在从S3存储桶中的CSV文件中读取数据并将其写入我的SQL RDS表中。
在我的CSV文件中,我有多行字符串。
如果解析后字符串中引号被正常解析,则作业通过,但在我的情况下,多行字符串中的引号未被正确解析,因此作业无法将数据插入我的表中;
我尝试过:
...
1
回答
0
点赞数
92
检视次数
【以下的问题经过翻译处理】 我有一个使用大写字符的表名和列名的RDS PostgreSQL数据库。我创建了一个Glue爬虫,通过JDBC连接到数据库,并在转化为数据目录时将大写字符转换为小写字符。当我运行Glue作业进行查询时,出现以下错误:
An error occurred while calling o94.getDynamicFrame. ERROR: column "id" does...
1
回答
0
点赞数
72
检视次数
【以下的问题经过翻译处理】 一位客户拥有一个MySQL数据库,希望将历史数据转移到另一个平台进行报告和分析。目前,他们在正常操作期间面临性能问题。
我需要考虑什么来做决定?我看到一个可能的方法是使用DMS...
1
回答
0
点赞数
36
检视次数
【以下的问题经过翻译处理】 IHAC 使用一组 RDS(250 个数据库,每个客户一个)实例用于 OLTP,另一组 RDS 使用转换后的数据进行分析。
他们所有的客户数据都必须进行隔离(目前大约有 250 个客户,但还在增加)。
他们正尝试使用 DMS 进行迁移,但遇到了问题。 RDS 到 RDS 对他们来说真的很慢,CDC 也不好用,所以他们改用了 RDS 到 S3,然后使用 Glue...
1
回答
0
点赞数
78
检视次数
【以下的问题经过翻译处理】 \*\*将数据从 RDS MySQL 传输到 S3 存储桶
\*\*
我设置了一个AWS Data Pipeline以将数据从 RDS Mysql 传输到 S3 Bucket,在此之前我使用用户名和密码设置了 RDS mysql 数据库。 (启用 IAM 身份验证)
似乎由数据管道创建的 EC2 无法访问数据库。
错误消息:(用户...
1
回答
0
点赞数
70
检视次数
AWS glue 中的转义字符lg...
【以下的问题经过翻译处理】 大家好,
我有一个 AWS Glue作业,从 s3 中读取 CSV 文件,并将数据注入到 MySQL RDS Aurora DB 的表中。
问题是 CSV 文件中所有带有转义字符的行都被Glue作业完全忽略,并且没有插入到表格当中。
例如,在我的 CSV 文件中,如下字符串的行被 glue 作业忽略:
>
> "Return "1" if the number...
1
回答
0
点赞数
43
检视次数
【以下的问题经过翻译处理】 你好,
目前我正在使用 DMS 来捕获数据库更改并将其发送到 Kafka。
我只对数据感兴趣(不包含 “data” 关键字的 JSON 内容),而不关心元数据。我正按照用户指南操作,特别是下面的配置,但不起作用。能否请你提供帮助。
我只对仅包含数据值的平面 JSON...
1
回答
0
点赞数
36
检视次数
S3批量文件出发Glue作业lg...
【以下的问题经过翻译处理】 我有一个AWS Glue作业,可以从S3读取20个CSV文件并将它们注入到MySQL RDS中。 这20个文件都在S3上,但它们不会在相同的时间到达。我应该如何配置Glue作业/事件规则,使得只有当所有20个文件都被上传到S3上时,自动触发Glue作业?谢谢。
1
回答
0
点赞数
24
检视次数
从Glue作业发送电子邮件lg...
【以下的问题经过翻译处理】 我有一个AWS Glue作业,可以从S3中读取数据并将其注入RDS MySQL中。
我正在尝试在作业结束时(从pySpark...
1
回答
0
点赞数
39
检视次数
如何在Glue Job 中调用存储过程lg...
【以下的问题经过翻译处理】 团队您好,
我希望在glue job结束时(在gluejob内部),调用我的存储过程,
能否在不使用py4j的情况下,从pyspark glue Job 连接 mySQL...
1
回答
0
点赞数
28
检视次数