Glue 3.0出现SSE错误，但2.0没有

Question

【以下的问题经过翻译处理】 使用write\_dynamic\_frame.from\_options写入动态框架的相同作业在Glue 2.0中成功(像往常一样)，但在将版本更改为Glue 3.0时，出现以下错误消息而失败。有人遇到过这个问题并找到了原因或解决方法吗？

An error occurred while calling o90.pyWriteDynamicFrame. java.io.IOException: Unknown Server Side Encryption algorithm aws:kms

Answer

【以下的回答经过翻译处理】 我遇到了同样的问题。对我来说，解决方案是在读取文件时从使用"s3a" URI模式切换到只使用"s3"。
df = spark.read.json('s3a://...')

改写成这样：

df = spark.read.json('s3://...')

Conteúdo relevante