如何让Glue发现EventBridge的有效载荷以在通过CDK 进行Glue 表部署时使用?

0

【以下的问题经过翻译处理】 初次接触Glue和Athena。我跟着AWS社区创建者的一个很好的示例来学习。但是,在我的实际用例中,我想从EventBridge事件的“ detail”部分捕获所有字段,并创建列。这是多层嵌套的。我无法弄清schema 发现过程。我尝试将一个文本文件发布到S3并让Glue Crawler程序工作,但没有成功。

profile picture
专家
已提问 4 个月前39 查看次数
1 回答
0

【以下的回答经过翻译处理】 Glue Crawler是用于数据的,对元数据这样的东西可能不会很好地起作用。您可以运行一个AWS Lambda,使用pandas读取json事件(这将推断模式)。

但是,我的建议是不要使用CDK部署表(至少不要部署会变化的表),而是让代码/爬虫来维护它。根据您的描述,您正在尝试的这个东西(通过CDK部署表的变更)可能会有问题。

profile picture
专家
已回答 4 个月前

您未登录。 登录 发布回答。

一个好的回答可以清楚地解答问题和提供建设性反馈,并能促进提问者的职业发展。

回答问题的准则