如何设置/访问 AWS Glue Job 和 Notebook的 Spark UI

0

【以下的问题经过翻译处理】 在Glue作业中,勾选复选框可以启用Spark UI,并指定一个S3路径作为日志存储的位置。那该如何访问Spark UI的URL?

profile picture
エキスパート
質問済み 5ヶ月前64ビュー
1回答
0

【以下的回答经过翻译处理】 要想查看这些日志,您需要部署自己的历史服务器,可以使用CloudFormation模板、docker容器(也可以从Spark发行版本中本地运行历史服务器,但添加s3支持需要一些工作)。 请参考以下步骤: https://docs.aws.amazon.com/glue/latest/dg/monitor-spark-ui-history.html

profile picture
エキスパート
回答済み 5ヶ月前

ログインしていません。 ログイン 回答を投稿する。

優れた回答とは、質問に明確に答え、建設的なフィードバックを提供し、質問者の専門分野におけるスキルの向上を促すものです。

質問に答えるためのガイドライン

関連するコンテンツ