如何将Kinesis数据分析Flink应用程序与在Amazon EC2上运行的自管理Kafka集群集成(不是Amazon MSK)?

0

【以下的问题经过翻译处理】 用户希望构建一个实时应用程序,其中的数据存储在Kafka集群中。Kafka正在AWS上运行,不使用MSK而是使用K8S。如何将Kinesis数据分析Flink应用程序与Kafka集成所需的步骤是什么?

profile picture
专家
已提问 5 个月前24 查看次数
1 回答
0

【以下的回答经过翻译处理】 这和从Amazon MSK读取数据非常相似。使用Kinesis Data Analytics (KDA)从Kafka(或Amazon MSK)消费数据基本上意味着在代理和任务管理器之间建立网络连接。使用KDA,您可以启用VPC支持,以便将任务管理器的ENI暴露在您指定的子网中。如果您然后正确配置ENI的安全组,您的Flink应用程序应该能够连接到Kafka代理。请参阅以下参考文献:

profile picture
专家
已回答 5 个月前

您未登录。 登录 发布回答。

一个好的回答可以清楚地解答问题和提供建设性反馈,并能促进提问者的职业发展。

回答问题的准则