卡夫卡反应缓慢

时间:2018-10-11 06:50:32

标签: apache-spark apache-kafka spark-streaming

我有一个运行在CDH 5.13中的Spark流(Scala)应用程序,它使用来自客户端0.10.0的来自Kafka的消息。我的Kafka集群包含3个经纪人。 Kafka主题分为12个分区,在这3个代理之间平均分配。我的Spark流使用者有12个执行器,每个执行器具有1个核心。 根据Kafka的记录,有时会在请求后3分钟以上从Kafka返回响应。 如此延误的原因可能是什么? this issue可能是根本原因,如果是,该问题的解决方案是什么?

0 个答案:

没有答案