如何使用apache samza每秒处理120万条消息?

时间:2016-02-26 06:43:26

标签: apache-samza

现在我做了samza的基本设置。    之后,我处理来自kafka经纪人主题的1,00,000个json记录    每个记录的大小为100个字节    但每秒我只能处理11000条记录。    如何提高处理速度?

1 个答案:

答案 0 :(得分:0)

如果您需要更多经纪人,可以增加数字分区:

bin/kafka-topics.sh --zookeeper zoo:port/chroot --alter --topic TOPIC_NAME_CHANGE_ME --partitions 10 

所以nb partition == nb worker

有关详细信息:Documentation

相关问题