启动多个logstash并行消费kafka数据。
1.设置相同topic
2.设置相同groupid
3.设置不同clientid
4.input 的这个参数 consumer_threads => 10 多实列相加最好等于 topic分区数
如果一个logstash得参数大于topic,则topic数据都会被这个logstash消费掉
logstash_1

logstash_2

版权声明:本文为jyb199158原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。
启动多个logstash并行消费kafka数据。
1.设置相同topic
2.设置相同groupid
3.设置不同clientid
4.input 的这个参数 consumer_threads => 10 多实列相加最好等于 topic分区数
如果一个logstash得参数大于topic,则topic数据都会被这个logstash消费掉
logstash_1

logstash_2
