kafka没有消费数据或者是flume消息没有完成.completed/.COMPLETED

问题:集群实时的sparkstreaming:flume+kafka消息被sparkstreaming实时消费,数据从data-->到flumedata却没有被标注.COMPLETED

原因:多次执行造成flume里面的数据挤压,以至于导致一份数据并未完成状态。堵塞了。

解决:

查看flume日子,分析问题

重启flume,消费掉里面的数据,稍等便可以传递数据了。

 

 


版权声明:本文为weixin_43537911原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。