kafka没有消费数据或者是flume消息没有完成.completed/.COMPLETED_flume完成的文件没有complete

作者：Gausst松鼠会 | 2024-05-22 01:25:49

踩

flume完成的文件没有complete

问题：集群实时的sparkstreaming：flume+kafka消息被sparkstreaming实时消费，数据从data-->到flumedata却没有被标注.COMPLETED

原因：多次执行造成flume里面的数据挤压，以至于导致一份数据并未完成状态。堵塞了。

解决：

查看flume日子，分析问题

重启flume,消费掉里面的数据，稍等便可以传递数据了。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/Gausst松鼠会/article/detail/605668