Flink 异常 - 10.checkpoint Failure reason: Not all required tasks are currently running

作者：煮酒与君饮 | 2024-07-28 11:35:18

踩

not all required tasks are currently running

一.引言

Flink 程序增加 readFile 生成文件流后，最初运行期间 CheckPoint 存储没有问题，待文件流 Finished 后 CheckPoint 存储报错: checkpoint Failure reason: Not all required tasks are currently running，下面分析并解决下。

二.错误分析与解决

1.问题排查

Flink 场景下实现多流 uinon 并存储 ValueState，除了实时流的内容外，还需要将一个固定文件的内容进行 union 处理，所以出现如下 Overview:

最左边的 Source: Custom File Source 就是单独增加的文件流，由于是固定文件且逻辑简单，所以执行开始时 Busy 打的比较高，在此期间查看 RockerDB 指定 path 下存储的 chk 是没有问题的。

但是由于固定文件内数据量有限，处理完毕后，该 File Source 由

声明：本文内容由网友自发贡献，转载请注明出处：【wpsshop博客】