Flink-从流式传输到批处理-从另一个开始作业

时间:2018-10-19 08:45:02

标签: apache-flink flink-streaming

我想知道,是否有一种简单的方法可以从另一个作业启动Flink作业。

我有一个流作业,正在文件系统上侦听新文件,并且我需要以批处理方式处理(打包的)那些文件(文件之间的连接...)

所以我有批处理作业,但是我想从流作业启动它,以便可以在文件到达时对其进行处理

有没有办法做到美丽? 我虽然使用RestClusterClient。

通常,我想从流式处理转到批量处理
流式窗口中的窗口不允许我执行诸如批处理数据集API中的高级操作

另一个问题是,我们如何在主服务器(JobManager)上执行操作以在数据流中使用executionEnvironment而不是在工作线程上执行操作(使用“标准”操作)

感谢您的帮助
问候, 巴斯蒂安

0 个答案:

没有答案
相关问题