是否有像 Nifi 或 Streamsets 数据收集器这样的可视化编程环境用于 flink 或 beam-filnk

Question

我正在寻找一种可视化编程工具，在创建数据流以在 Flink 或 Beam-Flink 中构建 CEP 应用程序时抽象出编码。像 Nifi 或 Streamsets 数据收集器图形设计器之类的东西。

有人知道这样的项目吗？

Answer 1

不幸的是，目前开源生态系统中还没有这样一个可视化管道构建工具。

也就是说，这并不是一个无法解决的问题——在 Apache Beam 中，它是通过BEAM-266进行跟踪的，并且可以想象，这将成为中期项目的一部分。

在开源之外，还有一些基于 Apache Beam 构建的商业工具，可以提供类似的功能，但范围有所缩小（例如，数据准备）——请查看 Talend、Google Cloud 和其他公司提供的工具。