我计划在 Kubernetes 上设置 Apache Nifi 并将其投入生产。在我的冲浪过程中,我没有找到任何可能使用这种组合进行生产设置的人。
选择这种组合是个好主意吗?您能否在这里分享您的想法/经验。
https://community.cloudera.com/t5/Support-Questions/NiFi-on-Kubernetes/td-p/203864
installation production kubernetes apache-nifi apache-nifi-registry
我们已经开始在很多数据管道工作中使用 NiFi。Nifi 中具有挑战性的一件事是对流的变化进行回归测试。
处理 NiFi 流的单元和功能测试的常用方法有哪些?有没有框架?
是否可以使用REST API将外部数据(不是NiFi流)存储到NiFi注册表中?
https://nifi.apache.org/docs/nifi-registry-docs/index.html
据我所知,NiFi Registry专为版本化NiFi流程而设计.但我想知道它是否能够将其他数据存储到NiFi注册表中并根据版本检索它.
我在 NiFi 注册表 0.3 中使用 GitFlowPersistenceProvider。今天,我创建了另一个 NiFi 注册表,我想使用相同的提供程序加载前一个注册表中的所有流。不幸的是,没有任何反应 - 任何存储桶或流都不会重新创建。我尝试手动创建所有存储桶,但即使如此,也不会导入任何流。
GitFlowPersistenceProvider 文档指出:
当 NiFi 注册表启动时,该提供程序会读取 Git 提交历史记录并查找这些bucket.yml 文件以恢复每个快照版本的存储桶和流。
我应该如何使用 GitFlowPersistenceProvider 将现有流加载到新的 NiFi 注册表中?