Apache Nifi 中的数据聚合

Question

我正在使用 Apache nifi 处理来自不同资源的数据，并且我为每个数据流创建了独立的管道。我想结合这些数据进行进一步处理。有什么方法可以聚合数据并将其写入单个文件。数据以 Nifi 中的流文件属性的形式存在。

Answer 1

您应该使用MergeContent处理器，它接受最小/最大批量大小等的配置值，并根据提供的合并策略将多个流文件合并到一个流文件中。