Apache Nifi 中的数据聚合

Question

我正在使用 Apache nifi 处理来自不同资源的数据，并且我为每个数据流创建了独立的管道。我想合并这些数据以进一步处理。有什么办法可以聚合数据并将其写入单个文件。数据在 Nifi 中以流文件属性的形式存在。

Answer 1

您应该使用 MergeContent 处理器，它接受 min/max 批量大小等的配置值，并根据提供的合并策略将多个流文件组合成一个流文件。