NIFI存储可以扩展吗?

Can NIFI storage be extended?

我有 2 个站点(FE 和 BE),每个站点都需要安装 NIFI 集群。 FE站点需要使用站点到站点协议将数据传输到BE站点。

我知道站点之间有时会出现连接问题。由于不想丢失数据,是否可以将FE NIFI集群配置为在站点间断网的情况下保留数据2-3天?我知道它需要更多磁盘 space

如果可能的话,我需要扩展内容或流程文件的哪个存储库?以及如何做到?

如果目标集群变得不可用并导致源集群中的背压(队列填满),您可以增加队列的总可用大小以增加它保持的背压。在要增加的队列上右键单击 -> 配置,然后调整 'Back Pressure...Threshold'(您可以调整 FF 的数量和以 GB 为单位的大小)。您的 FF 内容存储库需要有足够的磁盘 space 来容纳您的配置。

如果它没有在前一个队列中造成背压,您可以从失败关系中分支出来并选择您如何处理它 - 您可以写入磁盘并重新摄取,或者您可以进行重试循环并增加这里有背压。