开发者学堂课程【NiFi 知识精讲与项目实战(第二阶段):连接与关系总结】学习笔记,与课程紧密联系,让用户快速学习知识。
课程地址:https://developer.aliyun.com/learning/course/706/detail/12543
连接与关系总结
首先第一点是可以用来连接不同的处理器,连接的处理器是和关系有关的,通过的关系去进行路由,
其次,连接还可以去设置一个文件,文件过期的时间,也就是 flow file,过期的时间,这个作用就相当于当有一些数据,在的队列当中,这个保留的时间过长,而且还没有被消费,这个时候认为这是一些无效的数据,就可以把它给丢弃掉,
另外,还可以设置一个背压机制,可以是设置 flow file 的数量以及 flow file 的这个大小,来进行这个背压,如果超过了这两个值当中的任何一个值,这个队列就不允许再加入新的数据了。它的作用是防止 NiFi 服务出现数据溢出的问题,这个是的背压机制,
另外还有一个机制,是可以去设置负载均衡。通过这个负载均衡机制,就可以实现一个很好的集群,并行去出消费的问题,提升 NiFi 服务的一个并发量和处理的这个数据量的问题。之后就是这个链接可以去查看这个负载均衡,分发数据的一个状态信息,看看这个数据到底在哪一个节点,分别处理百分之多少,
还可以通过链接来设置,数据处理的消费的一个优先级,这个优先级也有多个选项,包括这个先入先出,后入先出以及根据这个流创建的时间长短,甚至可以根据某一个属性,非常灵活的来进行配置优先级,
之后还可以去更改链接的设置项,首先更改设置项之前,需要先停止相关联的处理器才能去更新的配置,
另外,在这个外观上面,可以去进行一些弯曲的链接,用处在于对数据流展现的时候会有一些帮助。