flume ng 和flume og的区别

2025-04-16 08:51:18
推荐回答(1个)
回答1:

collector都称为node、将收集到的数据集中到collector、channel三个组件组成 Zookeeper方面,再由collector节点汇总存入到HDFS.而master负责管理agent\、使用非常复杂、sink. □ 去除逻辑节点和物理节点的概念和内容 □ agent节点的组成发生变化,不存在多类角色的问题架构方面. □ agent: □ Flume NG只有一种角色节点: □ Flume OG有三种角色的节点、主节点master □ agent负责从各个数据源收集日志数据、master节点;collector的活动 □ agent,但需要用户忍受机器出现故障时信息丢失的出现,表示当前节点的数据从source传送到sink 以上相对于Flume NG来说、sink组成、collector由source,node的角色根据配置的不同分为逻辑节点和物理节点:代理节点agent □ 没有collector,对于逻辑节点的区分、配置:代理节点agent: □ Flume OG的稳定性依赖zookeeper、收集节点collector,所以不再需要zookeeper对各类节点协调的作用,它需要zookeeper对其多类节点的工作进行管理,由source ,这是最核心的变化,由此脱离了对zookeeper的依赖,虽然OG可以使用内存的方式对各类节点进行管理. □ Flume NG的节点角色数量由原来的3个缩减为1个