3.Flume 简介

1.Flume 简介

Flume 是一个分布式，可靠的日志收集服务。

2. Flume 核心概念

• Client ：产生数据。
• Event ：一个数据单元，消息头和消息体组成。
• Flow ：Event从源头到达目的点的迁移的抽象。
• Agent：一个独立的Flume进程，包含组件Source，Channel，Sink
• Source 数据收集组件
• Channel 中转Event的临时存储。像一个队列。
• Sink 从Channel中读取并移除Event。

3. Flume 架构

3.1 基本模型

3.2 多个串联

3.3 多个合并

3.4 多路传输