Hadoop生态圈-Flume的主流source源配置
作者:尹正杰
版权声明:原创作品,谢绝转载!否则将追究法律责任。
本篇博客只是配置的是Flume主流的Source,想要了解更详细的配置信息请参考官网:http://flume.apache.org/FlumeUserGuide.html#flume-sources.
一.Avro Source配置详解
1>.Avro Source功能
答:多用作跃点, 真正的分布式收集。
2>.官网文档介绍
3>.实际配置参数如下:
4>.测试结果
二. 执行源(Exec Source)
1>.Exec Source 作用
答:通过linux命令作为source,然后通过这个命令产生所需要的数据。缺点:失败后数据会丢失,不能保证数据的完整性
2>.官网文档介绍
3>.实际配置参数
4>.测试结果
三.
四.
五.