实时监控hive日志文件,并上传到hdfs

1:将Hadoop相关jar包放到/opt/module/flume/lib文件夹下

  

2:在flume/job文件夹下创建 flume-file-hdfs.conf文件

3:在配置文件中添加如下配置

   

  

   

4:在flume根目录执行监控配置

  

5:开启hdfs、yarn、hive

6:执行hive操作产生日志

7:在hdfs网页查看文件

  

猜你喜欢

转载自www.cnblogs.com/lihui001/p/12675843.html