日志收集系统架构


Mon 06 Mon 13 Log Agent Kafka ES Hadoop Storm 日志收集系统 日志收集系统架构

各组件介绍

  • Log Agent 日志收集客户端,用来收集服务器上的日志
  • Kafka 高吞吐量的分布式队列 linkin开发 apache顶级开源项目
    • 异步处理,把非关键流程异步化,提高系统的响应时间和健壮性
    • 应用解耦,通过消息队列
    • 流量削峰
  • ES elasticesearch 开源的搜索引擎 提供基于http restful的web接口
  • Hadoop 分布式计算框架 能够对大量数据进行分布式处理的平台

猜你喜欢

转载自blog.csdn.net/IF_Albert/article/details/83351589
今日推荐