ElasticSearch构建千亿级日志分析系统-实时分析

  1、背景介绍 随着业务系统的复杂度上升,单应用无法适用业务场景,分布式系统已经成为目前服务器的常用解决方案。 随之而来的是分析问题变得困难,需要跨多个模块进行分析定位,涉及的应用节点几十上百个,需要一套日志收集与分析架构来满足我们的日常问题定位。 下图是一个实时日志采集系统架构:   分为采集器、消息队列、处理器、存储分析四个模块。 2、采集器 采集各个源头日志上报到消息队列,这里用到了四个采
相关文章
相关标签/搜索