ELK日志收集分析展示工具

elk是由elasticsearch&＃xff0c;logstash&＃xff0c;kibana这三个开源软件组成

• elasticsearch
  开源分布式搜索引擎&＃xff0c;它的特点有&＃xff1a;分布式&＃xff0c;零配置&＃xff0c;自动发现&＃xff0c;索引自动分片&＃xff0c;索引副本机制&＃xff0c;restful 风格接口&＃xff0c;多数据源&＃xff0c;自动搜索负载等

• logstash
  可以对你的日志进行收集&＃xff0c;过滤&＃xff0c;并将其存储&＃xff0c;供以后使用

• kibana
  kibana可以为logstash和elasticsearch提供一个友好的日志分析web界面&＃xff0c;可以帮助汇总&＃xff0c;分析和搜索重要的数据日志

• logstash收集appserver产生的log&＃xff0c;并存放到elasticsearch集群中&＃xff0c;而kibana则从elasticsearch集群中查询数据生成图表&＃xff0c;再返回给browser。步骤如下&＃xff1a;
  1&＃xff09;将日志进行集中化管理&＃xff08;beats&＃xff09;
  2&＃xff09;将日志格式化&＃xff08;logstash&＃xff09;
  3&＃xff09;对格式化后的数据进行索引和存储&＃xff08;elasticsearch&＃xff09;
  4&＃xff09;前端数据显示&＃xff08;kibana&＃xff09;

• beats是数据采集的得力工具&＃xff0c;将beats和你的容器一起置于服务器上&＃xff0c;或者将beats作为函数加以部署&＃xff0c;然后便可在elastisearch中集中处理数据。如果需要更加强大的处理性能&＃xff0c;beats还能将数据传输到logstash进行转换和分析