ELK新手教程——pomelo+log4js+ELK（一）

随着项目越来越庞大&＃xff0c;日志的数量也随之增多&＃xff0c;游戏上线后的日志量肯定更多了&＃xff0c;所以对日志的收集、存储、查询就非常重要了&＃xff0c;开源界第一日志分析系统ELK必不可少。

ELK系统由Elasticsearch&＃xff08;分布式存储搜索服务器&＃xff09;、Logstash&＃xff08;日志收集服务器&＃xff09;和Kibana&＃xff08;Elasticsearch前端展示工具&＃xff09;三个开源工具组成。

ELK工作原理展示图&＃xff1a;

如上图所示&＃xff0c;Logstash收集AppServer产生的Log&＃xff0c;并存放到Elasticsearch集群中&＃xff0c;而Kibana则从ES集群中查询数据&＃xff0c;最后通过Browser&＃xff08;浏览器&＃xff09;展示查询结果。

下图是博主自己建立ELK系统的计划用时与实际用时对比图&＃xff0c;大家可以参考下&＃xff1a;

接下来&＃xff0c;我们先学习ELK三个工具的部署安装&＃xff0c;并试验你的第一个例子。

一、elasticsearch 部署安装

1、官网下载ZIP

2、解压

3、进bin目录&＃xff1a;G:\elasticsearch-5.6.3\elasticsearch-5.6.3\bin&＃xff0c;shift&＃43;右键 --》 “此处打开命令行”&＃xff0c;输入&＃xff1a;elasticsearch 

4、报错&＃xff1a;elasticsearch missing &＃96;server&＃39; JVM at &＃96;C:\Program Files (x86)\Java\jre1.8.0\bin\server\jvm.dll&＃39;.

　  解决办法&＃xff1a;jdk1.8.0\jre\bin\server 整个文件夹&＃xff0c;复制到 jre1.8.0\bin 里面

5、继续执行第3步&＃xff0c;输入&＃xff1a;elasticsearch 

6、报错&＃xff1a;

　　Error occurred during initialization of VM
　　Could not reserve enough space for 2097152KB object heap

      解决办法&＃xff1a;G:\elasticsearch-5.6.3\elasticsearch-5.6.3\config\jvm.options&＃xff0c;修改jvm.options文件的22,23行&＃xff0c;

 

启动ES成功&＃xff0c;打开地址&＃xff1a;http://localhost:9200/    

 

 

 

二、logstash 部署安装

1、下载ZIP

2、解压

3、找到 G:\ELK\logstash-5.6.3\config\jvm.options&＃xff0c;修改其中JVM的内存配置为512m&＃xff0c;6、7行

　　　6 -Xms2g

           7 -Xmx2g

          改成&＃xff1a; -Xms512m

                      -Xmx512m

4、进行最简单的管道测试&＃xff0c;进入 G:\ELK\logstash-5.6.3\bin 目录&＃xff0c;shift&＃43;右键 "此处打开命令行"  输入&＃xff1a;logstash -e &＃39;input { stdin { } } output { stdout {} }&＃39;

 

 

5、可以看到Pipeline main started&＃xff0c;此时命令行已经准备好你的输入了&＃xff0c;我们输入“hello world”

 

 

6、至此&＃xff0c;我们确认logstash安装部署成功。&＃xff08;你也可以试试执行命令&＃xff1a; logstash -e &＃39;&＃39;&＃xff0c;看看会输出什么&＃xff09;

 

 三、Kibana部署安装

1、下载ZIP

2、解压

3、进入G:\ELK\kibana-5.6.3-windows-x86\bin 目录&＃xff0c;shift&＃43;右键 "此处打开命令行"  &＃xff0c;运行kibana.bat&＃xff0c;结果如下图&＃xff1a;

 

 

注意&＃xff1a;Kibana是基于Elastcisearch的前端显示工具&＃xff0c;运行前要确认Elasticsearch服务已经开启&＃xff0c;否则将会报错。

4、访问http://localhost:5601/&＃xff0c;会看到&＃xff1a;

 

 

 5、至此&＃xff0c;Kibana已经成功安装部署。