Centos7下使用ELK（Elasticsearch+Logstash+Kibana）搭建日志集中分析平台

作者：loveyao123456 | 来源：互联网 | 2023-05-19 03:52

日志监控和分析在保障业务稳定运行时，起到了很重要的作用，不过一般情况下日志都分散在各个生产服务器，且开发人员无法登陆生产服务器，这时候就需要一个集中式的日志收集装置，对日志中的关键字进行监

日志监控和分析在保障业务稳定运行时，起到了很重要的作用，不过一般情况下日志都分散在各个生产服务器，且开发人员无法登陆生产服务器，这时候就需要一个集中式的日志收集装置，对日志中的关键字进行监控，触发异常时进行报警，并且开发人员能够查看相关日志。logstash+elasticsearch+kibana3就是实现这样功能的一套系统，并且功能更强大。

　　Logstash：负责日志的收集，处理和储存

　　Elasticsearch：负责日志检索和分析

　　Kibana：负责日志的可视化

环境介绍

server端：

OS:centOS7

IP:192.168.3.95

FQDN:elk.server.com

elkClient

　　　　IP:192.168.5.152

　　　　OS：Centos6.5

elk 使用软件包

ELK服务端安装

安装jdk1.7

yum -y install java-1.7.0-openjdk

安装elasticsearch

yum localinstall elasticsearch-1.7.3.noarch.rpm

启动服务

systemctl daemon-reload

systemctl enable elasticsearch.service（设置开机启动）

systemctl start elasticsearch.service （开启服务）

systemctl status elasticsearch.service（查看服务状态）

查看安装软件包

rpm -qc elasticsearch

查看端口监听情况

netstat -nltp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name

tcp 0 0 0.0.0.0:111 0.0.0.0:* LISTEN 1/systemd

tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 1256/nginx: master

tcp 0 0 192.168.122.1:53 0.0.0.0:* LISTEN 3060/dnsmasq

tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 1266/sshd

tcp 0 0 127.0.0.1:25 0.0.0.0:* LISTEN 2035/master

tcp 0 0 127.0.0.1:9000 0.0.0.0:* LISTEN 1285/php-fpm: maste

tcp6 0 0 :::111 :::* LISTEN 1/systemd

tcp6 0 0 :::9200 :::* LISTEN 10867/java

tcp6 0 0 :::9300 :::* LISTEN 10867/java

tcp6 0 0 :::22 :::* LISTEN 1266/sshd

tcp6 0 0 ::1:25 :::* LISTEN 2035/master

防火墙添加端口

firewall-cmd --permanent --add-port={9200/tcp,9300/tcp}

重载防火墙

firewall-cmd –reload

查看防火墙开放端口

[root@localhost elk安装]# firewall-cmd --list-all

public (active)

target: default

icmp-block-inversion: no

interfaces: br0

sources:

services: dhcpv6-client ssh ipsec xl2tpd

ports: 3306/tcp 9200/tcp 9300/tcp

protocols:

masquerade: yes

forward-ports:

source-ports:

icmp-blocks:

rich rules:

安装kibana

解压缩安装包到指定目录中

tar -zxvf kibana-4.1.2-linux-x64.tar.gz -C /usr/local

cd /usr/local/

root@localhost local]# ls

bin etc games include kibana-4.1.2-linux-x64 lib lib64 libexec mysql nginx php php7 sbin share src

重命名

mv kibana-4.1.2-linux-x64/ kibana

cd kibana

[root@localhost kibana]# ls

bin config LICENSE.txt node plugins README.txt src

[root@localhost kibana]# cd bin/

[root@localhost bin]# ls （运行./kibana即可开启服务，但我们将其做到service ）

kibana kibana.bat

[root@localhost bin]# cd /etc/systemd/system

[root@localhost system]# vi kibana.service （编辑kibana服务）

[Service]

ExecStart=/usr/local/kibana/bin/kibana

[Install]

WantedBy=multi-user.target

设置开机自启动

[root@localhost system]# systemctl enable kibana.service

Created symlink from /etc/systemd/system/multi-user.target.wants/kibana.service to /etc/systemd/system/kibana.service.

开启服务

[root@localhost system]# systemctl start kibana.service

查看服务运行状态

[root@localhost system]# systemctl status kibana.service

● kibana.service

Loaded: loaded (/etc/systemd/system/kibana.service; enabled; vendor preset: disabled)

Active: active (running) since Tue 2017-10-24 21:43:02 EDT; 4min 37s ago

Main PID: 19247 (node)

CGroup: /system.slice/kibana.service

└─19247 /usr/local/kibana/bin/../node/bin/node /usr/local/kibana/bin/../src/bin/kibana.js

Oct 24 21:43:02 localhost.localdomain systemd[1]: Started kibana.service.

Oct 24 21:43:02 localhost.localdomain systemd[1]: Starting kibana.service...

Oct 24 21:43:07 localhost.localdomain kibana[19247]: {"name":"Kibana","hostname":"localhost.localdomain","pid":19247,"level":30,"msg":"No existing kibana index f...2Z","v":0}

Oct 24 21:43:07 localhost.localdomain kibana[19247]: {"name":"Kibana","hostname":"localhost.localdomain","pid":19247,"level":30,"msg":"Listening on 0.0.0.0:5601"...9Z","v":0}

Hint: Some lines were ellipsized, use -l to show in full.

查看端口监听状态

[root@localhost system]# netstat -nltp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name

tcp 0 0 0.0.0.0:111 0.0.0.0:* LISTEN 1/systemd

tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 1256/nginx: master

tcp 0 0 192.168.122.1:53 0.0.0.0:* LISTEN 3060/dnsmasq

tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 1266/sshd

tcp 0 0 127.0.0.1:25 0.0.0.0:* LISTEN 2035/master

tcp 0 0 0.0.0.0:5601 0.0.0.0:* LISTEN 19247/node

tcp 0 0 127.0.0.1:9000 0.0.0.0:* LISTEN 1285/php-fpm: maste

tcp6 0 0 :::111 :::* LISTEN 1/systemd

tcp6 0 0 :::9200 :::* LISTEN 10867/java

tcp6 0 0 :::9300 :::* LISTEN 10867/java

tcp6 0 0 :::22 :::* LISTEN 1266/sshd

tcp6 0 0 ::1:25 :::* LISTEN 2035/master

为5601端口添加80端口的映射，这样在浏览器中就可以不用输入端口了

[root@localhost system]# firewall-cmd --permanent --add-forward-port=port=80:proto=tcp:toport=5601

Success

重载防火墙

[root@localhost system]# firewall-cmd --reload

Success

查看防火墙开放端口

[root@localhost system]# firewall-cmd --list-all

public (active)

target: default

icmp-block-inversion: no

interfaces: br0

sources:

services: dhcpv6-client ssh ipsec xl2tpd

ports: 3306/tcp 9200/tcp 9300/tcp

protocols:

masquerade: yes

forward-ports: port=80:proto=tcp:toport=5601:toaddr=

source-ports:

icmp-blocks:

rich rules:

安装logstash

[root@localhost system]# cd /usr/local/src/elk安装/

Yum 本地安装logstash

[root@localhost elk安装]# yum localinstall logstash-1.5.4-1.noarch.rpm

查看当前 FQDN ， FQDN 设置参见 http://www.cnblogs.com/zhenyuyaodidiao/p/4947930.html

[root@localhost elk安装]# hostname -f

elk.server.com

进入到/etc/pki/tls/文件夹

[root@localhost elk安装]# cd /etc/pki/tls/

[root@localhost tls]# ls

cert.pem certs misc openssl.cnf private

以下生成openssl key用于客户端上传日志文件用，在客户端配置时会用到

root@localhost tls]# openssl req -subj '/CN=elk.server.com/' -x509 -days 3650 -batch -nodes -newkey rsa:2048 -keyout private/logstash-forwarder.key -out certs/logstash-forwa

rder.crtGenerating a 2048 bit RSA private key

..........................+++

........+++

writing new private key to 'private/logstash-forwarder.key'

-----

[root@localhost tls]# ls

cert.pem certs misc openssl.cnf private

[root@localhost tls]# cd private/

[root@localhost private]# ll

total 4

-rw-r--r-- 1 root root 1708 Oct 24 22:44 logstash-forwarder.key

[root@localhost private]# cd ../certs/

[root@localhost certs]# ll

total 16

lrwxrwxrwx. 1 root root 49 Jun 1 13:46 ca-bundle.crt -> /etc/pki/ca-trust/extracted/pem/tls-ca-bundle.pem

lrwxrwxrwx. 1 root root 55 Jun 1 13:46 ca-bundle.trust.crt -> /etc/pki/ca-trust/extracted/openssl/ca-bundle.trust.crt

-rw-r--r-- 1 root root 1107 Oct 24 22:44 logstash-forwarder.crt

-rwxr-xr-x 1 root root 610 Feb 20 2017 make-dummy-cert

-rw-r--r-- 1 root root 2388 Feb 20 2017 Makefile

-rwxr-xr-x 1 root root 829 Feb 20 2017 renew-dummy-cert

[root@localhost certs]# cd /etc/logstash/conf.d/

[root@localhost conf.d]# ls

编辑 logstash 配置文件

[root@localhost conf.d]# vi 01-logstash-initial.conf

input {

lumberjack {

port => 5000

type => "logs"

ssl_certificate => "/etc/pki/tls/certs/logstash-forwarder.crt"

ssl_key => "/etc/pki/tls/private/logstash-forwarder.key"

}

filter {

if [type] == "syslog" {

grok {

match => { "message" => "%{SYSLOGTIMESTAMP:syslog_timestamp} %{SYSLOGHOST:syslog_hostname} %{DATA:syslog_program}(?:\[%{POSINT:syslog_pid}\])?: %{GREEDYDATA:syslog_message}" }

add_field => [ "received_at", "%{@timestamp}" ]

add_field => [ "received_from", "%{host}" ]

}

syslog_pri { }

date {

match => [ "syslog_timestamp", "MMM d HH:mm:ss", "MMM dd HH:mm:ss" ]

}

output {

elasticsearch { host => localhost }

stdout { codec => rubydebug }

}

设置开机自启动

[root@localhost conf.d]# systemctl enable logstash

logstash.service is not a native service, redirecting to /sbin/chkconfig.

Executing /sbin/chkconfig logstash on

开启logstasg服务

[root@localhost conf.d]# systemctl start logstash.service

查看服务运行状态

[root@localhost conf.d]# systemctl status logstash.service

● logstash.service - LSB: Starts Logstash as a daemon.

Loaded: loaded (/etc/rc.d/init.d/logstash; bad; vendor preset: disabled)

Active: active (running) since Tue 2017-10-24 22:54:20 EDT; 14s ago

Docs: man:systemd-sysv-generator(8)

Process: 20017 ExecStart=/etc/rc.d/init.d/logstash start (code=exited, status=0/SUCCESS)

CGroup: /system.slice/logstash.service

└─20023 java -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -Djava.awt.headless=true -XX:CMSInitiatingOccupancyFraction=75 -XX:+UseCMSInitiatingOccupancyOnly -Djava.i...

Oct 24 22:54:20 elk systemd[1]: Starting LSB: Starts Logstash as a daemon....

Oct 24 22:54:20 elk logstash[20017]: logstash started.

Oct 24 22:54:20 elk systemd[1]: Started LSB: Starts Logstash as a daemon..

[root@localhost conf.d]# netstat -nltp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name

tcp 0 0 0.0.0.0:111 0.0.0.0:* LISTEN 1/systemd

tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 1256/nginx: master

tcp 0 0 192.168.122.1:53 0.0.0.0:* LISTEN 3060/dnsmasq

tcp 0 0 0.0.0.0:22 0.0.0.0:* LISTEN 1266/sshd

tcp 0 0 127.0.0.1:25 0.0.0.0:* LISTEN 2035/master

tcp 0 0 0.0.0.0:5601 0.0.0.0:* LISTEN 19247/node

tcp 0 0 127.0.0.1:9000 0.0.0.0:* LISTEN 1285/php-fpm: maste

tcp6 0 0 :::111 :::* LISTEN 1/systemd

tcp6 0 0 :::9200 :::* LISTEN 10867/java

tcp6 0 0 :::9300 :::* LISTEN 10867/java

tcp6 0 0 :::9301 :::* LISTEN 20023/java

tcp6 0 0 :::22 :::* LISTEN 1266/sshd

tcp6 0 0 ::1:25 :::* LISTEN 2035/master

tcp6 0 0 :::5000 :::* LISTEN 20023/java

[root@localhost conf.d]# cd /var/log/logstash/

[root@localhost logstash]# ls

logstash.err logstash.log logstash.stdout[root@localhost logstash]# firewall-cmd --permanent --add-port=5000/tcp

success

[root@localhost logstash]# firewall-cmd --reload

success

[root@localhost logstash]# firewall-cmd --list-all

public (active)

target: default

icmp-block-inversion: no

interfaces: br0

sources:

services: dhcpv6-client ssh ipsec xl2tpd

ports: 3306/tcp 9200/tcp 9300/tcp 5000/tcp

protocols:

masquerade: yes

forward-ports: port=80:proto=tcp:toport=5601:toaddr=

source-ports:

icmp-blocks:

rich rules:

Client端安装

[root@bihu ~]# vim /etc/hosts

127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4

::1 localhost localhost.localdomain localhost6 localhost6.localdomain6

192.168.5.153 ns.bihu.com.

192.168.3.95 elk.server.com（新添加解析）

[root@bihu ~]# service network restart

关闭环回接口： [确定]

弹出环回接口： [确定]

弹出界面 Auto_eth2：错误：没有找到合适的设备：没有找到可用于连接 'Auto eth2' 的设备。

[失败]

弹出界面 Auto_eth3：活跃连接状态：激活中

活跃连接路径：/org/freedesktop/NetworkManager/ActiveConnection/1

状态：激活的

连接被激活 [确定]

测试连接

[root@bihu ~]# ping elk.server.com

PING elk.server.com (192.168.3.95) 56(84) bytes of data.

64 bytes from elk.server.com (192.168.3.95): icmp_seq=1 ttl=63 time=37.0 ms

64 bytes from elk.server.com (192.168.3.95): icmp_seq=2 ttl=63 time=37.7 ms

--- elk.server.com ping statistics ---

3 packets transmitted, 2 received, 33% packet loss, time 2029ms

rtt min/avg/max/mdev = 37.002/37.362/37.722/0.360 ms

root@bihu ~]# cd /usr/local/src/

[root@bihu src]# ls

boost_1_45_0 hadoop-2.7.3 libmcrypt-2.5.8 mongodb-linux-x86_64-3.0.6 nginx-1.8.1 php-5.6.16 phpmyadmin pydash redis-3.2.4

FastDFS libevent-2.0.21-stable mongodb mysql-5.7.19.tar.gz pcre-8.39 php-7.1.3 phpredis-2.2.4 Python-3.5.0 zabbix-2.0.6

[root@bihu src]#

[root@bihu src]# mkdir elk

[root@bihu src]# cd elk/

拷贝logstash-forwarder-0.4.0-1.x86_64.rpm到本地

[root@bihu elk]# scp root@192.168.3.95:/usr/local/src/elk安装/logstash-forwarder-0.4.0-1.x86_64.rpm .

The authenticity of host '192.168.3.95 (192.168.3.95)' can't be established.

RSA key fingerprint is c4:e9:8f:db:9e:d7:4f:91:77:d5:b2:64:75:98:7b:fd.

Are you sure you want to continue connecting (yes/no)? yes

Warning: Permanently added '192.168.3.95' (RSA) to the list of known hosts.

root@192.168.3.95's password:

logstash-forwarder-0.4.0-1.x86_64.rpm 100% 1692KB 1.7MB/s 00:00

[root@bihu elk]# ls

logstash-forwarder-0.4.0-1.x86_64.rpm

拷贝Server端的key到本地

[root@bihu elk]# scp root@192.168.3.95:/etc/pki/tls/certs/logstash-forwarder.crt .

root@192.168.3.95's password:

logstash-forwarder.crt 100% 1107 1.1KB/s 00:00

将key拷贝到/etc/pki/tls/certs/下

[root@bihu elk]# cp logstash-forwarder.crt /etc/pki/tls/certs/

root@bihu elk]# cd /etc/pki/tls/certs/

[root@bihu certs]# ls

ca-bundle.crt ca-bundle.trust.crt logstash-forwarder.crt make-dummy-cert Makefile renew-dummy-cert

[root@bihu certs]# cd /usr/local/src/

boost_1_45_0/ hadoop-2.7.3/ mongodb/ nginx-1.8.1/ php-7.1.3/ pydash/ zabbix-2.0.6/

elk/ libevent-2.0.21-stable/ mongodb-linux-x86_64-3.0.6/ pcre-8.39/ phpmyadmin/ Python-3.5.0/

FastDFS/ libmcrypt-2.5.8/ mysql-5.7.19.tar.gz php-5.6.16/ phpredis-2.2.4/ redis-3.2.4/

[root@bihu certs]# cd /usr/local/src/elk/

Yum本地安装logstash-forwarder-0.4.0-1.x86_64.rpm

[root@bihu elk]# yum localinstall logstash-forwarder-0.4.0-1.x86_64.rpm

已加载插件：fastestmirror, refresh-packagekit, security

设置本地安装进程

诊断 logstash-forwarder-0.4.0-1.x86_64.rpm: logstash-forwarder-0.4.0-1.x86_64

logstash-forwarder-0.4.0-1.x86_64.rpm 将被安装

Loading mirror speeds from cached hostfile

Could not retrieve mirrorlist http://mirrorlist.centos.org/?release=6&arch=x86_64&repo=os&infra=stock error was

14: PYCURL ERROR 6 - "Couldn't resolve host 'mirrorlist.centos.org'"

Could not get metalink https://mirrors.fedoraproject.org/metalink?repo=epel-6&arch=x86_64 error was

14: PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.fedoraproject.org'"

Could not retrieve mirrorlist http://mirrorlist.centos.org/?release=6&arch=x86_64&repo=extras&infra=stock error was

14: PYCURL ERROR 6 - "Couldn't resolve host 'mirrorlist.centos.org'"

Could not retrieve mirrorlist http://mirrorlist.centos.org/?release=6&arch=x86_64&repo=updates&infra=stock error was

14: PYCURL ERROR 6 - "Couldn't resolve host 'mirrorlist.centos.org'"

* base: centos.ustc.edu.cn

* epel: ae.mirror.rasanegar.com

* extras: centos.ustc.edu.cn

* updates: centos.ustc.edu.cn

http://centos.ustc.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'centos.ustc.edu.cn'"

尝试其他镜像。

http://ftp.sjtu.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'ftp.sjtu.edu.cn'"

尝试其他镜像。

http://mirror.bit.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.bit.edu.cn'"

尝试其他镜像。

http://mirror.lzu.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.lzu.edu.cn'"

尝试其他镜像。

http://mirrors.btte.net/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.btte.net'"

尝试其他镜像。

http://mirrors.cn99.com/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.cn99.com'"

尝试其他镜像。

http://mirrors.hust.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.hust.edu.cn'"

尝试其他镜像。

http://mirrors.neusoft.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.neusoft.edu.cn'"

尝试其他镜像。

http://mirrors.njupt.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.njupt.edu.cn'"

尝试其他镜像。

http://mirrors.tuna.tsinghua.edu.cn/centos/6.9/os/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.tuna.tsinghua.edu.cn'"

尝试其他镜像。

http://centos.ustc.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'centos.ustc.edu.cn'"

尝试其他镜像。

http://mirror.bit.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.bit.edu.cn'"

尝试其他镜像。

http://mirror.lzu.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.lzu.edu.cn'"

尝试其他镜像。

http://mirrors.163.com/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.163.com'"

尝试其他镜像。

http://mirrors.aliyun.com/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.aliyun.com'"

尝试其他镜像。

http://mirrors.cn99.com/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.cn99.com'"

尝试其他镜像。

http://mirrors.hust.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.hust.edu.cn'"

尝试其他镜像。

http://mirrors.njupt.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.njupt.edu.cn'"

尝试其他镜像。

http://mirrors.nwsuaf.edu.cn/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.nwsuaf.edu.cn'"

尝试其他镜像。

http://mirrors.sohu.com/centos/6.9/extras/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.sohu.com'"

尝试其他镜像。

http://centos.ustc.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'centos.ustc.edu.cn'"

尝试其他镜像。

http://mirror.bit.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.bit.edu.cn'"

尝试其他镜像。

http://mirror.lzu.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirror.lzu.edu.cn'"

尝试其他镜像。

http://mirrors.163.com/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.163.com'"

尝试其他镜像。

http://mirrors.cn99.com/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.cn99.com'"

尝试其他镜像。

http://mirrors.neusoft.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.neusoft.edu.cn'"

尝试其他镜像。

http://mirrors.njupt.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.njupt.edu.cn'"

尝试其他镜像。

http://mirrors.sohu.com/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.sohu.com'"

尝试其他镜像。

http://mirrors.tuna.tsinghua.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.tuna.tsinghua.edu.cn'"

尝试其他镜像。

http://mirrors.zju.edu.cn/centos/6.9/updates/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 6 - "Couldn't resolve host 'mirrors.zju.edu.cn'"

尝试其他镜像。

解决依赖关系

--> 执行事务检查

---> Package logstash-forwarder.x86_64 0:0.4.0-1 will be 安装

--> 完成依赖关系计算

依赖关系解决

============================================================================================================================================================================================================

软件包架构版本仓库大小

正在安装:

logstash-forwarder x86_64 0.4.0-1 /logstash-forwarder-0.4.0-1.x86_64 5.7 M

事务概要

Install 1 Package(s)

总文件大小：5.7 M

Installed size: 5.7 M

确定吗？[y/N]：y

下载软件包：

运行 rpm_check_debug

执行事务测试

事务测试成功

执行事务

正在安装 : logstash-forwarder-0.4.0-1.x86_64 1/1

Logs for logstash-forwarder will be in /var/log/logstash-forwarder/

Verifying : logstash-forwarder-0.4.0-1.x86_64 1/1

已安装:

logstash-forwarder.x86_64 0:0.4.0-1

完毕！

开启服务

[root@bihu elk]# service logstash-forwarder restart

logstash-forwarder started

cd到日志目录

[root@bihu elk]# cd /var/log/logstash-forwarder/

[root@bihu logstash-forwarder]# ls

logstash-forwarder.err logstash-forwarder.log

修改配置文件

vim /etc/logstash-forwarder.conf

{

"network": {

"servers": [ "elk.server.com:5000" ],

"ssl ca": "/etc/pki/tls/certs/logstash-forwarder.crt",

"timeout": 15

"files": [

{

"paths": [

"/var/log/messages",

"/var/log/secure"

"fields": { "type": "syslog" }

}

]

}

界面验证

　　首先在 client 中手动增加一条日志：

[root@localhost elk]# logger lw_Logtest

我们的Elk搭建完毕！！！

推荐阅读

get
解决nginx启动报错epoll_wait() reported that client prematurely closed connection的方法

本文介绍了解决nginx启动报错epoll_wait() reported that client prematurely closed connection的方法，包括检查location配置是否正确、pass_proxy是否需要加“/”等。同时，还介绍了修改nginx的error.log日志级别为debug，以便查看详细日志信息。 ... [详细]

蜡笔小新 2023-12-12 13:19:04
get
Nginx使用AWStats日志分析的步骤及注意事项

本文介绍了在Centos7操作系统上使用Nginx和AWStats进行日志分析的步骤和注意事项。通过AWStats可以统计网站的访问量、IP地址、操作系统、浏览器等信息，并提供精确到每月、每日、每小时的数据。在部署AWStats之前需要确认服务器上已经安装了Perl环境，并进行DNS解析。 ... [详细]

蜡笔小新 2023-12-14 19:42:01
default
rhel5.5搭建网关+LAMP+postfix+dhcp的步骤和配置方法

本文介绍了在rhel5.5操作系统下搭建网关+LAMP+postfix+dhcp的步骤和配置方法。通过配置dhcp自动分配ip、实现外网访问公司网站、内网收发邮件、内网上网以及SNAT转换等功能。详细介绍了安装dhcp和配置相关文件的步骤，并提供了相关的命令和配置示例。 ... [详细]

蜡笔小新 2023-12-14 17:13:20
int
Thrift教程初级篇——RPC框架Thrift的安装环境变量配置与第一个实例

本文介绍了RPC框架Thrift的安装环境变量配置与第一个实例，讲解了RPC的概念以及如何解决跨语言、c++客户端、web服务端、远程调用等需求。Thrift开发方便上手快，性能和稳定性也不错，适合初学者学习和使用。 ... [详细]

蜡笔小新 2023-12-13 17:36:52
get
计算机存储系统的层次结构及其优势

本文介绍了计算机存储系统的层次结构，包括高速缓存、主存储器和辅助存储器三个层次。通过分层存储数据可以提高程序的执行效率。计算机存储系统的层次结构将各种不同存储容量、存取速度和价格的存储器有机组合成整体，形成可寻址存储空间比主存储器空间大得多的存储整体。由于辅助存储器容量大、价格低，使得整体存储系统的平均价格降低。同时，高速缓存的存取速度可以和CPU的工作速度相匹配，进一步提高程序执行效率。 ... [详细]

蜡笔小新 2023-12-13 17:32:41
string
利用Visual Basic开发SAP接口程序初探的方法与原理

本文介绍了利用Visual Basic开发SAP接口程序的方法与原理，以及SAP R/3系统的特点和二次开发平台ABAP的使用。通过程序接口自动读取SAP R/3的数据表或视图，在外部进行处理和利用水晶报表等工具生成符合中国人习惯的报表样式。具体介绍了RFC调用的原理和模型，并强调本文主要不讨论SAP R/3函数的开发，而是针对使用SAP的公司的非ABAP开发人员提供了初步的接口程序开发指导。 ... [详细]

蜡笔小新 2023-12-13 10:56:31
string
在mac环境下使用nginx配置nodejs代理服务器的步骤

本文介绍了在mac环境下使用nginx配置nodejs代理服务器的步骤，包括安装nginx、创建目录和文件、配置代理的域名和日志记录等。 ... [详细]

蜡笔小新 2023-12-13 10:34:21
get
Linux下Kafka单机安装配置方法（实操成功）

本文介绍了在Linux下安装和配置Kafka的方法，包括安装JDK、下载和解压Kafka、配置Kafka的参数，以及配置Kafka的日志目录、服务器IP和日志存放路径等。同时还提供了单机配置部署的方法和zookeeper地址和端口的配置。通过实操成功的案例，帮助读者快速完成Kafka的安装和配置。 ... [详细]

蜡笔小新 2023-12-12 18:14:32
get
使用cacti监控mssql 2005运行资源情况的操作步骤

本文介绍了使用cacti监控mssql 2005运行资源情况的操作步骤，包括安装必要的工具和驱动，测试mssql的连接，配置监控脚本等。通过php连接mssql来获取SQL 2005性能计算器的值，实现对mssql的监控。详细的操作步骤和代码请参考附件。 ... [详细]

蜡笔小新 2023-12-12 13:57:58
get
图解redis的持久化存储机制RDB和AOF的原理和优缺点

本文通过图解的方式介绍了redis的持久化存储机制RDB和AOF的原理和优缺点。RDB是将redis内存中的数据保存为快照文件，恢复速度较快但不支持拉链式快照。AOF是将操作日志保存到磁盘，实时存储数据但恢复速度较慢。文章详细分析了两种机制的优缺点，帮助读者更好地理解redis的持久化存储策略。 ... [详细]

蜡笔小新 2023-12-13 20:24:11
get
页面请求方法参数最长_关于 HTTP GET/POST 请求参数长度最大值的一个理解误区

http:my.oschina.netleejun2005blog136820刚看到群里又有同学在说HTTP协议下的Get请求参数长度是有大小限制的，最大不能超过XX ... [详细]

蜡笔小新 2023-12-13 19:20:03
get
iptables如何添加非对称的NAT规则段的解决方法

本文介绍了如何使用iptables添加非对称的NAT规则段，以实现内网穿透和端口转发的功能。通过查阅相关文章，得出了解决方案，即当匹配的端口在映射端口的区间内时，可以成功进行端口转发。详细的操作步骤和命令示例也在文章中给出。 ... [详细]

蜡笔小新 2023-12-13 17:13:18
cookie
Web学习历程记录（七）——Tomcat基本概念和配置

本文介绍了Web学习历程记录中关于Tomcat的基本概念和配置。首先解释了Web静态Web资源和动态Web资源的概念，以及C/S架构和B/S架构的区别。然后介绍了常见的Web服务器，包括Weblogic、WebSphere和Tomcat。接着详细讲解了Tomcat的虚拟主机、web应用和虚拟路径映射的概念和配置过程。最后简要介绍了http协议的作用。本文内容详实，适合初学者了解Tomcat的基础知识。 ... [详细]

蜡笔小新 2023-12-13 17:08:24
cookie
计算机网络初识及通信流程分析

本文介绍了计算机网络的定义和通信流程，包括客户端编译文件、二进制转换、三层路由设备等。同时，还介绍了计算机网络中常用的关键词，如MAC地址和IP地址。 ... [详细]

蜡笔小新 2023-12-13 16:50:29
int
Python瓦片图下载、合并、绘图、标记的代码示例

本文提供了Python瓦片图下载、合并、绘图、标记的代码示例，包括下载代码、多线程下载、图像处理等功能。通过参考geoserver，使用PIL、cv2、numpy、gdal、osr等库实现了瓦片图的下载、合并、绘图和标记功能。代码示例详细介绍了各个功能的实现方法，供读者参考使用。 ... [详细]

蜡笔小新 2023-12-13 12:14:55

loveyao123456

这个家伙很懒，什么也没留下！

Tags | 热门标签

RankList | 热门文章