ELK之在CentOS7.5上使用rpm包安裝配置ELK7版本

　　一，安裝環境查看

 

　　二，軟件版本選用

jdk 1.8.0_171
elasticsearch 7.1.1
kibana 7.1.1
logstash 7.1.1

　　

　　三，安裝配置

　　1，安裝JDK

　　過程不詳述

　　2，安裝ELK

　　官網下載安裝包

wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.1.1-x86_64.rpm
wget https://artifacts.elastic.co/downloads/kibana/kibana-7.1.1-x86_64.rpm
wget https://artifacts.elastic.co/downloads/logstash/logstash-7.1.1.rpm

　　安裝

rpm -ivh elasticsearch-7.1.1-x86_64.rpm 
rpm -ivh kibana-7.1.1-x86_64.rpm 
rpm -vih logstash-7.1.1.rpm 

　　修改elasticsearch配置文件

/etc/elasticsearch/elasticsearch.yml

　　

#集群名
cluster.name: my-es
#node名
node.name: node-1
#數據目錄
path.data: /data/es-data
#日志目錄
path.logs: /var/log/elasticsearch
network.host: 0.0.0.0
http.port: 9200
#集群master需要和node名設置一致
cluster.initial_master_nodes: ["node-1"]

　　

　　設置elasticsearch的jave目錄（手動安裝java需設置yum安裝的java無需設置）

　　修改配置文件

/etc/sysconfig/elasticsearch

　　設置java目錄

JAVA_HOME=/usr/local/jdk1.8.0_171

　　創建數據目錄並設置權限

 mkdir -p /data/es-data
 chown -R elasticsearch:elasticsearch /data/es-data/

　　啟動elasticsearch

systemctl start elasticsearch
systemctl enable elasticsearch

　　檢測是否啟動

[root@salt-test 7.1.1]# curl 127.0.0.1:9200
{
  "name" : "node-1",
  "cluster_name" : "my-es",
  "cluster_uuid" : "-5vm0JOyQP-fehWjlXal_A",
  "version" : {
    "number" : "7.1.1",
    "build_flavor" : "default",
    "build_type" : "rpm",
    "build_hash" : "7a013de",
    "build_date" : "2019-05-23T14:04:00.380842Z",
    "build_snapshot" : false,
    "lucene_version" : "8.0.0",
    "minimum_wire_compatibility_version" : "6.8.0",
    "minimum_index_compatibility_version" : "6.0.0-beta1"
  },
  "tagline" : "You Know, for Search"
}

　　

　　設置kibana

　　修改配置文件

server.port: 5601
server.host: "0.0.0.0"
server.name: "node-1"
elasticsearch.hosts: ["http://192.168.1.4:9200"]
kibana.index: ".kibana"

　　PS:7版本elasticsearch.hosts的配置在6版本里面為elasticsearch.url 需要配置正確否則message日志會報錯

FATAL  Error: [elasticsearch.url]: definition for this key is missing

 

　　啟動

systemctl start kibana
systemctl enable kibana

　　web頁面查看，還沒有索引

　　

　　

　　安裝head

　　安裝head同elasticsearch6 參考 https://www.cnblogs.com/minseo/p/9117470.html

　　

　　集群健康狀態檢查

curl -XGET 'http://192.168.1.4:9200/_cluster/health?pretty=true'

　　

　　使用logstash收集日志

　　標准輸入輸出

/usr/share/logstash/bin/logstash -e 'input { stdin{} } output { stdout {} }'

　　頁面輸入什么則輸出什么

　　以json格式輸出

　　輸出至ES

/usr/share/logstash/bin/logstash -e 'input { stdin{} } output { elasticsearch { hosts => ["192.168.1.4:9200"] index => "logstash-%{+YYYY.MM.dd}" } }'

　　啟動后標准輸出無反應

　　打卡head即可查看

　　

　　寫一個配置文件收集系統日志

/etc/logstash/conf.d/file.conf

　　

input{
  file{
    path => ["/var/log/messages"]
    type => "system-log"
    start_position => "beginning"
  }
}

filter{

}

output{
  elasticsearch{
    hosts => ["192.168.1.4:9200"]
    index => "system-log-%{+YYYY.MM}"
  }
}

　　啟動放置在后台

 /usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/file.conf &

　　

　　當文件/var/log/messages有日志寫入時就會寫es，在head可以查看

 

　　把日志添加至kiban展示

　　查看

　　elk7搭建完成與elk6搭建幾乎一致

　　區別為elasticsearch配置文件需要添加配置，否則elasticsearch啟動不成功

cluster.initial_master_nodes: ["node-1"]