elk6.2.3集群重啟和red狀態恢復

1、修改配置文件

修改elasticsearch.yml中path.data屬性，添加多路徑以逗號分隔

path.data : /opt/data1,/opt/data2

2、查看集群狀態

curl -XGET "http://127.0.0.1:9200/_cat/indices"
curl -XGET "http://127.0.0.1:9200/_cat/nodes"
curl -XGET "http://127.0.0.1:9200/_cat/health"

3、關閉索引自動平衡

curl -XPUT -H 'Content-Type: application/json' "http://127.0.0.1:9200/_cluster/settings" -d'
{
"transient" : {
"cluster.routing.allocation.enable" : "none"
}
}'

4、節點重啟

5、開啟索引自動平衡

curl -XPUT -H 'Content-Type: application/json' "http://127.0.0.1:9200/_cluster/settings" -d'
{
"transient" : {
"cluster.routing.allocation.enable" : "all"
}
}'

6、遇到的問題

有一個索引的某個分片一直處理UNASSIGNED狀態，需進行手動分配。

curl -XGET -H 'Content-Type: application/json' 'http://127.0.0.1:9200/_cat/shards' | grep UNASSIGNED #查看未分配的索引分片
curl -XGET -H 'Content-Type: application/json' "http://127.0.0.1:9200/_cat/shards/index?v" #查看索引分片

使用reroute接口進行分配。
reroute 接口支持五種指令：allocate_replica, allocate_stale_primary, allocate_empty_primary，move 和 cancel。
常用的一般是 allocate 和 move，allocate_* 指令。
因為負載過高等原因，有時候個別分片可能長期處於 UNASSIGNED 狀態，我們就可以手動分配分片到指定節點上。默認情況下只允許手動分配副本分片(即使用 allocate_replica)，所以如果要分配主分片，需要單獨加一個 accept_data_loss 選項

7、分配主分片

curl -XPOST -H 'Content-Type: application/json' "http://127.0.0.1:9200/_cluster/reroute" -d '{
"commands" : [ {
"allocate_stale_primary" :
{
"index" : "index", "shard" : 4, "node" : "node56", "accept_data_loss" : true
}
}
]
}'

以上不行的話：方法二

cat recover.sh
#!/bin/bash

master=$(curl -s 'http://localhost:9200/_cat/master?v' | grep -v ' ip ' | awk '{print $1}')
for index in $(curl  -s 'http://localhost:9200/_cat/shards' | grep UNASSIGNED | awk '{print $1}' | sort | uniq); do
    for shard in $(curl  -s 'http://localhost:9200/_cat/shards' | grep UNASSIGNED | grep $index | awk '{print $2}' | sort | uniq); do
        echo  $index $shard

      curl -XPOST -H 'Content-Type: application/json'  'http://localhost:9200/_cluster/reroute' -d '{
            "commands" : [ {
                  "allocate_empty_primary" : {
                      "index" : "'$index'",
                      "shard" : "'$shard'",
                      "node" : "'$master'",
	              "accept_data_loss" : true
                  }
                }
            ]
        }'

        sleep 1
    done
done

8、分配副分片

curl -XPOST -H 'Content-Type: application/json' "http://127.0.0.1:9200/_cluster/reroute" -d '{
"commands" : [ {
"allocate_replica" :
{
"index" : "index", "shard" : 4, "node" : "node56"
}
}
]
}'

9、kibana進和查詢命令

fuser -n tcp 5601