maximum shards open什么原因导致的

Question

elk每天一个index 今天kibana刷不出东西看logstash报错内容是：Validation Failed: 1: this action would add [2] total shards, but this cluster currently has [1001]/[1000] maximum shards open

可能是什么原因导致的？

Answer 1

你用的7版本以上的elasticsearch吧，默认只允许1000个分片，问题是因为集群分片数不足引起的。
现在在elasticsearch.yml中定义

> cluster.max_shards_per_node: 10000

貌似也不生效，默认就允许创建1000个分片，我是在kibana的tools中改变临时设置

PUT /_cluster/settings
{
  "transient": {
    "cluster": {
      "max_shards_per_node":10000
    }
  }
}

这样就生效了

Answer 2

curl -XPUT -H "Content-Type: application/json" -d '{"transient":{"cluster":{"max_shards_per_node":10000}}}' 'http://localhost:9200/_cluster/settings'

Answer 3

参考这篇文章，里面有问题分析和解决方案：记录 Elasticsearch 的 maximum shards open 问题