Elasticsearch 不接受数据

Question

我在 kubernetes 上有一个 Elasticsearch 集群设置。最近logstash 无法向集群推送任何数据，因为集群中的一个节点磁盘空间不足。

这是logstash中的错误

 [Ruby-0-Thread-13@[main]>worker1: /usr/share/logstash/logstash-core/lib/logstash/pipeline.rb:383] elasticsearch - retrying failed action with response code: 403 ({"type"=>"cluster_block_exception", "reason"=>"blocked by: [FORBIDDEN/12/index read-only / allow delete (api)];"}) 

es-master 将节点标记为只读，因为可用磁盘空间超过阈值

[WARN ][o.e.c.r.a.DiskThresholdMonitor] [es-master-65ccf55794-pm4xz] flood stage disk watermark [95%] exceeded on [SaRCGuyyTBOxTjNtvjui-g][es-data-1][/data/data/nodes/0] free: 9.1gb[2%], all indices on this node will be marked read-only

在此之后，我释放了该节点上的资源，现在它有足够的可用空间（几乎 50%）。但是 logstash 仍然无法将数据推送到弹性搜索，并且正在记录上述相同的错误。

我有以下问题

1. elasticsearch 会自动恢复吗？
2. 如果没有，我应该重新启动集群吗？如果我只是重新启动数据节点就足够了，还是应该重新启动主节点和 indest 节点？
3. 有没有办法在不重启的情况下再次标记索引可写？

Answer 1

您必须手动重置索引上的只读块。

您可以在块中查看文档herecluster.routing.allocation.disk.watermark.flood_stage

一旦有足够的可用磁盘空间以允许索引操作继续，就必须手动释放索引块。

PUT /<your index name>/_settings
{
  "index.blocks.read_only_allow_delete": null
}