记录一次ElasticSearch Data too large故障的分析和恢复 - 猫猫得天空♂

/ 1评 / 0

记录一次ElasticSearch Data too large故障的分析和恢复

病假在家,晚上习惯性开一下电脑看看邮件。感觉Kibana有点慢,就去看了一下ElasticSearch的console。不出意外的发现集群状态变黄了,

ff73ed70202b1adf08285610ae5b0209

去腾讯后台查了一下,发现了有Data too large的报错。

306c1543993261eb0ad0cd4266a9226b

 

去后台删除了一些有错误的索引,后发现依然有unassigned的索引,找了一下官方,说是有可能是熔断频繁导致索引allocation失败。

3e62dabec8f921dc42336f826d4f94a4

按照官方提供的方式将出问题的索引的 number of replicas 设置为0

d622e22c755264ff0fa6d9bf1525c3e2

不断重复多次后,故障消失。

c526c61659c9f9b69a6de8ebd956728d

fb2721ae4b9846cae6ba8d3bb4b0f7d9

 

至此整个集群恢复正常。

 

回到首页

  1. wuzheng40说道:

    2022/12/31 logstash-sanofi-hybrid_rep_uat_module-2022.10.06

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注