这个es是用来保存监控数据的,主要包括了接口调用次数,RT,错误次数,gc次数等等信息,但是由于她是使用容器启动的,所以偶尔会有比较严重的重启问题
- 容器IP 不固定
- 索引处于red状态
晚上收到告警,某一段时间的写入数据量比平时要低很多,于是上去查看监控,发现metaq的消费阻塞了2个分区,一位是metaq消费的问题(该消费项目不会保持和es的长链接,每次断开后需要手动重启),于是我先手动重新滚动部署了3个POD来进行消费,但是还是阻塞着。
又到es里边去看下,
发现还是es的问题,于是分别从起了3台机器,然后三台机器花了2个小时,把索引加载上来,停留在99.7%的状态了
- 使用curl ‘http://127.0.0.1:9200/_cat/indices‘ 发现是有几个索引处于red状态,删除启动。