zabbix登錄失敗次數(記一次因網絡變更導致zabbix連接es報400和404)
2023-04-13 06:54:43 1
背景zabbix歷史數據存儲到es集群,正常工作中的時候,因網絡變更導致zabbix server連接不上es,zabbix日誌首先報400錯誤,之後一直404,es那邊報查詢相關的錯誤。
現象如下圖:解決辦法
結合多年在運維領域扯蛋的經驗,再各種必應搜索,發現在es中可添加以下3個配置進行調優,於是死馬當活馬醫,報著僥倖心理一試。
http.max_initial_line_length: 128khttp.max_header_size: 64kbhttp.max_content_length: 500mb
還挺管用,完美解決!其實在這之前,聽說重啟能解決一切問題,於是es主節點、數據節點都重啟過,zabbix也重啟過,然並卵。
原因初步判斷:zabbix向es正常寫入數據時,網絡突然異常,待網絡恢復後,積壓的請求瘋狂懟es,導致es頂不住。後續如有遇到網絡變更的場景,可提前先關閉zabbix應用,待網絡恢復後,再啟動zabbix。
本文轉載於:https://mp.weixin.qq.com/s/FkxHkyaQ4S6Xc9zoLSBHCQ
,