问题描述/异常栈
问题相关描述 夜莺告警数据库宕机,告警端口:10401 FAQ-万象主机宕机告警 - 图1
发现版本
万象版本:3.3.8
解决方案
注释掉/etc/hosts中的IPV6的IP信息 FAQ-万象主机宕机告警 - 图2
问题原因
解析的IP的地址是IPV6,导致检测mysql进程结果为0,即宕机状态 FAQ-万象主机宕机告警 - 图3 在宕机节点容器中执行ps -ef | grep mysql_ 命令返回如下结果 FAQ-万象主机宕机告警 - 图4 手动执行命令启动一个随机监听mysqld的端口 例如:mysqld_exporter --config.my-cnf /root/my4306.cnf --web.listen-address=:10401 手动在其他节点执行 curl ip:10402/metric | grep up 命令返回结果mysql_up = 0 FAQ-万象主机宕机告警 - 图5 在docker容器中查看宕机节点的报错信息 FAQ-万象主机宕机告警 - 图6

作者:张鸿运