线上服务假死排查

3月26号晚上9点上线之后&＃xff0c;3月27早上服务假死&＃xff0c;无法访问&＃xff0c;暂时重启服务&＃xff0c;3月29号下午3点服务再次假死&＃xff0c;重启服务&＃xff0c;3月30日上午8点左右查看服务假死&＃xff0c;3月30号下午开始排查

日志排查

通过日志分析

锁定了是这个sql导致的查询了3百万条数据&＃xff0c;很可能就是这个问题导致服务假死
通过分析sql&＃xff0c;知道了是脚手架内嵌的monitor检测的模块&＃xff0c;monotor数据库有13个G的数据&＃xff0c;
紧急解决方案就是暂时关闭monitor&＃xff0c;清空monotor旧数据。

通过关闭日志查询&＃xff0c;发现没有再出现过假死

加大内存&＃xff0c;修改日志搜索范围&＃xff0c;限制数据量&＃xff0c;定期清理日志