【可观测性】为什么观测数据无法定位根因:主机IO打满案例中指标只能确认机器很忙,FlashAI通过任务通道下发只读诊断脚本,从pidstat定位mysqld进程、进容器查看SQL,追查到全表扫描根因
快猫星云11月16日演练复盘显示,主机demo-03 CPU持续90%以上、磁盘IO Util接近100%,内存、inode、网络等维度正常,AI首轮只确认高负载信号,结论是数据不足以定位。真正定位靠任务通道:FlashAI下发只读诊断脚本,第一轮pidstat锁定mysqld进程,读写速率冲到十几万和近二十万KB/s,脏页回写叠加九万多,单进程吃掉整块磁盘吞吐;第二轮定位到mysql-0容器;第三轮进容器执行SHOW FULL PROCESSLIST,发现payment、inventory、catalog等微服务反复做无主键全表扫描,redo log写入73GB。文章指出,指标、日志、Trace依赖事前约定采集,无法预知下一次故障现场,与其不计成本采集,不如让AI自主决定下一步要什么数据并自助取证;安全上按风险分级,只读命令披露后直接执行,写操作必须人工确认,权限由机器负责人界面设定。
来源:快猫星云Flashcat
![]()
以上资讯由金支点整理发布
关注金支点公众号获取每日行业报告
京公网安备 11010802036102号北京金支点技术服务有限公司保留所有权利 | Copyright © 2005-2026 Beijing Golden Point Outsourcing Service Co., Ltd. All Rights Reserved.