磁盘 IO 突然飙升：谁在大量读写

发布时间:2026-01-20 06:09

## 症状 监控曲线显示磁盘繁忙率陡然抬升，业务响应变慢，日志写入出现停顿，但 CPU 与内存一切正常。磁盘的写入量比平时高出数倍，怀疑有进程在做异常的大规模读写，却不知道从何下手，重启能缓解一阵，过后又卷土重来。 ## 定位 两个工具双视角锁定肇事者。iotop 按进程实时显示读写速率，一屏就能看到谁在头部。 ``` iotop -oP ``` -o 只显示有活动的进程，-P 按进程聚合线程。pidstat 则适合非交互的持续采样，把输出落盘事后分析。 ``` pidstat -d 5 12 ``` 每五秒采一次共一分钟，读写列的累计值不会说谎，它还能事后复查，比盯着实时屏幕更适合复盘。两个常见嫌疑人值得优先核对：定时备份与日志压缩是否恰好落在劣化时段，数据库是否有异常大查询在扫盘。定时任务的嫌疑用任务清单与劣化时间对照即可排除或坐实，对上表的嫌疑任务单独跑一遍复现曲线，责任认定就完成了。 ## 解决 找到进程后分类处理：备份压缩类任务，错峰到业务低谷执行，并限制压缩线程数；日志类失控写入，回到日志配置检查轮转参数；数据库扫描类，转入慢查询分析路径优化语句本身。临时止血可以对肇事进程限速或暂停，但根因不处理，第二天同一时间还会复发。处理时保留一份劣化时段的完整采样记录，任务调整后再采一段对照，前后数字放在一起，效果才有说服力。 ## 预防 把磁盘繁忙率纳入告警，阈值按业务高峰的基线上浮设置，劣化在萌芽期就暴露。备份、压缩、归档类任务全部登记时间表，与业务高峰错开。对已知的重 IO 任务预先做资源隔离，限制其 IO 权重，让它们与在线服务各行其道。顺云控制台的磁盘监控曲线保留历史数据，定期回看一周的形状，异常的尖峰背后往往都站着一个没被登记的定时任务。