近期接到一台服务器故障:客户描述系统运行过程中频繁蓝屏死机,重启后有时能进系统,过一阵又死机,数据库多次报错并自动断开连接,管理界面里能看到磁盘读写失败计数不断上升。这类时好时坏的故障最容易让人误判成系统或软件问题,但排查后往往指向同一个根源——硬盘出现坏道。为什么发现异常后不能自己反复折腾?坏道属···
某单位一台服务器原本阵列已处于降级状态:一块成员盘掉线,换上新盘后管理界面里开始了数据重建(rebuild)。重建持续了数小时,机房市电出现波动、机柜意外断电,重建随之中断。再开机时阵列卡报错,阵列显示失效,服务器进不了系统,业务数据全部无法访问。也有一类情况是重建进行到一半时又有一块成员盘掉线,重···
某单位一台工作机重启后,原来分好的几个分区只剩一个,容量也对不上;打开磁盘管理,整块硬盘显示为未初始化或未分配,并提示需要格式化才能使用。另一类情况是系统已经进不去,用启动盘进入环境后能看见硬盘,却看不到原来的数据分区。这类现象大多不是盘体损坏,而是分区表损坏:记录分区起点、大小和类型的 MBR 或···
某企业监控室反馈,平台录像回放只能调出最近两三天的画面,更早的历史录像时间轴出现大片空白,并弹出硬盘异常、存储离线一类告警。把硬盘取出接到电脑上,系统要么无法识别,要么提示需要格式化;个别情况是能认出盘符,但目录里空空如也。这通常指向监控专用硬盘出现坏道、读盘能力下降,或录像文件的索引区被破坏——视···
高温季节或精密空调故障,是机房最容易被忽视的风险。制冷一旦中断,机柜进风温度会迅速升高,服务器陆续触发热保护:先降频、风扇全速运转,随后部分设备直接断电停机,整柜设备几乎在同一时间离线。现场看到的现象通常很典型:监控告警成片刷屏,业务系统整体不可访问;重新上电后,阵列卡报“成员盘丢失”“阵列降级”,···
虚拟化平台上的业务一旦停机,影响面通常比单台服务器更大:几十台虚拟机可能同时掉线。运维人员最怕的是排查过程中做了不可逆的操作,把原本还能抢救的数据彻底覆盖掉。常见现象一是宿主机能看到存储,但虚拟机开机报磁盘文件损坏或找不到磁盘;二是快照合并、克隆或迁移中断,快照链断裂,磁盘文件与快照之间对不上;三是···