PVE 故障 500，虚拟机无法重启，如何处理？

[jonsmith]

PVE 今天突然故障了，请教下如何处理？现象如下：

• SSH 可以正常连接，但有些命令无法执行，reboot 重启也无效，虚拟机和宿主机都无法关机或重启
• PVE 管理页面 local-lvm 报错：no such logical volume pve/data(500)，如图

[yc8332]

是不是额外的磁盘没挂上，重新挂一下看看，不然就是磁盘有问题

[xiaoranj]

no such logical volume pve/data(500) 磁盘掉了/坏了 ？

[991547436]

实体机看看 raid 挂了没

[qW7bo2FbzbC0]

开 ssh ，我帮你远程看下

[coldle]

感觉是盘挂了，建议描述下硬件情况

[jonsmith]

@yc8332 最近没动过硬盘，怎么重新挂载？

[jonsmith]

@xiaoranj 别啊，这个 AMD 小主机，刚用了没一年呢

[jonsmith]

@qW7bo2FbzbC0 内网机器不方便远程呢

[jonsmith]

@coldle AMD 小主机，配的一块 M2 固态 1T ，常年开着，跑一些 docker ，平时开发用

[aru]

看下主机在线时间，如果没重启过，就是硬盘坏了

[aru]

大概率硬盘挂了，重新接下 m2 再开机吧
如果开不了，那只能换硬盘重装系统了

[totoro625]

目测 SSH 能连接，fdisk 把 locla-lvm 分区容量扣 10G 下去

[jonsmith]

@aru 如果是硬盘坏了，为啥 SSH 能连接，文件内容也能看到。好奇怪

[jonsmith]

@totoro625 怎么执行？在 pve 终端执行命令都返回：-bash: /usr/bin/*: Input/output error

[jonsmith]

@totoro625 https://minio.hoopan.net/lobe/files/482478/f808658b-832b-470f-a189-b6569301d531.png

[kokutou]

df -h
pvs
vgs
lvs -a
fdisk -l
lsblk
blkid
都贴一下吧

[kkk123]

dmesg
journalctl -e
看看日志里的 error

[jonsmith]

pve 宿主机 journalctl 日志
报错日志： https://minio.hoopan.net/lobe/files/482478/6a07683c-ce64-489b-8df0-3d6ff4e666d4.png

[jonsmith]

@kkk123 上面是日志，麻烦看下

[aru]

@jonsmith
-bash: /usr/bin/*: Input/output error 这就是硬盘读取失败最明显的信息
硬盘坏了，但是常用文件在内存缓存内，所以直接读内存返回了
别挣扎了，就是硬盘故障。如果有重要的小文件，可以尝试备份下
然后关机重新接下硬盘，看能不能恢复（有时候接口问题或硬盘、控制器过热，重新接下可能会恢复）