Proxmox: умер диск в «почти RAID», виртуальные машины на local-lvm

Исходное состояние

Что было на площадке

Хост Proxmox 8, VM крутились с local-lvm. Зеркало собрали «когда ставили», документации нет. SMART одного диска давно орал, мониторинг смотрел только ping узла.

После ребута по питанию диск не поднялся. Часть VM стартовала в read-only, 1С на госте начала откатывать транзакции. Бэкап vzdump писал на тот же узел в каталог, который тоже сидел на пострадавшей VG.

Рамки

Ограничения и задача

• Второго узла Proxmox нет, live-миграция некуда.
• Складские терминалы завязаны на одну VM с SQL.
• Нельзя «просто mdadm --force»: риск добить второй диск.
• Лицензии Windows на гостях — OEM-след, клоны нужно делать аккуратно.

Факт

Результат

• Простой склада — одну смену. Данные SQL целы: последний удачный vzdump был за 11 часов до отказа, плюс логи SQL.
• Хранение VM больше не на «диске, который ещё не умер».
• Появился регламент: нет мониторинга дисков — нет права считать хост боевым.

Практика

Выводы

• local-lvm на одном узле без внешнего backup — это один диск между вами и простоем бизнеса.
• Ping гипервизора зелёный, пока контроллер ещё отвечает. Диски умирают тише.
• Restore VM нужно прогонять до инцидента: в ночь отказа вы не хотите узнавать, что архив битый.