http://proxmox.su Новое в теме [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Tue, 21 Apr 2026 12:59:29 +0300 [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Пишу это на случай, если у кого-то возникнет такая же проблема. Выяснили, что пользователю Ceph нужны другие права/возможности. Раньше мы использовали: Код: mon = "allow r" osd = "allow * pool=poolname" В какой-то момент в прошлом нам советовали использовать это как минимум необходимого. Пришлось поменять на: Код: mgr 'profile rbd' mon 'profile rbd' osd 'profile rbd pool=poolname' Похоже, что наши старые возможности не включали блокировку и/или разблокировку образа.
17.03.2025 13:07:00, woodstock.]]> http://proxmox.su/forum/messages/forum63/message309549/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309549/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Mon, 17 Mar 2025 13:07:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
В теории, прямой синхронизация должна отправлять все записи, синхронные или асинхронные, в синхронном режиме на хранилище. Ceph по умолчанию подтверждает запись на, как минимум, два OSD, прежде чем вернуть ACK клиенту (в данном случае PVE). Так что, если PVE и Ceph настроены корректно, этого не должно происходить. Настройки PVE понятны, а какая конфигурация Ceph в этом Ceph-кластере? Происходит ли это, если вы принудительно выключите питание вручную (то есть, можете ли вы легко воспроизвести проблему?).
17.10.2024 13:53:00, VictorSTS.]]> http://proxmox.su/forum/messages/forum63/message309548/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309548/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Thu, 17 Oct 2024 13:53:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо за ответ. Я знаю эти настройки. Но я не уверен, что они делают в комбинации с внешним кластером Ceph. Мы уже используем direct sync, и это не предотвратило поврежденные файловые системы. Есть ли какой-то слой, который это объясняет?
17.10.2024 11:46:00, woodstock.]]> http://proxmox.su/forum/messages/forum63/message309547/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309547/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Thu, 17 Oct 2024 11:46:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
По идее, это можно настроить в настройках диска в виртуальной машине. Не знаю, можно ли установить системное или кластерное значение по умолчанию.
17.10.2024 09:50:00, Johannes S.]]> http://proxmox.su/forum/messages/forum63/message309546/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309546/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Thu, 17 Oct 2024 09:50:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Перефразирую свой вопрос: какие настройки кэша для Proxmox (librbd) и Ceph позволят избежать этого? Есть ли способ полностью отключить I/O-кэширование для виртуальных машин Proxmox, диски которых находятся на Ceph-хранилище?
17.10.2024 09:45:00, woodstock.]]> http://proxmox.su/forum/messages/forum63/message309545/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309545/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Thu, 17 Oct 2024 09:45:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет! Заметил, что когда работает одиночный нод Proxmox, он сам перезагружается. А когда он входит в группу — этого не происходит. Очень странно, но у меня тоже так происходит, и я не знаю, как это исправить, потому что это происходит очень редко.
08.10.2024 16:34:00, michel.seicon.]]> http://proxmox.su/forum/messages/forum63/message309544/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309544/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Tue, 08 Oct 2024 16:34:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Файловые системы VM сломались после падения узла кластера. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Всем привет! У нас работает кластер (версия 8.2.7), подключенный к отдельному кластеру Ceph, работающему на Reef (18.2.4). Несколько раз за последние годы (два-три) нода перезагружалась с "жестким" выключением/сбросом. Мы так и не смогли понять, что это вызвало. Нода поднималась и работала снова без проблем, но все ВМ (с HA и без) на ней имели файловую систему, которую не удалось восстановить никаким способом. Все ВМ пришлось восстанавливать из бэкапов. Сейчас я думаю, можно ли как-то настроить Proxmox и ВМ, чтобы это не происходило. После последнего инцидента мы попробовали перейти на direct sync cache, но это не помогло в этот раз. У кого-нибудь есть опыт в этом вопросе и можете что-нибудь посоветовать?
07.10.2024 11:08:00, woodstock.]]> http://proxmox.su/forum/messages/forum63/message309543/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. http://proxmox.su/forum/messages/forum63/message309543/75603-resheno_-faylovye-sistemy-vm-slomalis-posle-padeniya-uzla-klastera. Mon, 07 Oct 2024 11:08:00 +0300 Proxmox Виртуальная Среда