http://proxmox.su Новое в теме Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Sat, 18 Apr 2026 13:04:13 +0300 Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Не используйте диск WAL/DB на отдельном диске, просто используйте ваш корпоративный SSD как OSD с диском WAL/DB внутри.
24.05.2025 16:24:00, spirit.]]> http://proxmox.su/forum/messages/forum63/message317942/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. http://proxmox.su/forum/messages/forum63/message317942/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. Sat, 24 May 2025 16:24:00 +0300 Proxmox Виртуальная Среда Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
@SteveITS Не все SSD одинаковы! Во многих случаях, когда кто-то использует отдельное NVMe устройство для Ceph WAL, это потому, что их основной блочный диск использует более медленный интерфейс (например, SATA). В таких случаях NVMe устройство улучшает общую производительность ввода-вывода OSD выше, чем мог бы обеспечить основной блочный диск сам по себе.
24.05.2025 15:51:00, wbedard.]]> http://proxmox.su/forum/messages/forum63/message317941/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. http://proxmox.su/forum/messages/forum63/message317941/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. Sat, 24 May 2025 15:51:00 +0300 Proxmox Виртуальная Среда Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Мне было бы интересно узнать бенчмарки для SSD без дополнительного диска, ведь они уже SSD, а значит исключается единая точка отказа для OSD. (И NVMe для DB сильно помогает, да?). А потом можно добавить третий диск или использовать NVMe как OSD. В целом, да, ваши шаги выглядят нормально. На кластере побольше я бы посоветовал ждать, пока все будет в порядке на каждом шаге, но с двумя узлами это нереально (используя 3/2).
24.05.2025 15:08:00, SteveITS.]]> http://proxmox.su/forum/messages/forum63/message317940/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. http://proxmox.su/forum/messages/forum63/message317940/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. Sat, 24 May 2025 15:08:00 +0300 Proxmox Виртуальная Среда Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
У меня тоже похожая конфигурация, как ты описал, и хотя я ещё (не) проводил эту процедуру, я уже запланировал точно так же действовать, когда придётся заменить мои WAL-устройства. Просто интересно, у тебя кластер новый или его производительность со временем просто ухудшилась? Если интересно, можешь рассказать, какие у тебя сейчас WAL-устройства и какие показатели производительности ты видишь, и мы можем сравнить результаты.
24.05.2025 13:47:00, wbedard.]]> http://proxmox.su/forum/messages/forum63/message317939/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. http://proxmox.su/forum/messages/forum63/message317939/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. Sat, 24 May 2025 13:47:00 +0300 Proxmox Виртуальная Среда Нужен совет. Заменяю потребительский NVMe, который использовался для Ceph DB/WAL в 3-узловом кластере. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет всем! У меня дома работает кластер Proxmox из 3 узлов с Ceph для хранения виртуальных машин. На каждом узле по два Intel enterprise SSD объёмом 800 ГБ для OSD данных, и один потребительский NVMe на 512 ГБ, который используется для DB/WAL для обоих OSD на этом узле. Я тестирую кластер и вижу низкие IOPS и высокую задержку, особенно при 4K случайных нагрузках. Я подозреваю, что потребительский NVMe — узкое место, и хотел бы заменить его на enterprise NVMe (вероятно, что-то с более высокой устойчивой скоростью записи и DWPD). Прежде чем я приступлю, хочу:

Получить обратную связь от сообщества о том, улучшит ли это значительно производительность.
Удостовериться в лучшем способе замены DB/WAL NVMe, не сломав кластер.

Мой план:

По одному узлу: останавливаю OSD, использующие DB/WAL устройство, затираю их, выключаю узел, заменяю NVMe, пересоздаю OSD с новым целевым устройством DB/WAL.
Отслеживаю перебалансировку между каждым шагом.

У кого-нибудь здесь был подобный опыт или есть лучшие предложения, как избежать простоя или проблем с данными? Какие подводные камни стоит учитывать?

Заранее спасибо!
23.05.2025 23:48:00, royalj7.]]> http://proxmox.su/forum/messages/forum63/message317938/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. http://proxmox.su/forum/messages/forum63/message317938/76784-nuzhen-sovet.-zamenyayu-potrebitelskiy-nvme_-kotoryy-ispolzovalsya-dlya-ceph-db_wal-v-3_uzlovom-klastere. Fri, 23 May 2025 23:48:00 +0300 Proxmox Виртуальная Среда