http://proxmox.su Новое в теме [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Fri, 12 Jun 2026 13:36:41 +0300 [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо. Что мне делать в этой ситуации? Добавить ещё жёсткий диск и расширить раздел или заменить на новый? Или просто ограничить размер БД при первичной настройке (3 x 1.92ТБ для OSD)? Извините, если у меня какие-то глупые вопросы
05.05.2025 05:22:00, jaynguyen.]]> http://proxmox.su/forum/messages/forum63/message314108/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314108/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Mon, 05 May 2025 05:22:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Этого избежать нельзя. Если Ceph требует больше места для RocksDB, он берёт его с блочного устройства.
28.04.2025 18:12:00, gurubert.]]> http://proxmox.su/forum/messages/forum63/message314107/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314107/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Mon, 28 Apr 2025 18:12:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо, я новичок в Proxmox VE. Скажите, есть ли способ этого избежать? Я просто хочу ограничить диски БД и WAL.
28.04.2025 09:41:00, jaynguyen.]]> http://proxmox.su/forum/messages/forum63/message314106/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314106/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Mon, 28 Apr 2025 09:41:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
У тебя возникнет такая штука, как blueFS spillover. База данных/WAL начнёт писать на жёсткий диск.
24.04.2025 15:27:00, mitcHELLspawn.]]> http://proxmox.su/forum/messages/forum63/message314105/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314105/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Thu, 24 Apr 2025 15:27:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Что будет, если диск с БД и диск WAL почти переполнены? Спасибо.
24.04.2025 09:01:00, jaynguyen.]]> http://proxmox.su/forum/messages/forum63/message314104/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314104/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Thu, 24 Apr 2025 09:01:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Окей. Оказывается, мне пришлось делать это в два этапа: 1 - чтобы создать отдельную БД и добавить её в OSD, я использовал скрипт, предоставленный @mitcHELLspawn. Большое спасибо! Так я и сделал: vgcreate cephdb /dev/sdc add-db-to-osd.sh -b 280G -d /dev/sdc -o 0 Работает как по маслу. 2 - чтобы создать отдельную WAL и добавить её в OSD, я сделал следующее: - выставил OSD в режим noout - остановил osd-0 - создал LVM группу томов с именем cephwal: vgcreate cephwal /dev/sdd - создал LVM логический том с именем cephwal1: lvcreate -l 100%FREE -n cephwal1 cephwal - создал новую WAL: ceph-volume lvm new-wal --osd-id 0 --osd-fsid OSD-FSID --target cephwal/cephwal1 И всё! Больше никаких HEALTH_WARN: 1 OSD(s) experiencing BlueFS spillover!!! Большое спасибо, ребята, за советы.
31.07.2024 19:05:00, Gilberto Ferreira.]]> http://proxmox.su/forum/messages/forum63/message314103/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314103/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Wed, 31 Jul 2024 19:05:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
На самом деле, я нашел лучший способ: https://docs.clyso.com/blog/ceph-volume-create-wal-db-on-separate-device-for-existing-osd/
31.07.2024 15:37:00, Gilberto Ferreira.]]> http://proxmox.su/forum/messages/forum63/message314102/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314102/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Wed, 31 Jul 2024 15:37:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Основываясь на этих документах от Ceph, я использовал следующее:
- Сначала установил OSD в режим noout: `ceph osd set-group noout osd`
- Затем остановил его: `systemctl stop ceph-osd@0`
- Создал LVM: `ceph-volume lvm create --data /dev/sdc`
- Проверил созданный LVM: `ceph-volume lvm list`
- Создал новую базу данных: `ceph-volume lvm new-db --osd-id 0 --osd-fsid d1a7e434-53b0-4454-9060-851ae8ebe785 --target ceph-f8683677-0651-4d19-8e19-83aff7c1cf07/osd-block-189361f7-7b82-42c0-bbac-833dd5b2a545`
Всё работает отлично. Теперь сделаю то же самое для new-wal:
- `ceph-volume lvm create --data /dev/sdd`
- `ceph-volume lvm list`
- `ceph-volume lvm new-wal --osd-id 0 --osd-fsid d1a7e434-53b0-4454-9060-851ae8ebe785 --target ceph-e8798be2-c799-4c31-b067-`
После этого получил:

Вроде всё в порядке, но после запуска OSD и снятия режима noout я вижу:
`HEALTH_WARN: HEALTH_WARN: 1 OSD(s) experiencing BlueFS spillover osd.0 spilled over 768 KiB metadata from 'db' device (22 MiB used of 280 GiB) to slow device`
Поскольку это просто ЛАБ и я использую Proxmox поверх Proxmox с nested_virt, я предполагаю, что это связано с устройствами, которые практически фейковые или псевдо-устройства. В реальном сценарии с реальными устройствами этого не произойдёт, я думаю.
На этом всё.
30.07.2024 22:07:00, Gilberto Ferreira.]]> http://proxmox.su/forum/messages/forum63/message314101/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314101/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Tue, 30 Jul 2024 22:07:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Кстати, забыл упомянуть – теперь ceph-volume тоже умеет это. https://docs.ceph.com/en/latest/ceph-volume/lvm/migrate/
30.07.2024 15:42:00, mitcHELLspawn.]]> http://proxmox.su/forum/messages/forum63/message314100/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314100/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Tue, 30 Jul 2024 15:42:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо. Посмотрю.
12.07.2024 20:31:00, Gilberto Ferreira.]]> http://proxmox.su/forum/messages/forum63/message314099/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314099/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Fri, 12 Jul 2024 20:31:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
На самом деле это неправда. Мы разработали скрипт в 45Drives, который поможет вам сделать это, если ваши OSD используют LVM. https://scripts.45drives.com/add-db-to-osd.sh
12.07.2024 20:25:00, mitcHELLspawn.]]> http://proxmox.su/forum/messages/forum63/message314098/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314098/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Fri, 12 Jul 2024 20:25:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Не в сети. Приходится переразвертывать каждый OSD, а это значит перемещение данных. Обычно это можно сделать на каждом хосте по отдельности, не теряя при этом излишней избыточности.
02.05.2024 08:53:00, gurubert.]]> http://proxmox.su/forum/messages/forum63/message314097/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314097/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Thu, 02 May 2024 08:53:00 +0300 Proxmox Виртуальная Среда [РЕШЕНО] Добавить WAL/DB к CEPH OSD после установки. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет! У меня есть Proxmox CEPH-кластер из 3 серверов, у каждого по 4 SSD DC-диска. Возможно ли добавить отдельные NVMe для WAL/DB уже после того, как всё заработает, скажем, через пару недель? Спасибо!
30.04.2024 20:06:00, Gilberto Ferreira.]]> http://proxmox.su/forum/messages/forum63/message314096/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. http://proxmox.su/forum/messages/forum63/message314096/76254-resheno_-dobavit-wal_db-k-ceph-osd-posle-ustanovki. Tue, 30 Apr 2024 20:06:00 +0300 Proxmox Виртуальная Среда