+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

ZFS - Нет доступного диска., Proxmox Виртуальная Среда

Consonant1022

Guest

16.05.2025 19:42:00

Я только что выполнил операцию zpool replace, используя не относящийся к делу диск с помощью следующей команды: `Code: zpool replace -f nas /dev/disk/by-id/ata-ST14000NM0018-2H4101_ZHZ3VJCH /dev/disk/by-id/ata-ST14000NM000J-2TX103_ZR5BBTP8`. Операция замены прошла успешно, поэтому я выключил сервер, чтобы извлечь неисправный диск и установить исправный в правильный отсек. После включения ноды Proxmox и запуска `zpool status`, я вижу следующую ошибку:

`Code: pool: nas
state: DEGRADED
status: One or more devices could not be used because the label is missing or
invalid. Sufficient rplicas exist for the pool to continue
functioning in a degraded state.
action: Replace the device using 'zpool replace'.
see: https://openzfs.github.io/openzfs-docs/msg/ZFS-8000-4J
scan: resilvered 8.12T in 22:10:01 with 0 errors on Fri May 16 08:32:55 2025
config:

NAME STATE READ WRITE CKSUM
nas DEGRADED 0 0 0
raidz1-0 DEGRADED 0 0 0
ata-ST14000NM0018-2H4101_ZHZ38XLQ ONLINE 0 0 0
1436561644858147629 UNAVAIL 0 0 0 was /dev/disk/by-id/ata-ST14000NM0018-2H4101_ZHZ67X6X-part1
ata-ST14000NM000J-2TX103_ZR5BBTP8 ONLINE 0 0 0
ata-ST14000NM0018-2H4101_ZHZ6HXSM ONLINE 0 0 0
ata-ST14000NM001G-2KJ103_ZTM0LSW0 ONLINE 0 0 0
ata-ST14000NM0018-2H4101_ZHZ1D3P5 ONLINE 0 0 0

errors: No known data errors`

Странно, но при запуске `lsblk -S` я вижу диск в порядке:

`Code: NAME HCTL TYPE VENDOR MODEL REV SERIAL TRAN
sda 10:0:0:0 disk ATA CT2000MX500SSD1 046 2404E89329B0 sas
sdb 10:0:1:0 disk ATA CT2000MX500SSD1 046 2404E8932971 sas
sdc 10:0:2:0 disk ATA ST14000NM000J-2TX103 SN02 ZR5BBTP8 sas
sdd 10:0:3:0 disk ATA ST14000NM001G-2KJ103 SN04 ZTM0LSW0 sas
sde 10:0:4:0 disk ATA ST14000NM0018-2H4101 SN04 ZHZ6HXSM sas
sdf 10:0:5:0 disk ATA ST14000NM0018-2H4101 SN04 ZHZ1D3P5 sas
sdg 10:0:6:0 disk ATA ST14000NM0018-2H4101 SN04 ZHZ38XLQ sas
sdh 10:0:7:0 disk ATA ST14000NM0018-2H4101 SN04 ZHZ67X6X sas`

Я выключу сервер и убежусь, что не отодвинул какие-нибудь SATA-кабели. Но есть ли ещё что-то, что могло пойти не так?

Спасибо!

Consonant1022 Guest	#2 0 16.05.2025 19:48:00 Вырубил ноду, переподключил SATA-кабели, и теперь устройство определяется корректно. Похоже, я немного его расшатался… Странно, что я видел его через `lsblk -S`, но пул ZFS не видел.

UdoB

Guest

16.05.2025 20:35:00

Отлично! Ну ты смельчак, решивший использовать однократную избыточность с накопителями на 14 ТБ. Это только для временных файлов или черновиков? Если там реально важные/ценные данные, я бы посоветовал использовать RaidZ3 или, может быть, RaidZ2... Ты же понимаешь, что твой пул работает как один диск? Я имею в виду по IOPS. Обычно рекомендуют добавить "Особое устройство", собранное из нескольких (больше одного!) быстрых SSD/NVMe, с зеркалированием. Его ёмкость может составлять 1%–2% от общего размера пула данных. Это заметно ускорит работу всего. К сожалению, это поможет только с новыми данными, которые будут записываться в пул в будущем --> нужно добавить это до того, как пул заполнится. Внимание: не экспериментируйте с этим, "Особое устройство" НЕМЕЗНО удалять после добавления. Просто говорю..., конечно, ymmv ---- ¹ Я только что убедился, что "Особое устройство" на самом деле можно удалить в определенных обстоятельствах: если ты установил контрольную точку и готов потерять все последующие данные: Сообщение в теме 'Высокая задержка ввода-вывода, нестабильные скорости передачи' 18 мая 2025 года. Это заставило меня заинтересоваться. Просто чтобы проверить реальное поведение "контрольной точки" при изменении топологии пула – особенно при добавлении "Особого устройства". Я сделал это на бросовом компьютере, конечно: Код: root@pnz:~# zpool checkpoint rpool
root@pnz:~# zpool status
pool: rpool
state: ONLINE
checkpoint: created Sun May 18 10:08:56 2025, consumes 496K Код: root@pnz:~# zpool add rpool special /dev/sdb Код: root@pnz:~# zpool list -v... UdoB

Consonant1022 Guest	#4 0 16.05.2025 21:36:00 Ну, данные не критические, и все регулярно бэкапится на другой узел Proxmox, а также делается менее регулярное внесайтовское резервное копирование. Аспект "высокой доступности" полезен, но не критичен. У меня есть возможность добавить еще один диск в этой системе, так что, возможно, я это сделаю в будущем, но пока что этого достаточно для моих целей. Скорость тоже не так уж важна, но я посмотрю что-то про Special Device — интересная концепция. Где-то в ближайшем будущем я, возможно, перестрою этот хранилище данных, и тогда можно будет это учесть. Спасибо!

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры