+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

(7.1) Проблема с производительностью ZFS, Proxmox Виртуальная Среда

kromberg

Guest

30.01.2022 14:48:00

Я недавно перенес голый сервер на Proxmox. Сервер обновлен и работает на репозитории для непроизводственной среды. На сервере установлен контроллер HBA с (6) SATA3 6Gbs 4TB дисками. Создан пул ZFS с (6) дисками в raidz (raid5). В целом, я вижу очень плохую производительность пула. Чтения показывают только около 150М/с. Записи начинаются с около 120М/с, но потом падают до 60М/с или 70М/с. Я добавил SSD Intel S3700 для кэширования и журналирования, но это не дало результата, и я не вижу, чтобы SSD использовались (по крайней мере в zpool iostat). Когда сервер работал на голой Fedora 33 с той же конфигурацией (минус SSD для журналирования и кэширования), я получал около 500М/с на чтении и 300М/с на записи. Я немного поизучал вопрос, но не могу найти ничего, что могло бы объяснить разницу между Proxmox и голым сервером. У кого-то есть идеи или что-то, на что стоит обратить внимание?

kisiel

Guest

07.10.2023 22:35:00

Я должен был прочитать перед тем, как начинать. У меня теперь только два варианта: 1. сделать резервную копию и восстанавливать в другой конфигурации (например, 4+1HDD в RAIDZ10+резерв и 10HDD в RAIDZ2) 2. смириться и использовать сервер для холодного хранения и LXC, а для виртуалок взять другой.

kisiel

Guest

07.10.2023 21:02:00

Привет, ребята, я читаю это и страшно волнуюсь. Некоторое время назад я купил сервер с 15 HDD от Hetzner по разумной цене. Не особо погружаясь в детали, я установил Proxmox с RAIDZ2 и всеми настройками по умолчанию – один пул, как вы, возможно, и предполагали. Как уже упоминалось, производительность LXC приемлемая, а производительность VM – просто ужасная. Я не могу установить SSD ни для кэширования, ни для логов. Предполагаю, есть варианты настроить лучше – например, использовать пул RAIDZ2 для холодного хранения и другой пул для хранилища VM, но поскольку это ZFS, похоже, я застрял с этим до тех пор, пока не найду замену, чтобы перенести туда свои живые сервисы – хотя бы временно. Я правильно понимаю? Какую конфигурацию я могу применить к этой машине, если у меня есть такая возможность? Есть ли у меня другие варианты, кроме как ждать?

Dunuin

Guest

07.10.2023 21:53:00

14 дисков в RAID10 с зеркалированием + 1 горячий резерв даст вам в 7 раз больше IOPS производительности, чем у вас сейчас. Также вам, вероятно, нужно увеличить размер блока до чего-то значительно большего, чем стандартные 8K. Используя 15 дисков в RAIDz2 и стандартный размер блока 8K, вы по сути теряете 66% чистой емкости при хранении виртуальных машин...

Dunuin

Guest

07.10.2023 22:57:00

Не поможет так сильно. Производительность IOPS зависит от количества vdev, а не от количества дисков. Поэтому вам нужно много полосатых vdev, особенно при работе с виртуальными машинами/LXCs на HDD. Так что RAID 10 из 14 дисков — это 7 полосатых зеркал, то есть 7 vdev и 7 раз производительность IOPS вашего 15-дискового одиночного vdev raidz2. RAID 10 из 4 дисков — это всего лишь два полосатых зеркала, то есть 2 dev и только 2 раза производительность IOPS raidz2.

kisiel Guest	#6 0 07.10.2023 23:11:00 А, вижу, то есть, в основном, меньшая машина для ВМ, желательно на NVME.

Dunuin Guest	#7 0 07.10.2023 23:23:00 Предпочтительнее использовать SSD уровня Enterprise. Я бы совершенно точно предпочел ZFS зеркало на SATA SSD уровня Enterprise, чем на потребительских NVMe SSD.

kisiel Guest	#8 0 07.10.2023 23:41:00 спасибо

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры