+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

ZFS Epyc и NVMe - низкая производительность, Proxmox Виртуальная Среда

flowbergit

Guest

21.01.2022 10:47:00

Привет, я попробовал настроить ZFS raid10 с 12 NVMe Samsung 2TB — ashift установлен на 13, сжатие lz4. Хост для виртуальных машин: w2019 standard с контроллером Virtio SCSI, и результаты оказались плохими. Подобная конфигурация с SAS RAID 10 на 8 жестких дисках и встроенным RAID-контроллером показала значительно лучшие результаты, особенно по записи. Есть рекомендации, как исправить эту ситуацию?

tjk Guest	#2 0 08.10.2022 06:34:00 Ты когда-нибудь разобрался с этим? Я тоже замечаю слабую производительность с 12 NVME дисками и EPYC.

spirit

Guest

08.10.2022 07:59:00

если не хотите плохой производительности с zfs (или ceph, или btrfs), не используйте обычные SSD. zfs требует быстрой синхронной записи для журнала, вам нужны датацентровские SSD с суперконденсатором. если нет, используйте аппаратный RAID или программный RAID с mdadm.

leesteken

Guest

08.10.2022 09:17:00

Linus Tech Tips также столкнулись с проблемами производительности при использовании множества NVMe-накопителей параллельно: https://www.youtube.com/watch?v=xWjOh0Ph8uM Это был слишком большой объем данных, слишком быстро (приближаясь к скорости ОЗУ в raid0), что вызывало слишком много прерываний (в Windows и Linux).

Dunuin Guest	#5 0 08.10.2022 09:43:00 Вы также можете попробовать сравнить результат теста с "primarycache=metadata" с результатом, установленным на "primarycache=all", и посмотреть, поможет ли это.

guletz

Guest

26.01.2023 15:00:00

Привет, 1. Я бы попробовал отформатировать один из сырых vHDD внутри ВМ с использованием блока в 4К и протестировать снова внутри ВМ с fio 2. Если ты не будешь использовать никакую БД в этой ВМ (или других ВМ), тестирование с directio(direct=1) не имеет смысла! - если в будущем ты будешь использовать БД, то лучше всего воспользоваться выделенным SLOG (чтобы избежать двойной записи одних и тех же данных в пул), для лучших IOPs Удачи / Bafta!

spirit

Guest

27.01.2023 08:31:00

"12 NVMe Samsung 2TB" — так это потребительские накопители? (поскольку SSD класса DC около 1,6 ТБ). У тебя может быть хорошая скорость записи с ZFS, так как для журнала ZFS нужны быстрые синхронные записи. (а потребительские SSD не имеют суперконденсаторов, поэтому нужно очищать их буфер каждый раз, когда ZFS записывает в свой журнал). Твой контроллер RAID имеет лучшую производительность, потому что, я думаю, у него есть кэш + батарея? (так что работает как SSD для дата-центров с суперконденсатором)

guletz Guest	#8 0 27.01.2023 09:23:00 Привет, согласен на 100%! Удачи / Бафта!

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры