+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

RSS

Проблема с производительностью диска ВМ после перехода с локального RAID SSD на NFS-хранилище, Proxmox Виртуальная Среда

powersupport

Guest

12.08.2025 12:01:00

У нас есть подписка Proxmox VE Essentials 1xCPU, и после миграции виртуального диска виртуальной машины наблюдается падение производительности диска. Изначально диск ВМ был на локальном RAID SSD. Мы перенесли его на общий NFS-диск (RAID-массив с дисками 15K RPM), размещённый на сервере ESXi по сети. После миграции заметили следующее: скорость записи на NFS-хранилище примерно 305 МБ/с; производительность локального RAID SSD после виртуализации существенно упала и теперь значительно ниже ожидаемой.

Конфигурация ВМ:
agent: 1
boot: order=scsi0;ide2;net0
cores: 4
memory: 8192
scsi0: local-lvm2:vm-121-disk-1,size=1T
scsihw: virtio-scsi-single

Виртуальный контроллер диска ВМ — VirtIO SCSI (single queue). Мы подозреваем, что снижение производительности может быть связано с:

- Обработкой ввода-вывода контроллером VirtIO SCSI
- Возможной неправильной настройкой или проблемой с драйвером внутри гостевой ОС
- Потенциальным узким местом в локальном RAID SSD после виртуализации

Вопросы:

- Может ли выбор virtio-scsi-single быть причиной падения производительности?
- Помогло бы переключение на VirtIO SCSI с несколькими очередями или другой тип контроллера увеличить пропускную способность?
- Есть ли рекомендуемые параметры настройки (как на самом Proxmox, так и в гостевой ОС) для оптимальной производительности в этой конфигурации?
- Может ли сама настройка NFS-хранилища или процесс миграции повлиять на производительность локального RAID SSD для этой ВМ?

bbgeek17

Guest

28.08.2025 14:58:00

Привет, @powersupport! Давно не заглядывал в эту тему, так как был в отъезде. Похоже, последние шаги — это, чтобы вы уточнили свою конфигурацию и заново протестировали все моменты для установления базовой линии. Еще раз перечитав исходное сообщение, у меня возникло еще больше вопросов. Ты написал: «Диск был размещён локально? То есть на local-lvm». На основании конфигурации, приложенной к первому посту, он всё ещё размещён локально. Его перенесли на NFS-шару, но в предоставленной конфигурации этого не видно. Там всё ещё указан диск на "local-lvm2", который, судя по всему, был экспериментом и теперь отсутствует? Что показывают результаты FIO? Сравнение local-lvm напрямую и внутри ВМ? NFS и ВМ? NFS и local-lvm? Вероятно, это не так важно, потому что нужно перепроверить с более понятным описанием и последовательностью. Ты возвращал диск обратно на local-lvm после перехода на NFS? Показало ли это ухудшение работы для диска, который мигрировал туда и обратно? Для другой, не связанной с этим ВМ? Рекомендуется также ознакомиться с советами в этой статье: https://kb.blockbridge.com/technote/proxmox-tuning-low-latency-storage/index.html А ещё с этой: https://kb.blockbridge.com/technote/proxmox-aio-vs-iouring/index.html#summary В конце концов, похоже, у тебя бизнес-среда и есть подписка на поддержку. Открыть обращение в PVE support может быть эффективнее, чем надеяться на волонтёров на форуме. Удачи! Blockbridge: сверхнизкая задержка в полностью NVMe общей системе хранения для Proxmox — https://www.blockbridge.com/proxmox

powersupport

Guest

29.08.2025 04:54:00

Привет, @bbgeek17

1. Значит, диск был размещён локально?
Да, на local-lvm. То есть на local-lvm. Согласно конфигурации в первом сообщении, он всё ещё размещён локально?
Да.

2. Диск переместили на NFS-шару, но в предоставленной тобой конфигурации об этом ничего не видно. Там всё ещё указан диск на "local-lvm2", который, по твоим словам, был экспериментом и сейчас уже отсутствует?
Да, я проводил эксперимент, чтобы проверить, связано ли проблема с IO с конфигурацией виртуальной машины.

3. Что показывают результаты FIO? Сравнение local-lvm напрямую и через VM? NFS и VM? NFS и local-lvm?
Вроде бы это не так важно, нужно заново всё делать с более понятными описаниями и единообразием. Коротко: производительность IO на local-lvm оставляет желать лучшего. Именно поэтому я и создал тикет с просьбой помочь. Если мои действия тебя запутали — просто не обращай внимания. Подскажи, что можно сделать, чтобы диагностировать проблему.

4. Ты возвращал диск обратно на local-lvm после миграции на NFS?
Да.

5. Стало ли хуже для диска после таких перемещений? Или для другой, не связанной VM?
Не особо, я сделал новую установку ОС на local-lvm. Производительность диска всё равно плохая.

weconnect Guest	#4 0 29.08.2025 08:52:00 Возможно, проблема в накладных расходах… Я бы попробовал ZFS и подключил диски в формате RAW. Это даст лучшую производительность. И не забывайте: делайте бэкапы, бэкапы и ещё раз бэкапы.

bbgeek17

Guest

29.08.2025 15:05:00

Ладно, NFS, миграция, ESXi, сеть — всё это лишнее и не относится к вашей проблеме. Всё сводится к одному: у вас есть RAID-поддерживаемая группа LVM, и вас не устраивает её производительность внутри виртуальной машины. Она не ухудшилась — она просто изначально была неудовлетворительной?

@powersupport, вы не ответили на самый важный вопрос — «Что показывают результаты FIO?». Информация из прикреплённых вами вначале txt-файлов fio бесполезна. Мы не знаем, куда именно направлены тестовые файлы.

root@pve4:~# fio --name=test --filename=testfile
[georgetse@ee19c-dev ~]$ fio --name=test --filename=testfile

Пожалуйста, повторите тесты, используйте больший объём данных, подробно опишите конфигурацию во время теста, то есть куда направлен «testfile» и весь уровень под ним.

@powersupport, учтите, что вы не открыли тикет — форум не является официальным сервисом поддержки. Думаю, вы можете открыть официальный тикет в службу поддержки Proxmox через ваш клиентский портал.

@weconnect, у автора темы железный RAID6, и для перехода на ZFS ему придётся полностью всё перестраивать. Даже тогда не уверен, что производительность на чтение в виртуальной машине увеличится в 10 раз (делаю предположение на основе исходных результатов FIO).

Blockbridge: сверхнизкая задержка, полностью NVMe, разделяемое хранилище для Proxmox — https://www.blockbridge.com/proxmox

powersupport

Guest

01.09.2025 07:16:00

Привет, @bbgeek17, спасибо за терпение. Во вложении — показатели производительности ввода-вывода между хостом и гостевой системой. Так как пакет ssacli не найден в репозитории Proxmox, я снял информацию о RAID-контроллере через iLo. Спасибо!

bbgeek17

Guest

02.09.2025 17:27:00

Привет, @powersupport! У нас возникают сложности с тем, чтобы понять проблему и помочь вам. Представленной информации пока недостаточно для диагностики. Я бы советовал открыть тикет в поддержку по вашему контракту Proxmox — там вы получите персональную помощь, ради этого оно и создано. При поиске причин проблем с производительностью важно действовать системно: тщательно измерять показатели как на уровне хоста, так и виртуальной машины, исключать слои файловой системы в тестах и фиксировать каждый шаг. Кстати, я привлек одного из наших инженеров по производительности, чтобы он взглянул на то, что есть. Его мнение — возможно, проблема связана с планированием CPU на хосте, вероятно из-за возраста системы, неправильной настройки или просто перегрузки. Удачи! Не забудьте написать сюда, когда найдете решение. Blockbridge: сверхнизкая задержка, полностью NVME общий сторидж для Proxmox — https://www.blockbridge.com/proxmox

_gabriel Guest	#8 0 02.09.2025 22:22:00 Аппаратный RAID Write Cache должен быть включен, особенно при использовании raid5/6. Не так ли?!

powersupport Guest	#9 0 28.08.2025 06:03:00 Здравствуйте, не мог бы кто-то любезно сообщить об обновлении по решению этой проблемы? С нетерпением жду вашего ответа. Спасибо.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры