+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Proxmox pfsense vm с крайне низкой пропускной способностью, Proxmox Виртуальная Среда

abhishek.akt

Guest

18.03.2020 22:30:00

Привет! Я уже больше года перешёл на Proxmox VE с Hyper-V и просто обожаю этот продукт. У меня небольшой домашний сервер — один Proxmox на Intel Core i5 с 16 ГБ оперативки. Запущены фаервол и несколько других виртуалок. До того, как я поставил pfSense, всё работало отлично. Но с pfSense пропускная способность сильно упала.

Я пробовал настройки, которые советуют Proxmox и Netgate, отключил всё аппаратное ускорение — это помогло с загрузкой, но интернет всё равно медленный. У меня 300 Мбит/с на вход и выход, а с pfSense получаю около 150. Виртуалка pfSense выделена 2 ядра и 4 ГБ ОЗУ. Использование ресурсов невысокое.

Пробовал ставить чистую виртуалку pfSense, даже девелоперскую сборку 2.5 — проблема осталась. Сеть — Intel Gigabit NIC. Перебирал все сетевые адаптеры: VirtIO, Intel E1000, VMware, даже Realtek — эффекта ноль. На форумах советуют отключать TX на vmbr0 и реальном Ethernet порте в /etc/network/interfaces — тоже без толку.

Я точно знаю, что это не проблема Proxmox, потому что если запустить виртуалку Untangle, скорость нормальная. Читал, что FreeBSD плохо дружит с Proxmox. На выделенном железе или в Hyper-V pfSense работает без проблем. Думаю, дело именно в FreeBSD.

Вот результаты iperf между виртуалкой pfSense и Ubuntu, обе подключены к vmbr0 — явно проблема с pfSense:

ubuntu@zm:~$ iperf3 -c asa
Connecting to host asa, port 5201
[ 4] local 10.12.47.43 port 43808 connected to 10.12.47.1 port 5201
[ ID] Interval Transfer Bandwidth Retr Cwnd
[ 4] 0.00-1.00 sec 19.7 MBytes 165 Mbits/sec 0 452 KBytes
[ 4] 1.00-2.00 sec 32.4 MBytes 272 Mbits/sec 0 755 KBytes
[ 4] 2.00-3.00 sec 35.0 MBytes 293 Mbits/sec 0 823 KBytes
[ 4] 3.00-4.00 sec 32.2 MBytes 270 Mbits/sec 0 823 KBytes
[ 4] 4.00-5.00 sec 36.2 MBytes 305 Mbits/sec 0 923 KBytes
[ 4] 5.00-6.00 sec 43.7 MBytes 366 Mbits/sec 0 929 KBytes
[ 4] 6.00-7.00 sec 35.5 MBytes 298 Mbits/sec 0 977 KBytes
[ 4] 7.00-8.00 sec 35.9 MBytes 301 Mbits/sec 0 977 KBytes
[ 4] 8.00-9.00 sec 33.5 MBytes 281 Mbits/sec 0 977 KBytes
[ 4] 9.00-10.04 sec 31.2 MBytes 253 Mbits/sec 0 977 KBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bandwidth Retr
[ 4] 0.00-10.04 sec 335 MBytes 280 Mbits/sec 0 sender
[ 4] 0.00-10.04 sec 333 MBytes 278 Mbits/sec receiver

iperf между двумя Ubuntu, тоже на vmbr0, показывает лучшие результаты:

ubuntu@nextcloud:~$ iperf3 -c zm
Connecting to host zm, port 5201
[ 4] local 10.12.47.50 port 42630 connected to 10.12.47.43 port 5201
[ ID] Interval Transfer Bandwidth Retr Cwnd
[ 4] 0.00-1.00 sec 419 MBytes 3.51 Gbits/sec 0 3.15 MBytes
[ 4] 1.00-2.00 sec 437 MBytes 3.67 Gbits/sec 1 3.15 MBytes
[ 4] 2.00-3.00 sec 422 MBytes 3.55 Gbits/sec 1 3.15 MBytes
[ 4] 3.00-4.00 sec 526 MBytes 4.40 Gbits/sec 0 3.15 MBytes
[ 4] 4.00-5.00 sec 522 MBytes 4.39 Gbits/sec 0 3.15 MBytes
[ 4] 5.00-6.00 sec 474 MBytes 3.97 Gbits/sec 0 3.15 MBytes
[ 4] 6.00-7.00 sec 314 MBytes 2.64 Gbits/sec 1 3.15 MBytes
[ 4] 7.00-8.00 sec 258 MBytes 2.16 Gbits/sec 0 3.15 МBytes
[ 4] 8.00-9.00 sec 412 MBytes 3.46 Gbits/sec 1 3.15 MBytes
[ 4] 9.00-10.00 sec 439 MBytes 3.68 Gbits/sec 0 3.15 MBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bandwidth Retr
[ 4] 0.00-10.00 sec 4.13 GBytes 3.54 Gbits/sec 4 sender
[ 4] 0.00-10.00 sec 4.12 GBytes 3.54 Gbits/sec receiver

iperf с хоста Proxmox на Ubuntu VM отлично работает, как и надо:

root@proxmox:~# iperf3 -c zm
Connecting to host zm, port 5201
[ 5] local 10.12.47.10 port 42520 connected to 10.12.47.43 port 5201
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-1.00 sec 756 MBytes 6.34 Gbits/sec 1 3.13 MBytes
[ 5] 1.00-2.00 sec 905 MBytes 7.59 Gbits/sec 0 3.13 MBytes
[ 5] 2.00-3.00 sec 729 MBytes 6.11 Gbits/sec 0 3.13 MBytes
[ 5] 3.00-4.00 sec 834 MBytes 6.99 Gbits/sec 1 3.13 MBytes
[ 5] 4.00-5.00 sec 849 MBytes 7.12 Gbits/sec 0 3.13 MBytes
[ 5] 5.00-6.00 sec 625 MBytes 5.24 Gbits/sec 5 3.13 MBytes
[ 5] 6.00-7.00 sec 638 MBytes 5.35 Gbits/sec 0 3.13 MBytes
[ 5] 7.00-8.00 sec 860 MBytes 7.21 Gbits/sec 0 3.13 MBytes
[ 5] 8.00-9.00 sec 882 MBytes 7.40 Gbits/sec 0 3.13 MBytes
[ 5] 9.00-10.00 sec 810 MBytes 6.80 Gbits/sec 0 3.13 MBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bitrate Retr
[ 5] 0.00-10.00 sec 7.70 GBytes 6.62 Gbits/sec 7 sender
[ 5] 0.00-10.00 sec 7.70 GBytes 6.62 Gbits/sec receiver

А вот iperf с хоста Proxmox на pfSense довольно медленный:

root@proxmox:~# iperf3 -c asa
Connecting to host asa, port 5201
[ 5] local 10.12.47.10 port 34060 connected to 10.12.47.1 port 5201
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-1.00 sec 46.6 MBytes 391 Mbits/sec 223 184 KBytes
[ 5] 1.00-2.00 sec 59.3 MBytes 497 Mbits/sec 79 341 KBytes
[ 5] 2.00-3.00 sec 53.6 MBytes 449 Mbits/sec 53 426 KBytes
[ 5] 3.00-4.00 sec 43.9 MBytes 369 Mbits/sec 0 495 KBytes
[ 5] 4.00-5.00 sec 42.6 MBytes 357 Mbits/sec 95 544 KBytes
[ 5] 5.00-6.00 sec 42.7 MBytes 358 Mbits/sec 0 601 KBytes
[ 5] 6.00-7.00 sec 49.5 MBytes 415 Mbits/sec 90 646 KBytes
[ 5] 7.00-8.00 sec 46.2 MBytes 388 Mbits/sec 43 691 KBytes
[ 5] 8.00-9.00 sec 51.2 MBytes 430 Mbits/sec 48 742 KBytes
[ 5] 9.00-10.00 sec 35.0 MBytes 294 Mbits/sec 0 778 KBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bitrate Retr
[ 5] 0.00-10.00 sec 471 MBytes 395 Mbits/sec 631 sender
[ 5] 0.00-10.01 sec 467 MBytes 391 Mbits/sec receiver

Я не могу понять, в чём дело. Знаю, что многие используют pfSense на Proxmox, поэтому буду очень признателен за любую помощь. Спасибо!

abhishek.akt Guest	#2 0 02.04.2020 19:26:00 Извиняюсь за поздний ответ. Я пробовал отключить файрвол на обоих виртуальных интерфейсах virtio и менял настройку multiqueue, но это не помогло. К слову, я использую OVS, если это имеет значение.

wolfgang

Guest

03.04.2020 06:00:00

Мы не рекомендуем использовать OVS. OVS – это пережиток прошлого, когда не всё корректно работало с Linux-бриджами. Миф о том, что OVS быстрее, верен только в случае использования его вместе с DPDK. Есть редкие ситуации, когда нужен именно OVS, а не Linux-бриджи. Зачем он вам нужен? Если это не критично, советую перейти на Linux-бриджи.

abhishek.akt

Guest

03.04.2020 10:53:00

Я хотел настроить зеркалирование портов и потоки, и когда я переключился на OVS, это не поддерживалось нативно в Linux bridge, не уверен насчёт текущего статуса. Однако, мне кажется, что это не сильно повлияет на производительность, если я что-то не упускаю. У моего друга такая же система с Linux bridge, и там такая же проблема с низкой скоростью.

fwcheck

Guest

09.09.2020 12:28:00

Вы пробовали отключить аппаратное вычисление контрольных сумм? [X] Отключить аппаратное вычисление контрольных сумм. У меня такие же проблемы с пропускной способностью pfsense, если не отключить аппаратное вычисление контрольных сумм. Иначе пропускная способность ниже 100 Кбит.

t-ice

Guest

02.11.2020 00:23:00

У меня похожая проблема: при интернет-канале 100 Мбит/с по загрузке/выгрузке получаю соответственно 40/50 Мбит/с. Использую похожую конфигурацию — pfsense в proxmox, с linux bridge. Отключал аппаратное ускорение, но без изменений, пробовал другие настройки — результата нет. Кто-то сумел с этим справиться?

DICKHILL

Guest

05.01.2021 06:25:00

Честно говоря, я не читал всю тему! Просто пытался найти решение проблемы с медленной сетью/интернетом на виртуальных машинах за pfSense. Отключение "Hardware Checksum Offloading" помогло мне и сработало мгновенно (перезагружать пока не пришлось!). Как только сохранил настройки, мои тестовые скорости загрузки прыгнули с ~5 МБ/с до почти 800 МБ/с (у меня линия 1000/500 Мбит).

Jonte Guest	#8 0 25.09.2022 14:45:00 Привет, у меня точно такая же проблема. Есть какие-то новости по этому поводу?

ghostface

Guest

11.01.2023 21:48:00

У меня тоже такая проблема. Спойлер:
pveversion -v
proxmox-ve: 7.3-1 (запущенное ядро: 6.1.2-1-pve)
pve-manager: 7.3-4 (запущенная версия: 7.3-4/d69b70d4)
pve-kernel-6.1: 7.3-2
pve-kernel-helper: 7.3-2
pve-kernel-5.15: 7.3-1
pve-kernel-6.1.2-1-pve: 6.1.2-1
pve-kernel-5.19.7-2-pve: 5.19.7-2
pve-kernel-5.15.83-1-pve: 5.15.83-1
pve-kernel-5.15.74-1-pve: 5.15.74-1
ceph-fuse: 15.2.17-pve1
corosync: 3.1.7-pve1
criu: 3.15-1+pve-1
glusterfs-client: 9.2-1
ifupdown2: 3.1.0-1+pmx3
ksm-control-daemon: 1.4-1
libjs-extjs: 7.0.0-1
libknet1: 1.24-pve2
libproxmox-acme-perl: 1.4.3
libproxmox-backup-qemu0: 1.3.1-1
libpve-access-control: 7.3-1
libpve-apiclient-perl: 3.2-1
libpve-common-perl: 7.3-1
libpve-guest-common-perl: 4.2-3
libpve-http-server-perl: 4.1-5
libpve-storage-perl: 7.3-1
libspice-server1: 0.14.3-2.1
lvm2: 2.03.11-2.1
lxc-pve: 5.0.0-3
lxcfs: 4.0.12-pve1
novnc-pve: 1.3.0-3
proxmox-backup-client: 2.3.2-1
proxmox-backup-file-restore: 2.3.2-1
proxmox-mini-journalreader: 1.3-1
proxmox-widget-toolkit: 3.5.3
pve-cluster: 7.3-2
pve-container: 4.4-2
pve-docs: 7.3-1
pve-edk2-firmware: 3.20220526-1
pve-firewall: 4.2-7
pve-firmware: 3.6-2
pve-ha-manager: 3.5.1
pve-i18n: 2.8-1
pve-qemu-kvm: 7.1.0-4
pve-xtermjs: 4.16.0-1
qemu-server: 7.3-2
smartmontools: 7.2-pve3
spiceterm: 3.2-2
swtpm: 0.8.0~bpo11+2
vncterm: 1.7-1
zfsutils-linux: 2.1.7-pve3

Запускаю proxmox на машине с Intel Celeron N5105 и 4 сетевыми картами Intel i226-V 2.5G. В proxmox у меня поднят pfsense 2.6 (использую его как фаервол) и ещё LCX для тестов. Для pfsense использую virtIO мосты, потому что PCI pass-through почему-то работает некорректно. Пробовал разные кабели — результат одинаковый:
- При запуске iperf3 с виртуальной машины на хост Proxmox скорость ожидаемо быстрая — около 2.98 Гбит/сек
- При запуске iperf3 с виртуалки/хоста proxmox/проводного компьютера в сторону интернета стабильно получаю 105 Мбит/сек (хотя провайдер обещает 1 Гбит/сек)
- При запуске iperf3 с проводного компьютера на хост Proxmox получаю около 941 Мбит/сек

Отключение «Аппаратного контрольной суммы» не помогло. Есть идеи?

timbckto Guest	#10 0 12.01.2023 20:54:00 Кажется, я слышал, что pfSense не обновляет ядро, чтобы нормально работать с i225-V или i226. Ты пробовал OPNsense, чтобы проверить, поможет ли это с пропускной способностью?

ghostface

Guest

#11

12.01.2023 21:45:00

Спасибо за ответ! Я использую virtIO как сетевые устройства. Значит ли это, что отсутствие поддержки i226-v пока не имеет значения? (Они будут поддерживаться в pfsense 2.7.0) ОБНОВЛЕНИЕ: Я обновился до pfsense 2.7.0 для теста, но это не помогло, скорость всё так же низкая.

ghostface

Guest

#12

15.01.2023 09:57:00

ОБНОВЛЕНИЕ: Я переключился на OPNsense и столкнулся с той же проблемой (максимальная скорость на WAN-интерфейсе у моего устройства N5105 с 4 x 226-v оказалась 105 Мбит/с) (https://de.aliexpress.com/item/1005004627244223.html). Сначала я думал, что что-то не так с согласованием скорости между модемом от провайдера (UPC) и коробкой, но оказалось, что помогли следующие настройки (System: Settings: Tunables):

Кроме того, я установил плагин os-qemu-guest-agent и включил его с помощью этой настройки:

Я пока не тестировал, но почти уверен, что это решит проблему, которая у меня была в pfSense. Странно то, что при запуске iperf3 на VM с OPNsense к любому серверу в интернете я получаю максимум 105 Мбит/с.

А когда запускаю https://www.speedtest.net/ с подключенного устройства или из докер-контейнера, скорость полная:

Знаете, с чем это связано?

Ballistic Guest	#13 0 09.09.2023 14:43:00 Мне это не помогло на PFsense. Интернет-линия 900/100 Мбит, тест iperf с LAN на PFsense VM около 9xx. Однако производительность NAT ужасная — всего 270 Мбит на загрузку и 10 Мбит на выгрузку.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры