Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    Проблемы с VLAN

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Проблемы с VLAN, Proxmox Виртуальная Среда
     
    vb543
    Guest
    #1
    0
    24.03.2023 17:13:00
    Привет! У меня проблемы с тем, чтобы VLANы нормально заработали в моём новом кластере Proxmox. Надеюсь, кто-то подскажет, как это исправить. Короче говоря, кажется, что Proxmox неправильно пропускает тегированные пакеты к моим виртуалкам.

    Пример VLAN 542 (10.0.42.0/24): у меня есть дополнительная 10-гигабитная сетевая карта (NIC), подключённая к транковому порту на свитче. Для неё я создал vlan-aware мост (vmbr1) на интерфейсе enp65s0. Дальше у меня есть Windows 10 VM, который настроен использовать vmbr1 с VLAN тегом 542. В guest OS NIC настроен с IP 10.0.42.8. На другом роутере настроен IP 10.0.42.1. Если я пытаюсь пропинговать .1 с .8 — ответа нет. И наоборот, с .1 на .8 тоже нет.

    Однако, если запустить tcpdump на узле proxmox для enp65s0, я вижу, что пакеты доходят (по крайней мере ARP-пакеты), но дальше не уходят.

    TCPDump с пингом с .1 на .8:

    Bash: root@hv2:~# tcpdump -envi enp65s0 -e '(vlan 542)'
    -сокращено-
    10:53:16.578688 18:fd:74:c1:4d:0a > ff:ff:ff:ff:ff:ff, ethertype 802.1Q (0x8100), length 60: vlan 542, p 0, ethertype ARP (0x0806), Ethernet (len 6), IPv4 (len 4), Request who-has 10.0.42.8 tell 10.0.42.1, length 42
    10:53:17.635885 18:fd:74:c1:4d:0a > ff:ff:ff:ff:ff:ff, ethertype 802.1Q (0x8100), length 60: vlan 542, p 0, ethertype ARP (0x0806), Ethernet (len 6), IPv4 (len 4), Request who-has 10.0.42.8 tell 10.0.42.1, length 42
    ...  
    -сокращено-

    Конфигурация сети на узле:

    Bash: root@hv2:~# cat /etc/network/interfaces
    # network interface settings; autogenerated
    # Пожалуйста, НЕ редактируйте этот файл вручную, если не уверены, что делаете.
    #
    # Если хотите управлять частью конфигурации вручную,
    # используйте директивы 'source' или 'source-directory'.
    # PVE сохранит эти директивы, но НЕ будет читать конфигурацию
    # из внешних файлов, так что не пытайтесь переносить
    # интерфейсы, управляемые PVE, во внешние файлы!

    auto lo
    iface lo inet loopback

    iface eno1 inet manual

    iface eno3 inet manual

    iface eno4 inet manual

    iface eno2 inet manual

    auto enp65s0
    iface enp65s0 inet manual
    #10G

    auto vmbr0
    iface vmbr0 inet static
           address 10.10.44.36/24
           gateway 10.10.44.1
           bridge-ports eno1
           bridge-stp off
           bridge-fd 0

    auto vmbr1
    iface vmbr1 inet manual
           bridge-ports enp65s0
           bridge-stp off
           bridge-fd 0
           bridge-vlan-aware yes
           bridge-vids 2-4094
    #10GB Bridge

    auto vlan88
    iface vlan88 inet static
           address 10.10.88.36/24
           vlan-raw-device vmbr1
    #CEPH VLAN 88

    auto vlan542
    iface vlan542 inet static
           address 10.0.42.9/24
           vlan-raw-device vmbr1
    #Test VLAN 542

    auto vlan42
    iface vlan42 inet static
           address 10.10.42.242/24
           vlan-raw-device vmbr1
    #Test VLAN 42

    Всё выше было сгенерировано через GUI. Как видите, у меня настроено ещё несколько VLANов, которые я использую для тестов. Linux VLANы с IP-адресами на гипервизоре тоже не работают… за исключением VLAN 88!? Вот это меня реально ставит в тупик: VLAN 88 отлично работает от роутера к узлу и к гостевой виртуалке (если переключить с 542 на 88).

    Изначально эта последняя деталь заставила меня усомниться в конфигурации свитча. Но я использую этот свитч для транкинга на несколько других свитчей без проблем, и порт настроен одинаково. Более того, tcpdump показывает, что пакеты приходят по правильному VLAN.

    Если запустить захват пакетов на мосту vmbr1, видно, что виртуалка шлёт ARP-запросы, а роутер на .1 до моста вообще не доходит.

    Bash: root@hv2:~# tcpdump -envi vmbr1 -e '(vlan 542)'
    tcpdump: listening on vmbr1, link-type EN10MB (Ethernet), snapshot length 262144 bytes
    11:06:17.091353 5e:87:93:37:21:39 > ff:ff:ff:ff:ff:ff, ethertype 802.1Q (0x8100), length 46: vlan 542, p 0, ethertype ARP (0x0806), Ethernet (len 6), IPv4 (len 4), Request who-has 10.0.42.1 tell 10.0.42.8, length 28
    11:06:18.079245 5e:87:93:37:21:39 > ff:ff:ff:ff:ff:ff, ethertype 802.1Q (0x8100), length 46: vlan 542, p 0, ethertype ARP (0x0806), Ethernet (len 6), IPv4 (len 4), Request who-has 10.0.42.1 tell 10.0.42.8, length 28
    ...
    7 пакетов захвачено
    7 пакетов прошло фильтр
    0 пакетов потеряно ядром

    Вполне возможно, что я упускаю что-то очень простое. Заранее благодарен за любые советы! Спасибо!
     
     
     
    spirit
    Guest
    #2
    0
    18.08.2023 18:17:00
    Это должно быть настроено на физическом интерфейсе и бонде, а не на vmbr. Код:  
    auto enp5s0  
    iface enp5s0 inet manual  
           rx-vlan-filter off  

    auto vmbr2  
    iface vmbr2 inet static  
           address 10.0.0.4/24  
           bridge-ports enp5s0  
           bridge-stp off  
           bridge-fd 0  
           bridge-vlan-aware yes  
           bridge-vids 2-4094  

    # VLAN-транк, затем выполните "ifreload -a -d" в режиме отладки, чтобы получить полные логи.  
    # ethtool -k enp5s0 должен показать "rx-vlan-filter off", если драйвер сетевой карты позволяет его отключить.
     
     
     
    Zoarial
    Guest
    #3
    0
    18.08.2023 17:02:00
    Эта тема просто спасение после похожих проблем с картой Solarflare после обновления до PVE 8. Удаление этих строк у меня просто сделало мост невосприимчивым к VLAN, и в GUI отражались изменения, как я и ожидал. Если кому-то еще поможет, у меня сработало изменение bridge vids на 2-126. Bash:  
    auto vmbr2  
    iface vmbr2 inet static  
           address 10.0.0.4/24  
           bridge-ports enp5s0  
           bridge-stp off  
           bridge-fd 0  
           bridge-vlan-aware yes  
           bridge-vids 2-126  
    #VLAN Trunk Это было максимальное количество VLAN, которое я мог ввести, не получая ту же ошибку, что и у вас.
     
     
     
    spirit
    Guest
    #4
    0
    18.08.2023 17:31:00
    Для proxmox8 можно попробовать добавить rx-vlan-filter off в /etc/network/interfaces. Код:  
    auto enp5s0  
    iface enp5s0 ...  
         ....  
         rx-vlan-filter off  

    Далее перезагрузить сетевые настройки (ifreload -a). Это работает с картой mellanox, не уверен насчёт Solarflare, было бы здорово проверить, так как я хочу добавить эту опцию по умолчанию при включённом vlan aware.
     
     
     
    Zoarial
    Guest
    #5
    0
    18.08.2023 17:49:00
    К сожалению, это снова вызывает у меня исходную ошибку. Просто чтобы уточнить, я добавляю это в конфигурацию моста вот так?

    Bash:
    auto vmbr2
    iface vmbr2 inet static
           address 10.0.0.4/24
           bridge-ports enp5s0
           bridge-stp off
           bridge-fd 0
           bridge-vlan-aware yes
           bridge-vids 2-4094
           rx-vlan-filter off
    #VLAN Trunk
     
     
     
    Zoarial
    Guest
    #6
    0
    18.08.2023 18:57:00
    Понял, извиняюсь, я немного новичок в этом деле. Похоже, что так делать нельзя, потому что теперь я получаю ещё одну ошибку: Bash: Exception: команда '/sbin/ethtool -K enp5s0 rx-vlan-filter off' завершилась с ошибкой: вернула 1 (Не удалось изменить ни одной из функций устройства  
    Фактические изменения:  
    rx-vlan-filter: включён [запрошено выключение]
    )

    Полный текст ошибки:  
    Bash: info: vmbr2: применяется конфигурация порта моста: ['enp5s0']
    debug: enp5s0: pre-up: запуск модуля bridgevlan  
    debug: enp5s0: pre-up: запуск модуля tunnel  
    debug: enp5s0: pre-up: запуск модуля vrf  
    debug: enp5s0: pre-up: запуск модуля ethtool  
    info: чтение '/sys/class/net/enp5s0/rx-vlan-filter'  
    info: выполнение /sbin/ethtool -K enp5s0 rx-vlan-filter off  
    debug:   Файл "/usr/sbin/ifreload", строка 135, в <module>  
       sys.exit(main())  
     Файл "/usr/sbin/ifreload", строка 123, в main  
       return stand_alone()  
     Файл "/usr/sbin/ifreload", строка 103, в stand_alone  
       status = ifupdown2.main()  
     Файл "/usr/share/ifupdown2/ifupdown/main.py", строка 77, в main  
       self.handlers.get(self.op)(self.args)  
     Файл "/usr/share/ifupdown2/ifupdown/main.py", строка 284, в run_reload  
       ifupdown_handle.reload(['pre-up', 'up', 'post-up'],
     Файл "/usr/share/ifupdown2/ifupdown/ifupdownmain.py", строка 2447, в reload  
       self._reload_default(*args, **kargs)  
     Файл "/usr/share/ifupdown2/ifupdown/ifupdownmain.py", строка 2425, в _reload_default  
       ret = self._sched_ifaces(new_filtered_ifacenames, upops,  
     Файл "/usr/share/ifupdown2/ifupdown/ifupdownmain.py", строка 1566, в _sched_ifaces  
       ifaceScheduler.sched_ifaces(self, ifacenames, ops,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 595, в sched_ifaces  
       cls.run_iface_list(ifupdownobj, run_queue, ops,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 325, в run_iface_list  
       cls.run_iface_graph(ifupdownobj, ifacename, ops, parent,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 302, в run_iface_graph  
       cls.run_iface_list(ifupdownobj, dlist, ops,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 325, в run_iface_list  
       cls.run_iface_graph(ifupdownobj, ifacename, ops, parent,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 302, в run_iface_graph  
       cls.run_iface_list(ifupdownobj, dlist, ops,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 325, в run_iface_list  
       cls.run_iface_graph(ifupdownobj, ifacename, ops, parent,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 315, в run_iface_graph  
       cls.run_iface_list_ops(ifupdownobj, ifaceobjs, ops)  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 188, в run_iface_list_ops  
       cls.run_iface_op(ifupdownobj, ifaceobj, op,  
     Файл "/usr/share/ifupdown2/ifupdown/scheduler.py", строка 106, в run_iface_op  
       m.run(ifaceobj, op,  
     Файл "/usr/share/ifupdown2/addons/ethtool.py", строка 669, в run  
       op_handler(self, ifaceobj)  
     Файл "/usr/share/ifupdown2/addons/ethtool.py", строка 393, в _pre_up  
       self.do_offload_settings(ifaceobj, 'rx-vlan-filter', 'rx-vlan-filter')  
     Файл "/usr/share/ifupdown2/addons/ethtool.py", строка 224, в do_offload_settings  
       self.log_error('%s: %s' % (ifaceobj.name, str(e)), ifaceobj)  
     Файл "/usr/share/ifupdown2/ifupdownaddons/modulebase.py", строка 121, в log_error  
       stack = traceback.format_stack()  
    debug: Трассировка (последний вызов последний):  
     Файл "/usr/share/ifupdown2/addons/ethtool.py", строка 222, в do_offload_settings  
       utils.exec_command(cmd)  
     Файл "/usr/share/ifupdown2/ifupdown/utils.py", строка 414, в exec_command  
       return cls._execute_subprocess(shlex.split(cmd),  
              ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^  
     Файл "/usr/share/ifupdown2/ifupdown/utils.py", строка 392, в _execute_subprocess  
       raise Exception(cls._format_error(cmd,  
    Исключение: команда '/sbin/ethtool -K enp5s0 rx-vlan-filter off' завершилась ошибкой: вернула 1 (Не удалось изменить ни одной из функций устройства  
    Фактические изменения:  
    rx-vlan-filter: включён [запрошено выключение]
    )  
    Ошибка: enp5s0: команда '/sbin/ethtool -K enp5s0 rx-vlan-filter off' завершилась ошибкой: вернула 1 (Не удалось изменить ни одной из функций устройства  
    Фактические изменения:  
    rx-vlan-filter: включён [запрошено выключение]
    )
     
     
     
    spirit
    Guest
    #7
    0
    18.08.2023 18:59:00
    Ммм, возможно, драйвер solarflare не позволяет это менять. (Не уверен, что это можно сделать, когда интерфейс уже активен и находится в режиме моста). Если есть возможность перезагрузиться, чтобы удостовериться, это было бы здорово.
     
     
     
    FireROR
    Guest
    #8
    0
    23.02.2024 19:49:00
    У меня сегодня была такая же проблема на PVE 8.1.4 с Mellanox Technologies MT26448. Я просто добавил все VLAN, которые есть в моей сети, максимум — всего 126 VLAN. Добавлять больше не нужно, и у меня всё равно не работает для моей сетевой карты. rx-vlan-filter off Просто добавьте в настройки моста: bridge-vlan-aware yes bridge-vids 10,20,30,40,50  <---- Главное, чтобы всего было не больше 126.
     
     
     
    cthulhu897
    Guest
    #9
    0
    29.08.2024 19:39:00
    Совет-спасатель жизни: я переезжаю на Proxmox и купил два мини-ПК, сейчас это сервера Proxmox VE с двумя интерфейсами на каждом. Хотел изолировать один из них за фаерволом pfsense, но не смог заставить VLANы работать... Перепробовал всё, и помогли вот эти два варианта.

    Спойлер

    pve1:  
    Code:  
    auto lo  
    iface lo inet loopback  
     
    auto enp3s0  
    iface enp3s0 inet manual  
     
    auto enp1s0  
    iface enp1s0 inet manual  
           rx-vlan-filter off  
     
    auto vmbr0  
    iface vmbr0 inet static  
           address 192.168.0.7/24  
           gateway 192.168.0.254  
           bridge-ports enp3s0  
           bridge-stp off  
           bridge-fd 0  
     
    iface wlp2s0 inet manual  
     
    auto vmbr1  
    iface vmbr1 inet manual  
           bridge-ports enp1s0  
           bridge-stp off  
           bridge-fd 0  
           bridge-vlan-aware yes  
           bridge-vids 10  
    #IF_trunk

    pve2:  
    Code:  
    auto lo  
    iface lo inet loopback  
     
    iface enp1s0 inet manual  
     
    iface enp2s0 inet manual  
           rx-vlan-filter off  
     
    auto vmbr0  
    iface vmbr0 inet static  
           address 192.168.0.8/24  
           gateway 192.168.0.254  
           bridge-ports enp1s0  
           bridge-stp off  
           bridge-fd 0  
    #proxmox interface  
     
    auto vmbr1  
    iface vmbr1 inet manual  
           bridge-ports enp2s0  
           bridge-stp off  
           bridge-fd 0  
           bridge-vlan-aware yes  
           bridge-vids 10  
           mtu 1492  
    #IF_trunk

    Теперь я просто тегирую интерфейсы ВМ, и мои VLANы работают как надо.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры