+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Проблема с Proxmox datacenter и Cisco nexus cluster., Proxmox Виртуальная Среда

tiwang

Guest

20.05.2025 11:50:00

Привет всем! У нас возникла неприятная проблема с 4-узловым кластером Proxmox, который охватывает два сайта, соединённых L2 10G dark fiber. Используем Cisco Nexus 9k на обоих сайтах. На первом сайте всё в порядке – здесь узлы подключены к одному TOR-коммутатору. А вот на другом сайте узлы подключены к двум Nexus 9k, по одному на каждый коммутатор. Коммутаторы работают как кластер через VPC. Но вот эти Nexus 9k на другом сайте у нас проблемы доставляют – подозреваю, что что-то неправильно настроили в VNET. У нас есть две VLAN: VLAN 115 для "management" и VLAN 116 для VM. Как можно видеть здесь, похоже, что-то вызывает цикл:

2025 May 20 08:20:53 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 08:21:02 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 08:23:02 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 08:23:12 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 08:25:12 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 11:22:01 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 11:24:01 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 11:33:52 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 11:35:52 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 11:36:01 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 11:38:01 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 11:38:11 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 11:40:11 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115
2025 May 20 11:40:19 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_DISABLE_LEARN: Disabling learning in vlan 115 for 120s due to too many mac moves
2025 May 20 11:42:19 DKTONDAC-- %L2FM-2-L2FM_MAC_FLAP_RE_ENABLE_LEARN: Re-enabling learning in vlan 115

У кого-нибудь было подобное поведение с Nexus коммутаторами?

tiwang Guest	#2 0 20.05.2025 13:54:00 Ок, проблема решена – это была не проблема в Proxmox, а неправильная, недостающая конфигурация VPC. Решили проблему после добавления определения VPC, которого не хватало.

bbgeek17

Guest

20.05.2025 15:28:00

Просто помните, что если вы потеряете связь между сайтами, будь то по физическим или программным причинам, у вас не будет кворума ни на одной из сторон, и узлы могут перезагрузиться и остаться в деградированном состоянии в обоих местах. Заходите Blockbridge: Ultra low latency all-NVME shared storage for Proxmox - https://www.blockbridge.com/proxmox

Johannes S

Guest

20.05.2025 16:07:00

Эта точка довольно важна. @tiwang, подумай о настройке Linux-устройства в качестве узла кворума: https://pve.proxmox.com/wiki/Cluster_Manager#_corosync_external_vote_support. Старый десктоп или Raspberry Pi будет вполне достаточно, если он может работать под Debian Bookworm.

bbgeek17 Guest	#5 0 20.05.2025 16:51:00 И ещё нужно, чтобы это было организовано в третьем узле, чтобы быть честным к любым сбоям DC. Иначе можно получить сбой узла, содержащего кворум, и тогда выживший 2-узловой узел окажется в меньшинстве. Blockbridge: ультранизкая задержка, все-NVMe совместно используемое хранилище для Proxmox - https://www.blockbridge.com/proxmox

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры