+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Синхронизация кластера ненормальная., Proxmox Виртуальная Среда

wang122132112232

Guest

09.07.2025 04:11:00

Мой PVE кластер состоит из 15 нод. После добавления новой ноды кластер показывает, что все ноды отключены, и синхронизация работает некорректно. Когда вручную подключаюсь к бэкенду, сеть на всех нодах в порядке. После перезапуска соответствующих сервисных процессов для синхронизации и перезагрузки 5 быстрых нод, синхронизация этих 5 нод становится нормальной. Но снова начинает работать некорректно через какое-то время;

fba Guest	#2 0 09.07.2025 09:28:00 Для оценки ситуации будет полезно, если ты запустишь эти команды на одном из серверов и поделишься результатом: cat /etc/pve/corosync.conf corosync-cfgtool -n

wang122132112232

Guest

10.07.2025 04:55:00

cat /etc/pve/corosync.conf
logging {
debug: off
to_syslog: yes
}
nodelist {
node {
name: 10-125-24-33
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.33
}
node {
name: 10-125-24-49
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.49
}
node {
name: 10-125-24-51
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.51
}
node {
name: 10-125-24-53
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.53
}
node {
name: 10-125-24-54
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.54
}
node {
name: 10-125-24-55
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.55
}
node {
name: 10-125-24-84
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.84
}
node {
name: 10-125-24-85
nodeid: 2
quorum_votes: 1
ring0_addr: 10.125.24.85
}
}
quorum {
provider: corosync_votequorum
}
totem {
cluster_name: yewu1
config_version: 15
interface {
linknumber: 0
}
ip_version: ipv4-6
link_mode: passive
secauth: on
version: 2
}
corosync-cfgtool -n Local node ID 1, transport knet
nodeid: 2 reachable LINK: 0 udp (10.125.24.85->10.125.24.49) enabled connected mtu: 1397
nodeid: 3 reachable LINK: 0 udp (10.125.24.85->10.125.24.84) enabled connected mtu: 1397
nodeid: 4 reachable LINK: 0 udp (10.125.24.85->10.125.24.55) enabled connected mtu: 1397
nodeid: 5 reachable LINK: 0 udp (10.125.24.85->10.125.24.54) enabled connected mtu: 1397
nodeid: 6 reachable LINK: 0 udp (10.125.24.85->10.125.24.53) enabled connected mtu: 1397
nodeid: 7 reachable LINK: 0 udp (10.125.24.85->10.125.24.51) enabled connected mtu: 1397
nodeid: 2 reachable LINK: 0 udp (10.125.24.85->10.125.24.33) enabled connected mtu: 1397
Last time, I re-partitioned the cluster, created a new Proxmox Virtual Environment (PVE) cluster, and added 15 nodes to it. There were approximately 230 virtual machines in total. After all the nodes were added, I found that the cluster synchronization was abnormal and extremely slow. Both checking the cluster information and accessing the login page were very laggy.

Currently, the approach is to repartition it into two clusters, with one cluster having 8 nodes. At present, the data synchronization of the clusters is normal and they are functioning properly.

SteveITS Guest	#4 0 10.07.2025 07:09:00 Есть только один сетевой адаптер на узел? Или эти IP-адреса нужны только для corosync?

wang122132112232 Guest	#5 0 10.07.2025 09:25:00 В каждом узле только одна сетевая карта (NIC).

fba

Guest

10.07.2025 14:11:00

Добавьте больше сетевых портов к вашим узлам и убедитесь, что у вас есть как минимум два физических интерфейса, выделенные только для Corosync. Иначе любая нагрузка на VM или узлы Proxmox Virtual Environment может нарушить связь Corosync. Это также обеспечит избыточность на случай сбоев соединения.

spirit Guest	#7 0 10.07.2025 15:27:00 Все ноды на одном сайте/дата-центре? Какая нормальная сетевая задержка между ними?

Johannes S Guest	#8 0 10.07.2025 16:01:00 Для справки: https://pve.proxmox.com/wiki/Cluster_Manager#pvecm_cluster_network и https://pve.proxmox.com/wiki/Deploy...r#_recommendations_for_a_healthy_ceph_cluster

wang122132112232 Guest	#9 0 11.07.2025 03:44:00 Используйте кластер, и каждый хост использует свой локальный жесткий диск без общего хранилища.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры