+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Ceph настроен через маршрутизацию (с резервным вариантом) — время ожидания., Proxmox Виртуальная Среда

amarsalek

Guest

03.10.2022 14:14:00

Привет, я пытался настроить Ceph routed setup с fallback согласно этой инструкции: Routed Setup (with Fallback). Всё вроде работает, статус в порядке, но `journalctl -u frr` постоянно показывает тайм-ауты:

Код:
Oct 03 13:52:02 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f1np1 timed out!
Oct 03 13:52:02 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 1111.1111.1111 on enp1s0f0np0
Oct 03 13:52:06 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f0np0 timed out!
Oct 03 13:52:06 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 2222.2222.2222 on enp1s0f1np1
Oct 03 13:52:10 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f1np1 timed out!
Oct 03 13:52:11 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 1111.1111.1111 on enp1s0f0np0
Oct 03 13:52:15 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f0np0 timed out!
Oct 03 13:52:15 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 2222.2222.2222 on enp1s0f1np1
Oct 03 13:52:19 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f1np1 timed out!
Oct 03 13:52:19 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 1111.1111.1111 on enp1s0f0np0
Oct 03 13:52:23 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f0np0 timed out!
Oct 03 13:52:23 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 2222.2222.2222 on enp1s0f1np1
Oct 03 13:52:27 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f1np1 timed out!
Oct 03 13:52:28 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 1111.1111.1111 on enp1s0f0np0
Oct 03 13:52:32 host3 fabricd[2563]: [NT6J7-1RYRF] OpenFabric: Initial synchronization on enp1s0f0np0 timed out!
Oct 03 13:52:33 host3 fabricd[2563]: [R18GA-MS9R7] OpenFabric: Started initial synchronization with 2222.2222.2222 on enp1s0f1np1

Почему происходит тайм-аут начальной синхронизации? Спасибо!

amarsalek Guest	#2 0 03.11.2022 10:25:00 Привет! Хотя мы не заметили никаких проблем, связанных с этим, мы вернулись к настройке RSTP Loop.

gmpreussner

Guest

01.12.2022 06:24:00

У меня такая же проблема на версии 7.3.3. В интернете ничего похожего найти не удалось. Смена дефолтных настроек frr на datacenter не устранила эти сообщения. Использую карты Mellanox ConnectX-3 в режиме 56GbE — может быть, это как-то связано. Я посмотрел соответствующий код здесь https://github.com/FRRouting/frr/blob/master/isisd/fabricd.c#L259 и увидел, что эти сообщения в логе предназначены для отладки. Как временный выход, я изменил уровень детализации логов в /etc/frr/frr.conf на: Code: log syslog warning

aaron

Guest

03.01.2023 16:03:00

Пробовали ли вы немного увеличить настройки, чтобы увеличить время? Эти параметры должны быть заданы для каждого интерфейса:
- csnp-interval
- hello-interval
- hello-multiplier

В разделе настройки маршрутизатора:
- lsp-gen-interval

Сейчас они (если вы скопировали их из руководства) установлены на минимально возможное значение, чтобы получать очень короткое время переключения, но, возможно, в некоторых ситуациях они слишком агрессивны. Подробности о параметрах и возможных значениях можно найти в документации FRR. Я не могу воспроизвести эти логи в своих тестовых стендах.

vesalius Guest	#5 0 03.01.2023 21:15:00 Согласен и даже готов пойти дальше — предлагаемый в вики Proxmox уровень логов FRR в /etc/frr/frr.conf стоит менять с informational на warning.

aaron Guest	#6 0 04.01.2023 10:43:00 Да, хороший аргумент. Обновлю страницу на вики.

gmpreussner

Guest

08.01.2023 04:47:00

@aaron Огромное спасибо за ответ! Могу подтвердить, что увеличение значений в `/etc/frr/frr.conf` действительно решает проблему с таймаутами. В моём случае было достаточно добавить всего по секунде к каждому параметру (я не стал заморачиваться с разбором каждого отдельно). Получилось так:
```
interface XXX
...
openfabric csnp-interval 3
openfabric hello-interval 2
openfabric hello-multiplier 2
router YYY
...
lsp-gen-interval 2
...
```

aaron Guest	#8 0 09.01.2023 15:33:00 Спасибо за отзыв, @gmpreussner. Я добавлю подсказку в руководство.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры