Проверь журнал командой journalctl --since "2025-05-13 16:05" --until "2025-05-13 16:15" > log.txt, а потом можешь прикрепить файл log.txt сюда (можно скачать его, например, через scp).

Сколько у тебя мониторов? - У меня три монитора, по одному на каждом узле. Как настроен твой пул (настройки репликации, что-нибудь настраивал? Пул # 2 Название .mgr VMPool Размер/мин 3/2 3/2 кол-во групп размещения 1 128 opt # PGs 1 128 Автоматическое масштабирование включено включено Правило Crush replicated_rule (0) replicated_rule (0) использовано [%] 44,45 MiB (0,00%) 9.41 TiB (49,60%) Сколько OSD? И как они распределены между узлами? - Доступно 12 OSD, по 4 на каждом узле PVE. Что пишет "ceph -s", когда кластер работает? ... кластер: id: e514f756-xxxxxxxx-aa96-9304de459fd1 состояние: HEALTH_OK сервисы: mon: 3 демона, кворум prx02,prx03,prx01 (возраст 42ч) mgr: prx02(активный, с 42ч), резервные: prx03, prx01 osd: 12 osd: 12 up (с 42ч), 12 in (с 9M) данные: пулы: 2 пула, 129 pgs объекты: 844,08k объектов, 3,2 TiB использовано: 9,4 TiB использовано, 12 TiB / 21 TiB доступно pgs: 129 активные+чистые io: client: 120 KiB/s rd, 7,7 MiB/s wr, 24 op/s rd, 139 op/s wr .... Смотри также мой ceph.conf: [global] auth_client_required = cephx auth_cluster_required = cephx auth_service_required = cephx cluster_network = 10.xxx.1.0/24 fsid = e514f756-b1ce-4429-aa96-9304de459fd1 mon_allow_pool_delete = true mon_host = 10.xxx.1.20 10.xxx.1.30 10.xxx.1.10 ms_bind_ipv4 = true ms_bind_ipv6 = false osd_pool_default_min_size = 2 osd_pool_default_size = 3 public_network = 10.xxx.1.0/24 [client] keyring = /etc/pve/priv/$cluster.$name.keyring [client.crash] keyring = /etc/pve/ceph/$cluster.$name.keyring [mds] keyring = /var/lib/ceph/mds/ceph-$id/keyring [mon.prx01] public_addr = 10.xxx.1.10 [mon.prx02] public_addr = 10.xxx.1.20 [mon.prx03] public_addr = 10.xxx.1.30

Если ты не хочешь спровоцировать следующую проблему (понимаю), не мог бы ты, пожалуйста, предоставить журнал одного из других узлов, начиная немного раньше момента запуска отключения первого узла? Есть ли что-то особенное в настройке твоей сети (используешь ли коммутатор? полносвязная топология? ...)?

Окей, пока что выглядит нормально... Не могли бы вы также выложить "ceph osd crush dump" (должно быть одинаково на всех нодах) и /var/log/ceph/ceph.log с нод 2 и 3 для проблемной перезагрузки? В этом файле строки начинаются с метки времени в формате unix epoch, вы можете преобразовать её с помощью команды date: date --date=@XXXXXX, например, Код: $ date --date=@1747381287
Fri May 16 09:41:27 AM CEST 2025

Похоже, это тоже нормально, насколько я могу судить. А как именно ты это определил? Ceph логи показывают, что упал только один mon и четыре osd, но, кроме того, что PGs немного маленькие (что ожидаемо и нормально, они остались активными!), Ceph вообще ничего не жалуется.