Довольно поздний ответ Ваш коэффициент заполнения backfill_full установлен на 0.91, и 2 из 3 ваших OSD заполнены на 92%: поэтому Ceph отказывается делать backfill на них. У osd.0 задан коэффициент reweight, и именно поэтому Ceph не будет помещать туда больше данных, даже когда там почти 394GiB свободного места. Reweight по умолчанию равен 1, так что кто-то в какой-то момент изменил это значение. Вы можете попробовать установить reweight на 1, как у другого OSD, чтобы некоторые данные были перемещены с osd.1 и osd.2 на osd.0. Может быть, безопаснее или проще использовать ceph osd reweight-by-utilization. Что касается recovery_unfound PG, возможно, вы не потеряли данные и просто нужно выполнить глубокое сканирование затронутых PG (похоже, вы не часто выполняете глубокие сканирования). В любом случае, сделайте резервные копии и протестируйте их перед выполнением каких-либо операций. Вам никогда не нужно допускать полной загрузки диска, тем более с Ceph... и еще больше с такой маленькой конфигурацией всего с 3 OSD.

Первое, что нужно сделать, это довести ваш Ceph до полностью здорового состояния. Сначала безопасность, сами понимаете!