В целом выглядит неплохо. Но избыточности в сети для NAS и Ceph не наблюдается. И еще, учтите, что Corosync может поддерживать до 8 каналов связи. Поэтому неплохая идея — настроить дополнительные каналы связи в других сетях, чтобы у него был выбор, если выделенный канал Corosync выйдет из строя. На той сети, где доступен шлюз и через которую вы хотите, чтобы Proxmox VE выходил в интернет, и на всех остальных сетях, к которым у него может не быть прямого соединения.

Ceph — это и надежно, и масштабируемо. Можно настроить количество реплик для каждого объекта (по умолчанию 3), а также минимальное количество реплик для каждого объекта (по умолчанию 2). Если два узла выходят из строя, количество реплик для всех объектов окажется ниже минимального, и пул заблокирует все операции записи до тех пор, пока ситуация не разрешится. Это очень отличается от полного уничтожения данных, ведь у вас все еще есть экземпляр вашей информации. Ceph может восстановиться после потери произвольного числа OSD и/или узлов, если предоставить ему достаточно ресурсов. Чтобы поддерживать нормальную работу при выходе из строя двух узлов, вам потребуется 4 узла в кластере, в этом случае Ceph сможет работать в деградированном состоянии (имея только 2 реплики для каждого объекта) до тех пор, пока узлы не вернутся в кластер.