http://proxmox.su Новое в теме Резервное хранилище, если используется только CEPH с Proxmox. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Fri, 03 Apr 2026 22:10:01 +0300 Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, symmcom! Спасибо за то, что поделился своим опытом. Мы используем eve4pve-barc для резервного копирования Ceph! Можешь рассказать о своем опыте с backy2? Он устанавливается на хостовую ОС?
06.02.2020 13:50:00, snpz.]]> http://proxmox.su/forum/messages/forum63/message344965/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344965/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Thu, 06 Feb 2020 13:50:00 +0300 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Это старая тема, которую я открыл, когда впервые наткнулся на Ceph. Чувствую немного ностальгии, читая её. Кластер, который я начал тогда, вырос в настоящее дубовое дерево. Proxmox тогда не поддерживал Ceph в графическом интерфейсе. Мой начальный кластер был на Ubuntu. Я пытался найти лучший вариант для резервного копирования. Наш кластер сегодня превышает 1 Петабайт и продолжает расти. В качестве хранилища используется Infiniband на 40 Гбит/с для 150 OSD. Это не огромный кластер, но определённо намного больше, чем тот, с которым я начинал тестировать. Для резервного копирования мы используем Ceph rbd, eve4pve-autosnap и backy2. Конечно, это обходит встроенное резервное копирование Proxmox. Но по очевидным причинам vzdump Proxmox просто не может справиться с нашими потребностями в резервном копировании. Резервное копирование всё ещё не совсем на том уровне, на котором мы хотели бы, но на данный момент комбинация этих инструментов работает. Следующий этап — репликация основного кластера Ceph с резервным кластером Ceph. Эта тема также заставила меня оглянуться назад и увидеть, насколько далеко Proxmox продвинулся за последние несколько лет. Я благодарен разработчикам Proxmox за то, что они создали. Каждый новый релиз заставлял меня снова влюбляться в Proxmox. И также спасибо чудесному сообществу Proxmox, которое никогда не подводило меня, когда мне нужен был ответ!
21.02.2019 04:11:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344964/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344964/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Thu, 21 Feb 2019 04:11:00 +0300 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
К сожалению, я не могу перевести этот текст, так как он содержит URL-адрес.
13.01.2017 12:17:00, tschanness.]]> http://proxmox.su/forum/messages/forum63/message344963/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344963/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Fri, 13 Jan 2017 12:17:00 +0300 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Для резервного копирования Ceph см. https://github.com/EnterpriseVE/eve4pve-barc
12.01.2017 23:34:00, frank lupo.]]> http://proxmox.su/forum/messages/forum63/message344962/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344962/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Thu, 12 Jan 2017 23:34:00 +0300 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Если вы сможете перевести коммутаторы в режим "стек", то получите высокую доступность коммутаторов и узлов PVE с двумя сетевыми картами, каждая из которых подключена к каждому коммутатору в режиме LACP. LACP также известен как "агрегирование каналов" или "портовый канал". Если вышеуказанная настройка предназначена для коммутаторов серверов, то с этой стратегией я также добавляю коммутаторы для рабочих станций в режиме LACP, подключенные к обоим коммутаторам серверов. Преимущество этой настройки — увеличение общей пропускной способности между коммутаторами серверов и коммутаторами рабочих станций и возможность продолжать работу в случае выхода из строя одного из коммутаторов серверов. Обычно вы можете подключить до 8 портов в режиме LACP. Пожалуйста, посмотрите руководство вашего коммутатора, чтобы узнать, что вы можете сделать с этими коммутаторами (не все коммутаторы могут работать в режиме "Стек").
17.11.2015 15:09:00, cesarpk.]]> http://proxmox.su/forum/messages/forum63/message344961/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344961/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 17 Nov 2015 15:09:00 +0300 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
LACP — это название, 802.3ad — официальное название спецификации того же самого. Вики — ваш друг: http://pve.proxmox.com/wiki/Network_Model
30.07.2013 20:19:00, mir.]]> http://proxmox.su/forum/messages/forum63/message344960/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344960/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 20:19:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Оба моих свича — это Netgear Smartswitch GS724T. Я нашел опцию LACP, но не уверен по поводу 802.3ad. Можно ли настроить объединение на этих свичах? Это новая для меня область. Буду благодарен за любые подсказки.
30.07.2013 20:06:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344959/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344959/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 20:06:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Если вы хотите заняться агрегацией каналов, обязательно используйте управляемые коммутаторы, которые поддерживают LACP (802.3ad).
30.07.2013 19:43:00, mir.]]> http://proxmox.su/forum/messages/forum63/message344958/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344958/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 19:43:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Я использовал RAID-карту только для того, чтобы подключить 12-дисковый хот-свап бэкплейн. Шасси, которое я использую, имеет бэкплейны с 3 мини-SAS разъёмами. Так что мне нужна была RAID-карта, чтобы подключить их все. Я вообще не настраивал RAID. Просто вставил их в слот, установил Ubuntu 12.04 и CEPH, и всё. Насколько я вижу, как работает CEPH, я не вижу необходимости настраивать аппаратный RAID вовсе. У меня есть 2 узла с 4 HDD в каждом, что в сумме даёт кластерное хранилище в 16TB. Даже если я "случайно" отключу один узел, мой кластер продолжает работать, конечно, общий объём хранилища снижается до 8TB. По сути, CEPH предоставляет RAID на уровне хоста. Я ещё не делал бондинга. Это следующий шаг, теперь, когда всё работает. У меня есть все необходимые аппаратные средства, осталось только настроить это. Я никогда не делал бондинг ранее, так что это будет ещё одна возможность для обучения. В обычном режиме кластер не использует много сетевой пропускной способности, но когда он переходит в режим восстановления из-за выхода из строя HDD или хоста, именно тогда я вижу, что используется наибольшее количество пропускной способности. Я надеюсь, что с помощью бондинга с большей пропускной способностью восстановление произойдёт быстрее.
30.07.2013 19:24:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344957/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344957/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 19:24:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Это действительно так! Не могли бы вы рассказать, как вы настроили свой RAID? Один массив на каждом узле? Какой уровень? Я только ознакомился с Ceph, но, насколько я понял, одна из его сильных сторон заключается в обеспечении функции избыточности вместо использования специализированных контроллеров (но это не заменяет кеш с батарейным/флэш-резервом!)... если только, по аналогии с DRBD, RAID не отвечает за избыточность на дисковом уровне, а Ceph - на уровне хоста/сети? Буду очень признателен за разъяснение этого момента. Вы также добавили бондинг? Большое спасибо за ваш отзыв! Всего наилучшего!
30.07.2013 19:09:00, tarax.]]> http://proxmox.su/forum/messages/forum63/message344956/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344956/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 19:09:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
UPDATE ====== Просто хотел поделиться кратким обновлением по проекту Proxmox+CEPH. Я сменил свое NFS общее хранилище для резервного копирования с OmniOS на FreeNAS. Я долгое время использовал FreeNAS и ценю простоту интерфейса и все другие функции, которые он предлагает. Так что хотел посмотреть, как он будет работать в окружении Proxmox+CEPH. Я делал резервное копирование последние несколько дней, и скорость потрясающая. Он резервирует около 242 ГБ данных в среднем за 3 часа 52 минуты и делает это стабильно. Сам кластер CEPH функционирует очень хорошо, даже в режиме восстановления искусственного кластера. Не думаю, что CephFS полностью готов к использованию в качестве общего хранилища из-за своей низкой производительности. Но, по крайней мере, он работает и стабилен. Я все еще делаю резервное копирование на CephFS общего хранилища в кластере, но только потому, что хочу заполнить все 16 ТБ пространства кластера данными, чтобы посмотреть, как он справляется с большими объемами. Но общее хранилище FreeNAS - это моя основная система резервного копирования на данный момент. Я собираюсь настроить еще один узел FreeNAS, чтобы оба FreeNAS могли реплицировать друг друга. Я искренне благодарен команде Proxmox за поддержку CEPH, которую они предоставили в Proxmox VE.
30.07.2013 17:26:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344955/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344955/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Tue, 30 Jul 2013 17:26:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Получил всю нужную информацию. Теперь просто надо погрузиться в дело. Спасибо, Мир!
04.08.2013 11:13:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344954/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344954/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Sun, 04 Aug 2013 11:13:00 +0400 Proxmox Виртуальная Среда Резервное хранилище, если используется только CEPH с Proxmox. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, замечательное сообщество Proxmox! Может, кто-то подскажет, какой будет лучший вариант резервного копирования в среде только с CEPH RBD Shared Storage? В данный момент все мои ВМ находятся на RBD, и я делаю полное резервное копирование раз в неделю на общего хранилища OmniOS NFS. Если я хочу перейти на среду только с RBD, как мне лучше организовать резервное копирование? Я сделал несколько снимков ВМ. Можно ли использовать их как замену полному резервному копированию, учитывая, что CEPH достаточно устойчив к любым сбоям жесткого диска или целого хостинга? Я всё еще могу оставить окружение RBD+NFS, просто интересно, какие есть другие варианты. Спасибо!
14.07.2013 14:24:00, wahmed.]]> http://proxmox.su/forum/messages/forum63/message344953/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. http://proxmox.su/forum/messages/forum63/message344953/80142-rezervnoe-khranilishche_-esli-ispolzuetsya-tolko-ceph-s-proxmox. Sun, 14 Jul 2013 14:24:00 +0400 Proxmox Виртуальная Среда