http://proxmox.su Новое в теме РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Fri, 10 Apr 2026 12:11:36 +0300 РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Я могу свободно развернуться на любую тему, ведь это моя собственная ветка обсуждения, но... Кажется, за всем PVE/PBS и, например, ZFS нет никакой маркетинговой стратегии. Я полагаю, это не задача отдельных разработчиков, и не моя задача копаться во всей документации, чтобы выявлять неочевидные вещи. Если вы делаете ZFS своим центром (это не мой фаворит в 2024 году, но вполне неплох), то лучше использовать его по максимуму. Если вы заявляете, что что-то работает с любыми файловыми системами, то почему только с одной? Это вопрос маркировки вещей — все, кто обращается к ZFS, делают это ради того, что с ним связано. Когда я вижу, что, например, PVE поддерживает репликацию для высокой доступности, конечно, я предполагаю, что используется zfs send/receive. Если PBS заявлен как работающий с любыми файловыми системами, то, конечно, я предполагаю, что это общий подход, следовательно, репликация в PVE тоже должна быть независимой от файловой системы. PBS существует только потому, что существует PVE. Это не лучший вариант для этой задачи, лучше использовать mdadm, например, для двух NVMes в 2024 году, но и там есть проблемы (как и в PVE), поэтому PVE просто убрал эту опцию из установщика. Кстати, это ещё одна непоследовательность (пора убрать BTRFS из списка опций тоже). Смотрите выше — эти "очевидные выборы" очевидны только из-за искусственно созданных ограничений. Они не универсально очевидны. К тому же, зачем нужен RAID для системного диска в кластере высокой доступности вообще... он и так уже HA и вы тоже... Теперь, если несколько человек приходят сюда и спрашивают, например, почему что-то не работает, и это написано где-то в глубине документации... это не вина читателя. Это не юридическое обсуждение, а вопрос о том, почему мы получаем столько вопросов, например, почему репликация не работает на BTRFS. Простой ответ: вы поместили BTRFS рядом с ZFS в установщике. На самом деле, там не стоило помещать и LVM. Или не рекламировать репликацию как функцию для разумной настройки высокой доступности. Это маркетинговые решения. Я знаю, что в Proxmox нет маркетинговой команды, но это не моя вина. Конечно, есть. Я выбираю файловую систему, которая делает все лучше, а не хуже. Например, я не выбираю шифрование диска на основе Serpent, если у системы есть AES-NI. Не стоит выбирать файловую систему с копированием при записи для системного диска со снимками и функцией send/receive, чтобы позже на той же системе запускать "независимое" решение для резервного копирования, которое создает нагрузку на процессор гипервизора для определения "грязных" блоков. Это очевидно. Я не читаю документацию неправильно, я ее читал, там плохо, я пришел и сказал об этом. Если несколько человек приходят сюда, они, вероятно, не самые глупые сами по себе. Это никогда не было хорошо сформулировано. Я принимаю любое разумное объяснение. Я могу не согласиться с причинами, но по крайней мере их нужно было бы предоставить. Их нет в "разумно хорошей" документации. Если только что-то не добавили с тех пор. Кстати, я не люблю проприетарные решения для резервного копирования, но если у вас есть свои причины (которые вы могли бы сформулировать), и все имеет смысл для вас, это хорошо. Если вы предоставляете решение вроде PVE, вы должны сформулировать эти причины публично.
26.07.2024 00:12:00, esi_y.]]> http://proxmox.su/forum/messages/forum63/message320889/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320889/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Fri, 26 Jul 2024 00:12:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Понятно. Значит, по вашему мнению, продукт Proxmox PVE недостаточен, потому что разработчики не занимались вашим активным обучением? Учитывая, что у них довольно неплохая документация, что бы вы хотели, чтобы они сделали по-другому/дополнительно? Не критикую, просто из любопытства. Если говорить точнее, КАЖДАЯ файловая система — это кот наплакал; именно поэтому предоставляются различные опции. Я не совсем понимаю, к чему вы клоните. Эээ... это НАМНОГО лучший вариант установки для систем без RAID-контроллера. Учитывая, что большинство развертываний PVE используют HBA для целей ZFS/Ceph, установка ZFS root mirror становится очевидным выбором для корневой установки. Я бы избегал общих заявлений, представляющих ваше мнение как универсальный факт. "Вы делаете всё неправильно" - разве вы сами не говорили, что делаете резервные копии? Кажется, это возвращается к первоначальному пункту выше. Чья это ответственность – обучать вас? Надеюсь, вы понимаете, почему я в замешательстве от вашего заявления. Вы упомянули PBS. Я всего лишь отметил, что нет связи между вашим выбором файловой системы (и ее особенностями) и выбором резервного копирования. Да, я бы предпочёл подход Veeam (который использует снапшоты), но PBS не использует. У разработчиков есть свои причины, вероятно, чтобы поддерживать все типы источников.
25.07.2024 23:22:00, alexskysilk.]]> http://proxmox.su/forum/messages/forum63/message320888/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320888/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 23:22:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Я уже слишком часто вижу этот ответ на этом форуме – не стоит его здесь выкладывать, когда это не по теме. Тема в том, что мне нужен этот снимок, чтобы начать резервное копирование живой системы, и поскольку я делал это так же в прошлый раз, естественно, мне просто нужно проаптить дельты между двумя снимками.
25.07.2024 23:09:00, esi_y.]]> http://proxmox.su/forum/messages/forum63/message320887/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320887/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 23:09:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Оглядываясь назад, когда я только начал изучать PVE (и поднимал эти вопросы, я был автором в этой теме), я помню, как увидел ZFS в установщике ISO и подумал: "Вот оно, отлично, должно использовать его везде, где только возможно". А на деле — не очень (например, резервное копирование PBS), хотя могло бы. ZFS мне нравился, но не нравится эта смесь из всего подряд, и это не понятно. Установка ZFS через ISO PVE не дает никаких преимуществ. ZFS ставится на root, сложнее потом загрузиться, например, с обычной Debian (у PVE нет образа для загрузки с Live CD), ESP используется для запихивания initramfs образов туда, как будто используется systemd-boot, даже когда этого нет, и создается еще пул для VM ZVOL — с которыми я лучше сам создам после обычной (не-ZFS) установки. Нет преимуществ в ситуации восстановления после катастрофы, нет преимуществ для PBS (очень нелогично), а затем тема репликации (вероятно, актуальна только для пользователей SOHO). Так что я хотел сказать... с точки зрения маркетинга, я бы не понял, исходя из того, как часто ZFS обсуждается здесь, что я действительно не понимаю всех преимуществ, но должен использовать его, например, для репликации. А с другой стороны, когда я могу установить BTRFS (я не проверял ISO с версии 8, но думаю, он там есть как единственный другой вариант помимо LVM и ZFS), я бы ожидал хотя бы тот же набор функций, что и с ZFS, ведь это, ну, COW тоже. Наконец, я понимаю, невозможно учесть все, когда я задавал вопрос на форуме про f2fs или zoned storage, никакого ответа вообще — так что я хотел сказать, когда что-то продвигается с точки зрения маркетинга (например, ZFS), это должно поддерживать все, если BTRFS ставится рядом с ним, должно поддерживаться все. Если это файловая система-агностик, то все должно быть. Это непоследовательно (вероятно, из-за истории) в текущем состоянии.
25.07.2024 23:07:00, esi_y.]]> http://proxmox.su/forum/messages/forum63/message320886/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320886/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 23:07:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
PBS не использует снимки (snapshots). Цена, которую вы платите за это, — необходимость в кэшировании дельт для ввода-вывода после начала резервного копирования; это может и действительно вызывает серьезные проблемы с производительностью на загруженной системе, и вам потребуется какая-то «резервная накидка» (backup fleecing) для смягчения ситуации — что поддерживается только на определенных целевых файловых системах, которые сами по себе должны поддерживать снимки. И если это неясно — снимки не являются резервными копиями, независимо от того, дедуплицирует ли PBS данные позже. Ирония в том, что большинство решений для резервного копирования ИСПОЛЬЗУЮТ снимки, поскольку это эффективно устраняет влияние дельт, о котором говорилось выше.
25.07.2024 23:05:00, alexskysilk.]]> http://proxmox.su/forum/messages/forum63/message320885/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320885/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 23:05:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Это возможно. Также возможно, что люди спрашивают, потому что у них есть задача, которую нужно выполнить. Не для каждой задачи будут предоставлены инструменты определенным механизмом; решать, что делать с этой информацией, — задача спрашивающего. Могут просто развести руками и пожаловаться, что хотят, чтобы было ЭТО, а могут и нет. Так и есть. Если бы Proxmox не ориентировался на домашнего/любительского пользователя, вероятно, они бы и не заморачивались с этой функцией в первую очередь. Не "как-то", ZFS спроектирован так, чтобы справляться с такими функциями благодаря своей встроенной CoW-архитектуре и набору инструментов (например, send/receive). Написать обертку вокруг их набора инструментов — это довольно простая задача, "висящий плод" для разработчика; это и причина, по которой ZFS является файловой системой для некластерных PVE-развертываний. Не совсем уверен, что ты имеешь в виду. Коммуникация между кем/чем?
25.07.2024 22:48:00, alexskysilk.]]> http://proxmox.su/forum/messages/forum63/message320884/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320884/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 22:48:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Я думаю, что большинство людей, задающих эти вопросы, хотят иметь всё это аккуратно представленным в графическом интерфейсе и, самое главное, автоматизированным (например, во время событий HA). Со временем я пришёл к выводу, что на повторение чего-либо [1] больших усилий тратить не будут, вероятно, это было решено ещё с появлением CEPH. Простое реплицирование по множеству узлов не масштабируется хорошо. С другой стороны, ZFS как-то получает особый подход от PVE (например, установщик), но в итоге это не намного лучший выбор. Так что люди хотят использовать что-то другое, чем устаревшие файловые системы (и некоторые даже беспокоятся о спорной лицензии), которые никогда не предназначались для NVMe и т.д. А затем они обнаруживают, что некоторые функции от этого зависят. С другой стороны, другие функции, которые должны быть независимы от файловой системы (например, резервное копирование PBS), делают наличие, например, ZFS-снимков совершенно бесполезным, потому что каждый раз они самостоятельно выполняют дедупликацию [2] – и это было бы верно для всех файловых систем, поддерживающих снимки изначально. Так что, по крайней мере, с точки зрения коммуникации, это провал. [1] https://forum.proxmox.com/threads/what-is-wrong-with-high-availability.139056/#post-620923 [2] https://blog.guillaumematheron.fr/2023/261/taking-advantage-of-zfs-for-smarter-proxmox-backups/
25.07.2024 22:35:00, esi_y.]]> http://proxmox.su/forum/messages/forum63/message320883/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320883/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 22:35:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Пока что такой инструмент интеграции для PVE, как pve-sync, — это, конечно, хорошо, но ничего не мешает использовать другие доступные инструменты для работы с любым источником, поддерживающим создание снимков (в частности, tar и ssh).
25.07.2024 20:27:00, alexskysilk.]]> http://proxmox.su/forum/messages/forum63/message320882/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320882/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 20:27:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Поддержка других файловых систем была бы отличной, просто хотел сказать. Надеюсь, они добавят это в ближайшее время.
25.07.2024 17:23:00, usernamesimple.]]> http://proxmox.su/forum/messages/forum63/message320881/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320881/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 25 Jul 2024 17:23:00 +0300 Proxmox Виртуальная Среда РЕПЛИКАЦИЯ только для ZFS? Почему? И что такое PVE-zsync? Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Когда я смотрю на исходный код pvesr, он использует PVE::API2::Replication, который в свою очередь использует PVE::Replication, а в конце концов просто вызывает PVE::Storage::storage_migrate, который по сути делает pvesm import на другом конце и скармливает ему pvesm export. Если я не ошибся, то в чём проблема с поддержкой репликации на любой файловой системе, которая поддерживает снапшоты? Никакого zfs send|receive здесь нет. И вообще, в чём смысл pve-zsync (наряду с указанным API репликации)? Я читал документацию, но так и не понял логику их сосуществования.
[1] https://pve.proxmox.com/pve-docs/pvesr.1.html
[2] https://github.com/proxmox/pve-manager/blob/master/PVE/CLI/pvesr.pm
[3] https://github.com/proxmox/pve-mana...f0590ddeb58fab1ad/PVE/API2/Replication.pm#L39
[4] https://github.com/proxmox/pve-gues...9b3172296c38058d0/src/PVE/Replication.pm#L220
[5] https://github.com/proxmox/pve-stor...3e84d0a18f95de0322168/src/PVE/Storage.pm#L702
[6] https://github.com/proxmox/pve-stor...3e84d0a18f95de0322168/src/PVE/Storage.pm#L820
[7] https://github.com/proxmox/pve-stor...3e84d0a18f95de0322168/src/PVE/Storage.pm#L743
[8] https://pve.proxmox.com/wiki/PVE-zsync#PVE_Storage_Replication_and_PVE-zsync
29.02.2024 14:05:00, esi_y.]]> http://proxmox.su/forum/messages/forum63/message320880/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync http://proxmox.su/forum/messages/forum63/message320880/77216-replikatsiya-tolko-dlya-zfs_-pochemu_-i-chto-takoe-pve_zsync Thu, 29 Feb 2024 14:05:00 +0300 Proxmox Виртуальная Среда