<?xml version="1.0" encoding="UTF-8"?>
<rss version="2.0">
	<channel>
		<title>Аспро: ЛайтШоп [тема: Репликация хранилища регулярно останавливается]</title>
		<link>http://proxmox.su</link>
		<description>Новое в теме Репликация хранилища регулярно останавливается форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su]</description>
		<language>ru</language>
		<docs>http://backend.userland.com/rss2</docs>
		<pubDate>Wed, 11 Nov 2026 21:24:00 +0300</pubDate>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350331/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			После очередного сбоя (возможно, ошибка оборудования) работающий бэкап прервался. В итоге машина осталась заблокирована (снял блокировку командой 'pct unlock 109'), и в GUI всё ещё отображался снимок (snapshot). Я запросил удаление этого снимка. Теперь снимка в системе уже нет, но GUI всё равно говорит, что он есть. При попытке удалить его снова вылетает ошибка, что нечего удалять. (Кстати, обычно в приложениях для одной и той же операции используют одно и то же слово, а здесь "Remove", "Destroy" и "Delete" — все для удаления снимков.) &nbsp;<br /><img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/5937-1892073d3ef4b66f8ccd94f34b4b63c3.jpg" alt="Пользователь добавил изображение" border="0" /> &nbsp;<br /><img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/5938-1615b44c2f36085265e5d344db48adff.jpg" alt="Пользователь добавил изображение" border="0" /> &nbsp;<br /><br />Это подтверждает команда 'zfs list -t snapshot': &nbsp;<br /># zfs list -t snapshot &nbsp;<br />NAME &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;USED &nbsp;AVAIL &nbsp;REFER &nbsp;MOUNTPOINT &nbsp;<br />vmpool/subvol-100-disk-1@__replicate_100-0_1510597320__ &nbsp; 745M &nbsp; &nbsp; &nbsp;- &nbsp;38.9G &nbsp;- &nbsp;<br />vmpool/subvol-102-disk-1@__replicate_102-0_1510596960__ &nbsp; 114M &nbsp; &nbsp; &nbsp;- &nbsp;16.9G &nbsp;- &nbsp;<br />vmpool/subvol-103-disk-1@__replicate_103-0_1510597020__ &nbsp; 952K &nbsp; &nbsp; &nbsp;- &nbsp;2.12G &nbsp;- &nbsp;<br />vmpool/subvol-104-disk-1@__replicate_104-0_1510597560__ &nbsp;6.04M &nbsp; &nbsp; &nbsp;- &nbsp;4.58G &nbsp;- &nbsp;<br />vmpool/subvol-105-disk-1@__replicate_105-0_1510597023__ &nbsp;97.9M &nbsp; &nbsp; &nbsp;- &nbsp;8.05G &nbsp;- &nbsp;<br />vmpool/subvol-109-disk-1@__replicate_109-0_1510597565__ &nbsp;1.12M &nbsp; &nbsp; &nbsp;- &nbsp;1.09G &nbsp;- &nbsp;<br />vmpool/subvol-120-disk-1@__replicate_120-0_1510596965__ &nbsp;5.53M &nbsp; &nbsp; &nbsp;- &nbsp;5.46G &nbsp;- &nbsp;<br />vmpool/subvol-150-disk-1@__replicate_150-0_1510596968__ &nbsp;55.1M &nbsp; &nbsp; &nbsp;- &nbsp;3.59G &nbsp;- &nbsp;<br />vmpool/subvol-223-disk-1@__replicate_223-0_1510596973__ &nbsp;2.41M &nbsp; &nbsp; &nbsp;- &nbsp;1.14G &nbsp;- &nbsp;<br />vmpool/subvol-224-disk-1@__replicate_224-0_1510596976__ &nbsp;6.98M &nbsp; &nbsp; &nbsp;- &nbsp;1.40G &nbsp;- &nbsp;<br /><br />Удаление этого статуса из GUI будет ещё одним «удовольствием». &nbsp;<br />[Редактирование:] Нашёл, в чём дело: информация о снимке хранится в конфигурации контейнера, у меня это файл '/etc/pve/nodes/p4/lxc/109.conf'. Я выяснил это после изучения <noindex><a href="https://pve.proxmox.com/wiki/Linux_Container" target="_blank" rel="nofollow" >https://pve.proxmox.com/wiki/Linux_Container</a></noindex> и поиска файла командой 'locate 109 | grep conf | xargs grep vzdump'. &nbsp;<br />Удалил информацию о снимке из конфигурационного файла (предварительно сделав бэкап), и теперь GUI уже ничего не показывает. &nbsp;<br /><br />Надеюсь, теперь бэкап заработает. <br />
			<i>13.11.2017 19:34:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350331/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350331/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Mon, 13 Nov 2017 19:34:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350330/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Сейчас у меня проблема с бэкапом, возможно, связанная с той же самой корневой проблемой: частичный результат от "pct list" такой: 104 &nbsp; &nbsp; &nbsp; &nbsp;running &nbsp; &nbsp;snapshot-delete www. Репликация, похоже, работает. Я выполнил "pct unlock 104", чтобы разблокировать ВМ — посмотрю, заработает ли бэкап снова. <br />
			<i>07.11.2017 21:53:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350330/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350330/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Tue, 07 Nov 2017 21:53:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350329/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Есть еще одна причина, по которой репликация останавливается, но я пока не знаю, где искать проблему. На данный момент решение — уничтожить ZFS-файловые системы на целевом сервере, но это плохое и небезопасное решение (человеческая ошибка вполне возможна): &nbsp;<br /># zfs destroy -r vmpool/subvol-103-disk-1 &nbsp;<br /># zfs destroy -r vmpool/subvol-105-disk-1 &nbsp;<br /><br />Я сделал это, потому что в отчете говорится, что том 'vmpool/subvol-103-disk-1' уже существует (то же самое для другой ВМ, которая больше не реплицируется). &nbsp;<br /><br />Одна из трех ВМ на этой машине продолжает реплицироваться. &nbsp;<br /><br />Лог репликации &nbsp;<br />2017-11-05 12:04:00 103-0: старт задания репликации &nbsp;<br />2017-11-05 12:04:00 103-0: гость =&gt; CT 103, состояние =&gt; 1 &nbsp;<br />2017-11-05 12:04:00 103-0: тома =&gt; ZfsStorage:subvol-103-disk-1 &nbsp;<br />2017-11-05 12:04:01 103-0: заморозка файловой системы гостя &nbsp;<br />2017-11-05 12:04:02 103-0: создание снимка '__replicate_103-0_1509879840__' на ZfsStorage:subvol-103-disk-1 &nbsp;<br />2017-11-05 12:04:02 103-0: разморозка файловой системы гостя &nbsp;<br />2017-11-05 12:04:02 103-0: полная синхронизация 'ZfsStorage:subvol-103-disk-1' (__replicate_103-0_1509879840__) &nbsp;<br />2017-11-05 12:04:02 103-0: полный отправляемый объем vmpool/subvol-103-disk-1@__replicate_103-0_1509879840__ оценивается в 1.88G &nbsp;<br />2017-11-05 12:04:02 103-0: общий оцениваемый размер — 1.88G &nbsp;<br />2017-11-05 12:04:02 103-0: ВРЕМЯ &nbsp; &nbsp; &nbsp; &nbsp;ОТПРАВЛЕНО &nbsp; СНЯТИЕ СНИМКА &nbsp;<br />2017-11-05 12:04:02 103-0: vmpool/subvol-103-disk-1 &nbsp; &nbsp;имя &nbsp; &nbsp;vmpool/subvol-103-disk-1 &nbsp; &nbsp;- &nbsp;<br />2017-11-05 12:04:02 103-0: том 'vmpool/subvol-103-disk-1' уже существует &nbsp;<br />2017-11-05 12:04:02 103-0: предупреждение: невозможно отправить 'vmpool/subvol-103-disk-1@__replicate_103-0_1509879840__': получен сигнал &nbsp;<br />2017-11-05 12:04:02 103-0: нельзя отправить 'vmpool/subvol-103-disk-1': ошибка ввода/вывода &nbsp;<br />2017-11-05 12:04:02 103-0: команда 'zfs send -Rpv -- vmpool/subvol-103-disk-1@__replicate_103-0_1509879840__' завершилась с кодом 1 &nbsp;<br />2017-11-05 12:04:02 103-0: удаление предыдущего снимка репликации '__replicate_103-0_1509879840__' на ZfsStorage:subvol-103-disk-1 &nbsp;<br />2017-11-05 12:04:02 103-0: завершение задания репликации с ошибкой: команда 'set -o pipefail && pvesm export ZfsStorage:subvol-103-disk-1 zfs - -with-snapshots 1 -snapshot __replicate_103-0_1509879840__ | /usr/bin/ssh -o 'BatchMode=yes' -o 'HostKeyAlias=p4' root@10.0.0.4 -- pvesm import ZfsStorage:subvol-103-disk-1 zfs - -with-snapshots 1' завершилась с кодом 255 <br />
			<i>05.11.2017 12:15:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350329/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350329/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Sun, 05 Nov 2017 12:15:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350328/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Я открыл отчёт: <noindex><a href="https://bugzilla.proxmox.com/show_bug.cgi?id=1538" target="_blank" rel="nofollow" >https://bugzilla.proxmox.com/show_bug.cgi?id=1538</a></noindex>. <br />
			<i>27.10.2017 12:18:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350328/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350328/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Fri, 27 Oct 2017 12:18:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350327/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Спасибо, что занялись этой проблемой — пожалуйста, создайте баг-репорт и прикрепите ссылку на эту ветку! Это должно решаться добавлением большей взаимной блокировки для репликации и создания снимков. <br />
			<i>27.10.2017 11:26:00, fabian.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350327/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350327/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Fri, 27 Oct 2017 11:26:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350326/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Проблема снова повторилась сегодня утром. Это подтверждает, что она системная и связана с моментом создания резервной копии. На этот раз команда 'lxc-unfreeze' не помогла — пришлось убивать сам процесс 'lxc-freeze'. Сейчас я сдвинул время репликации на одну минуту, что, вероятно, уменьшит сбои, но полностью их не исключит. <br />
			<i>27.10.2017 10:41:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350326/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350326/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Fri, 27 Oct 2017 10:41:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350325/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Я забыл проверить GUI, который показывает, что я ещё не закончил: <img class="lazyload "  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="/upload/forum/proxmox/5792-810990137912138cf93f70e1a1b71eb3.jpg" alt="Пользователь добавил изображение" border="0" /> Поэтому, хотя остановка 'lxc-freeze' с помощью 'lxc-unfreeze' останавливала задачу резервного копирования, статус репликации оставался "синхронизация". В отчёте указана продолжительность 23,0 часа, но разморозка произошла более чем через 23 часа после начала репликации. То, что в "Next Sync" стоит ожидание, связано с тем, что я отключил эту репликацию. Включение её заново запустило репликацию, и она завершилась успешно. <br />
			<i>26.10.2017 12:13:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350325/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350325/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Thu, 26 Oct 2017 12:13:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350324/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Ок, я сделал «lsof» по файлу блокировки: &nbsp;<br /># lsof /var/run/vzdump.lock &nbsp;<br />COMMAND &nbsp; &nbsp;PID USER &nbsp; FD &nbsp; TYPE DEVICE SIZE/OFF NODE NAME &nbsp;<br />task U 9077 root &nbsp; &nbsp;5wW &nbsp;REG &nbsp; 0,23 &nbsp; &nbsp; &nbsp; &nbsp;0 1923 /run/vzdump.lock &nbsp;<br /><br />Потом я поискал процессы: &nbsp;<br /># ps -edalf | grep 9077 &nbsp;<br />5 S root &nbsp; &nbsp; &nbsp;9077 &nbsp;8930 &nbsp;0 &nbsp;80 &nbsp; 0 - 81338 poll_s 04:00 ? &nbsp; &nbsp; &nbsp; &nbsp;00:00:00 task &nbsp;<br />UPID 4:00002375:0474C324:59F15DC1:vzdump::root@pam: &nbsp;<br />4 S root &nbsp; &nbsp; &nbsp;9094 &nbsp;9077 &nbsp;0 &nbsp;80 &nbsp; 0 - 10441 hrtime 04:00 ? &nbsp; &nbsp; &nbsp; &nbsp;00:00:01 /usr/bin/lxc-freeze -n 102 &nbsp;<br />0 S root &nbsp; &nbsp; 32156 &nbsp;8075 &nbsp;0 &nbsp;80 &nbsp; 0 - &nbsp;3197 pipe_w 09:28 pts/10 &nbsp; 00:00:00 grep 9077 &nbsp;<br /><br />Так что ‘lxc-freeze’ всё ещё работает, и его запустил ‘task’.<br /><br />Это помогло понять, как запускаются задачи — я изучил perl-скрипты в /usr/share/perl5/PVE и выяснил, что есть «чистый» способ остановить бэкап, который у меня не сработал: &nbsp;<br /># vzdump --stop 1 &nbsp;<br />stopping backup process 9077 failed &nbsp;<br /><br />(Кстати, в слове «stopping» опечатка, как и в некоторых других местах в документации vzdump, например «runing»).<br /><br />Поскольку это не сработало, я поискал информацию про «lxc-freeze» и обнаружил, что существует противоположная команда — «lxc-unfreeze», которую и попробовал: &nbsp;<br />lxc-unfreeze -n 102 &nbsp;<br /><br />В документации к lxc-freeze сказано, что она замораживает все процессы внутри контейнера, но процессы внутри всё равно продолжали нормально работать. В итоге после unfreeze процесс 9077 (lxc-freeze) исчез.<br /><br />По номеру задачи из списка процессов и поиску я нашёл лог этой задачи и его содержимое: &nbsp;<br /># cat /var/log/pve/tasks/1/UPID 4:00002375:0474C324:59F15DC1:vzdump::root@pam: |& more &nbsp;<br />INFO: starting new backup job: vzdump --mailto support@example.com --compress lzo --mode snapshot --exclude 200,108 --storage bigdisk_archive --mailnotification failure --all 1 --quiet 1 &nbsp;<br />INFO: Starting Backup of VM 102 (lxc) &nbsp;<br />INFO: status = running &nbsp;<br />INFO: CT Name: example.com &nbsp;<br />INFO: backup mode: snapshot &nbsp;<br />INFO: ionice priority: 7 &nbsp;<br />INFO: create storage snapshot 'vzdump' &nbsp;<br />snapshot create failed: starting cleanup no lock found trying to remove 'backup' lock &nbsp;<br />ERROR: Backup of VM 102 failed - command '/usr/bin/lxc-freeze -n 102' failed: interrupted by signal [...]  <br /><br />Итого, именно задача бэкапа ожидала завершения lxc-freeze.<br /><br />С этой информацией я проверил системные логи: &nbsp;<br />daemon.log:Oct 26 09:41:56 p4 vzdump[9077]: ERROR: Backup of VM 102 failed - command '/usr/bin/lxc-freeze -n 102' failed: interrupted by signal  <br />/var/log# grep freeze * &nbsp;<br />daemon.log:Oct 26 09:41:56 p4 vzdump[9077]: ERROR: Backup of VM 102 failed - command '/usr/bin/lxc-freeze -n 102' failed: interrupted by signal  <br />daemon.log.1:Oct 21 23:25:19 p4 pvesr[23835]: lxc-freeze: 102: freezer.c: do_freeze_thaw: 64 Failed to get new freezer state for /var/lib/lxc:102  <br />daemon.log.1:Oct 21 23:25:19 p4 pvesr[23835]: lxc-freeze: 102: tools/lxc_freeze.c: main: 107 Failed to freeze /var/lib/lxc:102  <br /><br />В общем, ничего необычного: команда не сработала из-за того, что 21 октября не удалось заморозить контейнер, а потом мы получили уведомление о сбое vzdump из-за моего lxc-unfreeze.<br /><br />Вывод: на мой взгляд, тут две проблемы: &nbsp;<br />1. ‘lxc-freeze’ не возвращается из состояния заморозки, не замораживает по некоторым причинам и не фиксирует эту ошибку. Возможно, это произошло из-за одновременных попыток заморозки (бэкап/репликация). &nbsp;<br />2. Процессы бэкапа и репликации мешают друг другу. Кажется, им стоит хотя бы на этапе заморозки подождать друг друга. <br />
			<i>26.10.2017 12:01:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350324/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350324/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Thu, 26 Oct 2017 12:01:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350323/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			У меня теперь сбой резервного копирования. Думаю, это связано с тем, что репликация, которая началась вчера, до сих пор идёт, судя по WebGUI (вероятно, в состоянии «заморозить файловую систему гостевой ОС»). Вот текст письма, которое я получил: не могу получить блокировку '/var/run/vzdump.lock' — время ожидания истекло. VMID NAME STATUS TIME SIZE FILENAME TOTAL 00:00:00 0KB Подробные логи резервного копирования: vzdump --mode snapshot --storage p4BackupFtp --mailto support@example.com --quiet 1 --exclude 200 --node p4 --all 1 --mailnotification failure --compress gzip Это содержимое лога резервного копирования: Task viewer: Backup OutputStatus Stop INFO: пытаюсь получить глобальную блокировку — жду... ERROR: не могу получить блокировку '/var/run/vzdump.lock' — время ожидания истекло. <br />
			<i>26.10.2017 10:35:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350323/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350323/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Thu, 26 Oct 2017 10:35:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350322/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Безусловно, для резервных копий LXC используются снимки на уровне хранилища. KVM — это только половина Proxmox. <br />
			<i>25.10.2017 20:01:00, FastLaneJB.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350322/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350322/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 20:01:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350321/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Согласно WebGui, VM102 всё ещё синхронизируется в 19:30 по центральноевропейскому летнему времени. Пока не нашёл команду, чтобы это исправить. Заметил, что можно получить лог синхронизации — она застряла на шаге «freeze»:<br /><br />2017-10-25 05:00:00 102-0: старт задачи репликации &nbsp;<br />2017-10-25 05:00:00 102-0: гостевая система =&gt; CT 102, запущена =&gt; 1 &nbsp;<br />2017-10-25 05:00:00 102-0: тома =&gt; ZfsStorage:subvol-102-disk-1 &nbsp;<br />2017-10-25 05:00:00 102-0: заморозка гостевой файловой системы <br />
			<i>25.10.2017 19:35:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350321/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350321/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 19:35:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350320/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Окей, в моём отчёте по бэкапу написано «режим бэкапа: snapshot». Вот транскрипт (время начала: 07:00 CEST). Названия серверов изменены на example.com для конфиденциальности:<br /><br />INFO: запускаю новую задачу бэкапа: vzdump --compress gzip --mailto support@example.com --mailnotification failure --node p4 --storage p4BackupFtp --mode snapshot --quiet 1 --exclude 200 --all 1 &nbsp;<br />INFO: Начинаю бэкап ВМ 102 (lxc) &nbsp;<br />INFO: статус = running &nbsp;<br />INFO: имя контейнера: example.com &nbsp;<br />INFO: режим бэкапа: snapshot &nbsp;<br />INFO: приоритет ionice: 7 &nbsp;<br />INFO: создаю снапшот хранилища 'vzdump' &nbsp;<br />INFO: создаю архив '/mnt/pve/p4BackupFtp/dump/vzdump-lxc-102-2017_10_25-05_00_01.tar.gz' &nbsp;<br />INFO: Всего записано байт: 17194987520 (17ГиБ, 22МиБ/с) &nbsp;<br />INFO: размер файла архива: 8.09ГБ &nbsp;<br />INFO: удаляю старый бэкап '/mnt/pve/p4BackupFtp/dump/vzdump-lxc-102-2017_10_24-05_00_01.tar.gz' &nbsp;<br />INFO: удаляю снапшот vzdump &nbsp;<br />INFO: Бэкап ВМ 102 завершён (00:12:55) <br />
			<i>25.10.2017 14:38:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350320/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350320/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 14:38:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350319/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Резервное копирование не делает снимок на уровне хранилища, оно использует функцию kvm для "заморозки" виртуальной машины и перехвата записей во время резервного копирования. Я не пользуюсь резервными копиями, потому что дополнительно применяю pve-zsync ночью для удалённого хранилища, где хранятся снимки за последние несколько дней. <br />
			<i>25.10.2017 13:36:00, dendi.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350319/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350319/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 13:36:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350318/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Хорошо, что где-то это работает <img  src="data:image/gif;base64,R0lGODlhAQABAAAAACH5BAEKAAEALAAAAAABAAEAAAICTAEAOw==" data-src="http://proxmox.su/upload/main/smiles/2/bx_smile_wink.png" border="0" data-code=";-)" data-definition="UHD" alt=";-)" style="width:20px;height:20px;" title="Шутливо" class="lazyload bx-smile" />. У меня стоит Proxmox 5.0-33. Сейчас у меня один LXC синхронизируется на ZFS уже 7 часов по центральноевропейскому времени, сейчас 13:00 CET (машины синхронизируются каждые 15 минут, остальные машины в последний раз синхронизировались в 6:45). Предыдущая синхронизация заняла 6,8 секунд согласно таблице репликации. Лог показывает, что один бэкап (не репликация) начался примерно в 6:00 и закончился спустя 3,5 минуты, а другой бэкап начался в 7:00:01 и длился примерно 13 минут для той машины (удалённое хранилище, поэтому медленнее). Получается, что именно бэкап негативно влияет на репликацию. Думаю, что снапшот для бэкапа создаётся не полностью независимо от репликации. Настроить расписание так, чтобы этого не происходило, сложно, ведь бэкап всех машин занимает несколько часов. Поэтому всегда есть вероятность, что снапшот для бэкапа создаётся в критический для репликации момент (когда бы он ни был). Репликацию нужно останавливать на время бэкапа. Определить подходящее расписание для cron — тоже не простая задача, как мне кажется. Есть идеи, как этого избежать? <br />
			<i>25.10.2017 13:04:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350318/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350318/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 13:04:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350317/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Привет! Мой кластер из 4 узлов отлично работает с репликацией ZFS. Даже после перезагрузки целевой машины всё нормально. Я использую KVM. <br />
			<i>25.10.2017 10:31:00, dendi.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350317/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350317/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 10:31:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350316/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			У меня примерно такой же опыт. Это может быть связано с "перезагрузками" целевой машины, из-за чего приходится удалять все zfsStorageCopies перед тем, как снова запустить репликацию (используя команду типа "zfs destroy vmpool/subvol-102-disk-1"). Очень раздражает, и было бы здорово, если бы был какой-то автоматический механизм восстановления. <br />
			<i>25.10.2017 00:02:00, le_top.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350316/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350316/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Wed, 25 Oct 2017 00:02:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
		<item>
			<title>Репликация хранилища регулярно останавливается</title>
			<description><![CDATA[<b><a href="http://proxmox.su/forum/messages/forum63/message350315/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya">Репликация хранилища регулярно останавливается</a></b> <i>Proxmox Виртуальная Среда</i> в форуме <a href="http://proxmox.su/forum/forum63/">Proxmox Виртуальная Среда</a>. <br />
			Это отличная функция, и я понимаю, что она пока экспериментальная, но у меня регулярно перестает синхронизироваться весь мой список виртуальных машин. Мне приходится перезапускать сервис pvesr, после чего всё снова работает день или два, а потом снова перестает. Мне кажется, что она просто застревает на операции заморозки файловой системы у некоторых контейнеров, и из-за этого перестают работать все.<br /><br />Например, сейчас 2017-08-06, когда я это пишу, и вот последний лог-файл, который я вижу:<br /><br />Код:<br />2017-08-03 05:30:01 700-0: start replication job &nbsp;<br />2017-08-03 05:30:01 700-0: guest =&gt; CT 700, running =&gt; 1 &nbsp;<br />2017-08-03 05:30:01 700-0: volumes =&gt; main:subvol-700-disk-1 &nbsp;<br />2017-08-03 05:30:02 700-0: freeze guest filesystem &nbsp;<br /><br />Думаю, проблема возникает, когда репликация совпадает с задачей резервного копирования, поскольку этот контейнер настроен на бэкап ровно в 05:30 каждый день.<br /><br />Конфиг replication.cfg для этого контейнера такой:<br /><br />Код: &nbsp;<br />local: 700-0 &nbsp;<br />target kt-proxmox-02 &nbsp;<br />rate 10 &nbsp;<br /><br />То есть репликация запускается каждые 15 минут по умолчанию. Думаю, в коде репликации нужно проверить, не выполняется ли в этот момент резервное копирование, и если да — пропускать репликацию. Или ещё лучше — чтобы репликация запускалась одновременно с бэкапом, но с каким-то алгоритмом, который не замораживает файловую систему в одно и то же время, а просто немного задерживает репликацию, пока завершится заморозка у резервного копирования. <br />
			<i>06.08.2017 03:34:00, FastLaneJB.</i>]]></description>
			<link>http://proxmox.su/forum/messages/forum63/message350315/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</link>
			<guid>http://proxmox.su/forum/messages/forum63/message350315/80711-replikatsiya-khranilishcha-regulyarno-ostanavlivaetsya</guid>
			<pubDate>Sun, 06 Aug 2017 03:34:00 +0300</pubDate>
			<category>Proxmox Виртуальная Среда</category>
		</item>
	</channel>
</rss>
