Аспро: ЛайтШоп [тема: Ежедневное резервное копирование зависло 'включить диск']

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 11:33:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо, это определенно Valid point, который стоит учесть. С тех пор как я включил IO Thread на всех дисках, даже загружая хранилище другими задачами, мне не удалось воспроизвести эту проблему — я уже сделал около 5 бэкапов с утра, повторно. Позволю ему работать несколько дней и посмотрю, что будет.
04.08.2022 11:33:00, iMx.

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 09:32:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
ну вот, еще один бэкап завершен прямо перед этим — так что, возможно, он занят очисткой этого файла..
04.08.2022 09:32:00, fabian.

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 09:31:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Да, это находится на NFS, на RAID10 Synology NAS, но в данный момент не используется активно Все другие задачи происходят до и после окна резервного копирования и не пересекаются. Странно то, что я часто мог перезапускать резервное копирование в течение дня, когда используется больше клиентов - хотя мне удалось воспроизвести это сегодня утром, когда я запустил его вручную. Возможно, добавлю отдельный диск для резервного копирования, чтобы провести некоторые тесты.
04.08.2022 09:31:00, iMx.

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 09:26:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
на каком типе хранения находятся диски? кажется, это блоки qemu-img, что может случиться с сетевым хранилищем, таким как NFS или CIFS, если есть проблема с доступом к хранилищу.
04.08.2022 09:26:00, fabian.

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 08:49:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Похоже, у меня зомби: Код: root 1657739 0.0 0.0 0 0 ? Zl 07:41 0:00 [qemu-img] Код: ИНФО: Начало резервного копирования ВМ 101 (qemu) ИНФО: Резервное копирование начато 2022-08-04 07:41:30 ИНФО: статус = работает ИНФО: Имя ВМ: Downloads ИНФО: включить диск 'scsi0' 'nas-proxmox-vm:101/vm-101-disk-0.qcow2' 32G ИЗМЕНЕНИЕ: Попробую включить поток ввода-вывода на диске(ах) (VirtIO SCSI Single) на несколько дней и посмотрю, поможет ли это.
04.08.2022 08:49:00, iMx.

Ежедневное резервное копирование зависло 'включить диск'

Thu, 04 Aug 2022 08:20:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Вы разобрались с этим? Я вижу то же самое: Код: 110: 2022-08-03 21:34:41 ИНФО: удален 1 резервный экземпляр, не попадающий под политику хранения
110: 2022-08-03 21:34:41 ИНФО: Завершен бэкап виртуальной машины 110 (00:01:06)

111: 2022-08-03 21:34:41 ИНФО: Начало бэкапа виртуальной машины 111 (qemu)
111: 2022-08-03 21:34:41 ИНФО: статус = работает
111: 2022-08-03 21:34:41 ИНФО: Имя ВМ: Plex
111: 2022-08-03 21:34:41 ИНФО: включен диск 'scsi0' 'nas-proxmox-vm:111/vm-111-disk-0.qcow2' 32G
111: 2022-08-04 06:22:30 ИНФО: режим бэкапа: снимок
111: 2022-08-04 06:22:30 ИНФО: приоритет ionice: 7
111: 2022-08-04 06:22:30 ИНФО: создание архива vzdump '/mnt/pve/nas-proxmox-backup/dump/vzdump-qemu-111-2022_08_03-21_34_41.vma.zst'
111: 2022-08-04 06:22:30 ИНФО: выполнение команды 'fs-freeze' для гостевого агента
111: 2022-08-04 06:22:35 ИНФО: выполнение команды 'fs-thaw' для гостевого агента
111: 2022-08-04 06:22:36 ИНФО: запущена задача бэкапа 'c1a2ce9f-c4e4-4d9e-8eb9-ab105a223791'
111: 2022-08-04 06:22:36 ИНФО: возобновление работы ВМ снова. Предыдущий бэкап завершился в 21:34, следующий (Plex) начинается, но затем застревает на 'включение диска' на несколько часов - в конце концов, он успешно завершился. Скорость для предыдущих и последующих бэкапов в порядке, не похоже, что он завис на снимке, что я мог бы понять, если бы это было так.
04.08.2022 08:20:00, iMx.

Ежедневное резервное копирование зависло 'включить диск'

Fri, 27 May 2022 10:20:00 +0300

Ежедневное резервное копирование зависло 'включить диск' Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, у меня есть кластер Proxmox из 6 узлов на версии 7.2-4. Каждый из этих узлов имеет задачу резервного копирования: - узел-1 в 2:00 - узел-2 в 2:30 ... - узел-6 в 4:30 Целевое хранилище на NFS с примерно 2 ТБ свободного места. У меня всегда зависает 2 или 3 задачи резервного копирования с последней строкой логов: INFO: include disk 'scsi0' 'pve-shared:502/vm-502-disk-0.qcow2' 32G Вот полный лог одной из этих неудачных задач резервного копирования: Код: INFO: starting new backup job: vzdump --node pve-a84d07 --mode snapshot --prune-backups 'keep-last=7' --mailnotification failure --all 1 --compress zstd --quiet 1 --notes-template '{{guestname}}' --storage pve-shared INFO: Starting Backup of VM 203 (qemu) INFO: Backup started at 2022-05-27 02:30:03 INFO: status = running INFO: VM Name: Docker-Host-16E229 INFO: include disk 'scsi0' 'pve-shared:203/vm-203-disk-1.qcow2' 32G INFO: backup mode: snapshot INFO: ionice priority: 7 INFO: skip unused drive 'pve-shared:203/vm-203-disk-0.qcow2' (not included into backup) INFO: creating vzdump archive '/mnt/pve/pve-shared/dump/vzdump-qemu-203-2022_05_27-02_30_03.vma.zst' INFO: issuing guest-agent 'fs-freeze' command INFO: issuing guest-agent 'fs-thaw' command INFO: started backup task 'cf8e3543-d959-4756-a400-a57b28cf8c53' INFO: resuming VM again INFO: 1% (369.0 MiB из 32.0 GiB) за 3с, чтение: 123.0 MiБ/с, запись: 90.2 МиБ/с [...] INFO: 100% (32.0 GiБ из 32.0 GiБ) за 5м 39с, чтение: 95.5 МиБ/с, запись: 0 Б/с INFO: backup is sparse: 22.48 GiБ (70%) всего нулевых данных INFO: transferred 32.00 GiБ за 339 секунд (96.7 МиБ/с) INFO: archive file size: 3.45ГБ INFO: adding notes to backup INFO: prune older backups with retention: keep-last=7 INFO: removing backup 'pve-shared:backup/vzdump-qemu-203-2022_05_20-15_32_10.vma.zst' INFO: pruned 1 backup(s) not covered by keep-retention policy INFO: Finished Backup of VM 203 (00:05:41) INFO: Backup finished at 2022-05-27 02:35:44 INFO: Starting Backup of VM 502 (qemu) INFO: Backup started at 2022-05-27 02:35:44 INFO: status = running INFO: VM Name: K3S-Master-2 INFO: include disk 'scsi0' 'pve-shared:502/vm-502-disk-0.qcow2' 32G ################################################## ################################################## Завис здесь, запросил перезагрузку этого узла ################################################## ################################################## interrupted by signal could not parse qemu-img info command output for '/mnt/pve/pve-shared/images/502/vm-502-disk-0.qcow2' - malformed JSON string, neither tag, array, object, number, string or atom, at character offset 0 (before "(end of string)") at /usr/share/perl5/PVE/Storage/Plugin.pm line 894. INFO: backup mode: snapshot INFO: ionice priority: 7 INFO: creating vzdump archive '/mnt/pve/pve-shared/dump/vzdump-qemu-502-2022_05_27-02_35_44.vma.zst' ERROR: got timeout INFO: aborting backup job ERROR: VM 502 qmp command 'backup-cancel' failed - interrupted by signal INFO: resuming VM again ipcc_send_rec[1] failed: Connection refused ipcc_send_rec[2] failed: Connection refused ipcc_send_rec[3] failed: Connection refused Connection refused ERROR: Backup of VM 502 failed - VM 502 qmp command 'cont' failed - unable to connect to VM 502 qmp socket - timeout after 449 retries INFO: Failed at 2022-05-27 09:43:52 ERROR: Backup job failed - Connection refused TASK ERROR: Connection refused Как видите, резервное копирование первой ВМ прошло успешно, а вот со второй зависло (из трех). Утром, чтобы всё вернуть в норму, я перезагружаю каждый неудавшийся узел. Кто-нибудь знает, что происходит? Есть ли способ получить уровень отладки для задач резервного копирования? Спасибо, что прочитали!
27.05.2022 10:20:00, Dough29.