http://proxmox.su Новое в теме Команда 'query-proxmox-support' не выполнилась – произошел таймаут. форума Proxmox Виртуальная Среда на сайте Аспро: ЛайтШоп [proxmox.su] ru http://backend.userland.com/rss2 Tue, 28 Apr 2026 19:08:26 +0300 Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет @Chris, когда мне выпустить эту команду? Сразу после ошибки резервного копирования? Что касается сбора мусора: я его никогда не перезапускал, но могу попробовать и посмотреть, что произойдет.
23.10.2024 12:03:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333451/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333451/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Wed, 23 Oct 2024 12:03:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Можешь еще проверить вывод grep 'State' /proc/$(cat /var/run/qemu-server/105.pid)/task/*/status, адаптировав VMID соответственно? Ты же упоминал проблемы с garbage collection раньше, это исправлено после обновления или эта проблема осталась?
23.10.2024 11:27:00, Chris.]]> http://proxmox.su/forum/messages/forum63/message333450/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333450/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Wed, 23 Oct 2024 11:27:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо, @Chris, еще раз за ответ. Я уже добавил fleecing при обновлении. Последние тесты, которые я для тебя делал, уже включали fleecing. Вот параметры монтирования: Код: rw,relatime,vers=3,rsize=32768,wsize=32768,namlen=255,hard,proto=tcp,timeo=600,retrans=2,sec=sys,mountaddr=192.168.55.252,mountvers=3,mountport=45914,port=42049,local_lock=none
21.10.2024 10:24:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333449/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333449/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Mon, 21 Oct 2024 10:24:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Спасибо за логи, быстрый просмотр, к сожалению, ничего очевидного не показывает. Не могли бы вы попробовать подключить устройство "fleecing" для этой задачи резервного копирования и посмотреть, появляется ли проблема также при резервном копировании на "fleecing" хранилище, когда вы используете PBS? Похоже, проблема, скорее всего, связана с PBS/NFS. Пожалуйста, также поделитесь параметрами монтирования, которые вы используете в PBS для монтирования NFS-шары.
21.10.2024 10:03:00, Chris.]]> http://proxmox.su/forum/messages/forum63/message333448/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333448/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Mon, 21 Oct 2024 10:03:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, @Chris, вот обновленные логи отладки. Спасибо, Крис.
19.10.2024 17:06:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333447/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333447/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Sat, 19 Oct 2024 17:06:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, к сожалению, вывод отладки всё ещё не содержит символов отладки, связанных с proxmox-backup. Пожалуйста, установи также apt install libproxmox-backup-qemu0-dbgsym symbols и попробуй ещё раз. Спасибо.
18.10.2024 15:20:00, Chris.]]> http://proxmox.su/forum/messages/forum63/message333446/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333446/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Fri, 18 Oct 2024 15:20:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, @Chris, прилагаю результаты отладочных сессий (сразу после начала резервного копирования и сразу после его сбоя).
18.10.2024 02:02:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333445/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333445/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Fri, 18 Oct 2024 02:02:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, @Chris, извини за поздний ответ. Как обычно, работа держит меня в постоянной занятости, поэтому у меня мало времени на отладку, к сожалению. Да, я перезагрузил сервер. И я полностью выключил все ВМ перед обновлением. Сегодня вечером я сделал еще один тест с другой ВМ. Я видел в другом треде (том, что ты упомянул), что у одного клиента были проблемы с дисками больше 100Гб, поэтому я выбрал другую ВМ для тестов (предыдущая имела диск на 200Гб). Хотя у него были проблемы, потому что он использовал CIFS для монтирования хранилища резервного копирования, и он решил свою проблему, используя NFS. Я всегда использовал NFS, так что это, вероятно, ко мне не применимо… но поскольку у меня была гораздо меньшая ВМ в наличии (диск на 32Гб), я решил, что лучше попробовать с ней. Итак, ты можешь найти приложенный вывод двух команд для ВМ 105. Эта ВМ работает на FreeBSD 14.0. Предыдущая (ВМ 101) работала на Ubuntu 20.04.6 LTS. Я подтверждаю, что qemu-guest-agent установлен и работает. У меня нет ВМ с Windows, которые, похоже, являются причиной некоторых других отчетов, похожих на мои. Приложено, ты найдешь вывод двух команд сразу после сбоя резервного копирования (то есть после того, как задача PVE сообщает "ERROR: VM 105 qmp command 'backup' failed - got timeout"). Это то, что я собираюсь сделать, как только смогу. Но если у тебя есть какие-нибудь идеи до того, как я это попробую, я бы хотел услышать от тебя. Заранее спасибо, Cris.
18.10.2024 01:18:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333444/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333444/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Fri, 18 Oct 2024 01:18:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Ты перезагрузил сервера после обновления? Выполнил ли полную остановку или миграцию VM, чтобы использовать новую версию qemu? Пожалуйста, еще раз выложи вывод команд pveversion -v и proxmox-backup-manager version --verbose, чтобы получить полную картину. Что запущено внутри VM? Установлен и запущен ли qemu-guest-agent? Выложи также qm config 101 --current и qm status 101 --verbose сразу после неудачной попытки резервного копирования. Кстати, можешь попробовать отладить, установив символы отладки qemu и подключившись через gdb, как описано в этой записи от @fiona https://forum.proxmox.com/threads/e...roxmox-qmp-command-failed.139892/#post-633742
19.09.2024 09:47:00, Chris.]]> http://proxmox.su/forum/messages/forum63/message333443/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333443/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Thu, 19 Sep 2024 09:47:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет @Chris, наконец-то нашёл время остановить сервер и обновить Proxmox VE и PBS. Теперь у меня PVE 8.2.5 и PBS 3.2-7. К сожалению, это не помогло. Кстати, я настроил PVE на создание обычных резервных копий в директорию, которая, по сути, является точкой монтирования той же самой NFS-памяти, которую использует PBS. Эта настройка работает без проблем, но, очевидно, без всех прелестей PBS. Ты можешь видеть две памяти здесь: А вот конфигурация резервного копирования: Сегодня я ещё раз попытался сделать резервную копию в PBS. Я не включал задание резервного копирования: вместо этого я просто выбрал его и нажал кнопку "Запустить сейчас". Результат был тот же, что и раньше: Code: INFO: запуск нового задания резервного копирования: vzdump --mailto log@AMENDED --storage BaR_PBS_Bluenas --prune-backups 'keep-daily=1,keep-last=2,keep-monthly=1,keep-weekly=1,keep-yearly=1' --bwlimit 20480 --mailnotification failure --mode snapshot --notes-template '{{guestname}}' --node host0 --fleecing '1,storage=vmzfs' --all 1 --exclude 100,999
INFO: Запуск резервного копирования ВМ 101 (qemu)
INFO: резервное копирование началось 2024-09-18 14:17:50
INFO: status = running
INFO: Название ВМ: ParcelsFinder
INFO: копирование диска 'scsi0' 'local-lvm:vm-101-disk-0' 200G
INFO: режим резервного копирования: snapshot
INFO: ограничение пропускной способности: 20480 KB/s
INFO: приоритет ionice: 7
INFO: создание архива Proxmox Backup Server 'vm/101/2024-09-18T12:17:50Z'
INFO: drive-scsi0: подключение образа fleecing vmzfs:vm-101-fleece-0 к QEMU
INFO: выполнение команды гостевого агента 'fs-freeze'
INFO: выполнение команды гостевого агента 'fs-thaw'
ERROR: Команда qmp ВМ 101 'backup' завершилась с тайм-аутом
INFO: отмена задания резервного копирования
ERROR: Команда qmp ВМ 101 'backup-cancel' завершилась с тайм-аутом
INFO: возобновление работы ВМ
ERROR: Резервное копирование ВМ 101 не удалось - команда qmp ВМ 101 'cont' завершилась с тайм-аутом
INFO: Завершено в 2024-09-18 14:30:43
INFO: Запуск резервного копирования ВМ 102 (qemu)
INFO: резервное копирование началось 2024-09-18 14:30:43
INFO: status = running
INFO: Название ВМ: DlgParcelsFinder
INFO: копирование диска 'scsi0' 'vmzfs:vm-102-disk-0' 200G
INFO: режим резервного копирования: snapshot
INFO: ограничение пропускной способности: 20480 KB/s
INFO: приоритет ionice: 7
INFO: создание архива Proxmox Backup Server 'vm/102/2024-09-18T12:30:43Z'
INFO: drive-scsi0: подключение образа fleecing vmzfs:vm-102-fleece-0 к QEMU
INFO: выполнение команды гостевого агента 'fs-freeze'
INFO: выполнение команды гостевого агента 'fs-thaw'
ERROR: Команда qmp ВМ 102 'backup' завершилась с тайм-аутом
INFO: отмена задания резервного копирования
ERROR: прервано сигналом
INFO: возобновление работы ВМ Как видишь, я получаю обычные тайм-ауты. После второй неудачной попытки я остановил задание резервного копирования. Одно, что я, возможно, упустил в своих прошлых сообщениях: затронутые ВМ становятся "тормозными" после прерванного задания резервного копирования. Ни сервер, ни ВМ не показывают аномальной нагрузки, но ВМ, которые я пытался скопировать, реагируют медленно или вообще не отвечают на команды GUI, например, просмотр сводки одной из затронутых ВМ занимает несколько секунд для отображения статистики, в то время как другие ВМ отображаются мгновенно; попытка подключения к консоли не удаётся. Я всё ещё мог подключиться к ВМ по SSH, поэтому подключился и выполнил выключение. Ну, они никогда не завершали выключение, но я не мог видеть, что происходит на самом деле, потому что SSH больше не подключался (очевидно), а консоль не работала. Выключение из GUI PVE не работало. В конце концов, мне пришлось выполнить ОСТАНОВКУ из GUI PVE. После перезагрузки ВМ работали нормально. Syslog постоянно отображает сообщения вроде этих с момента неудачных резервных копий до перезагрузки ВМ: Code: host0 pvestatd[1529357]: Команда qmp ВМ 101 завершилась с ошибкой - команда qmp ВМ 101 'query-proxmox-support' завершилась с ошибкой - не удаётся подключиться к сокету qmp ВМ 101 - тайм-аут после 51 попытки Я также попытался выполнить некоторые команды qmp, которые завершались тайм-аутом, из CLI сервера (с использованием socat). У меня не было проблем с выполнением query-proxmox-support на одной из других ВМ, но команда (и другие команды qmp) не возвращала ничего на затронутых ВМ до тех пор, пока я их не перезагрузил (но «приветствие» qmp всё же отобразилось при подключении). Ещё одна вещь: я только что заметил, что если я подключаюсь к сокету с socat и оставляю соединение открытым, не делая ничего, затронутая ВМ становится тормозной, как описано выше. Я даже не могу подключиться к консоли. Как только я отключаюсь от сокета, ВМ становится нормально доступна снова. Надеюсь, это прольёт свет на проблему... Я видел много других тем с похожими проблемами в этом форуме, в основном без решения. Для тех, у кого было решение, оно не подходило к моему серверу.
Cris
P.S. Между тем, другой сервер продолжает работать без проблем, делая резервные копии в PBS. Всё ещё работает PVE 7.4-18 и PBS 2.4.7
18.09.2024 20:42:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333442/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333442/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Wed, 18 Sep 2024 20:42:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
У вас запущена устаревшая версия, вы уже обновили PBS и PVE хосты до последней версии, как я и предлагал?
03.09.2024 13:45:00, Chris.]]> http://proxmox.su/forum/messages/forum63/message333441/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333441/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Tue, 03 Sep 2024 13:45:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет @Chris и всем остальным. После моего последнего ответа никто не ответил с новыми предложениями или инсайтами. Понимаю, что сейчас у большинства отпуск, так что я не жалуюсь. Кстати, я сам недавно вернулся с каникул и хотел проверить, что-нибудь новое произошло. Надеюсь, что эту проблему можно будет дальше изучить. Спасибо заранее. Крис
13.08.2024 17:14:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333440/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333440/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Tue, 13 Aug 2024 17:14:00 +0300 Proxmox Виртуальная Среда Команда 'query-proxmox-support' не выполнилась – произошел таймаут. Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет всем! У меня есть два Proxmox сервера, работающих на очень-очень похожем железе (DELL PowerEdge R630 с 2 процессорами Xeon E5-2697 с 14 ядрами каждый и HT, 512Гб ECC RAM). На обоих серверах установлены PVE 7.4-18 (да, я знаю, нужно обновить). На обоих серверах установлены PBS 2.4-7 вместе с PVE. Оба сервера монтируют NAS диск через NFS, и в PBS настроено сохранение данных именно на этот монтируемый раздел (т.е. хранилище указывает на этот монтируемый раздел). Первый сервер работает без проблем (и его экземпляр BPS также делает резервные копии хостов для другого, более старого сервера PVE, на котором работает PVE 6.4). Второй сервер не может завершить ни одну резервную копию ни одного из 8 виртуальных машин, если используется PBS в качестве хранилища. Если использовать "local" хранилище (даже используя тот же NFS монтируемый раздел в качестве типа "directory"), резервные копии завершаются без проблем. Фактически, при использовании PBS он даже не может начать резервные копии. Вот пример лога задачи резервного копирования (который сейчас выполняется):

Code: INFO: starting new backup job: vzdump --all 1 --quiet 1 --storage AMENDED --mailnotification failure --prune-backups 'keep-daily=1,keep-last=2,keep-monthly=1,keep-weekly=1,keep-yearly=1' --notes-template '{{guestname}}' --mode snapshot --mailto log@AMENDED
INFO: Starting Backup of VM 100 (qemu)
INFO: Backup started at 2024-07-17 01:00:06
INFO: status = stopped
INFO: backup mode: stop
INFO: ionice priority: 7
INFO: VM Name: AMENDED
INFO: include disk 'scsi0' 'local-lvm:vm-100-disk-0' 40G
INFO: creating Proxmox Backup Server archive 'vm/100/2024-07-16T23:00:06Z'
INFO: starting kvm to execute backup task
ERROR: VM 100 qmp command 'backup' failed - got timeout
INFO: aborting backup job
ERROR: VM 100 qmp command 'backup-cancel' failed - got timeout
VM 100 qmp command 'query-status' failed - got timeout
ERROR: Backup of VM 100 failed - VM 100 qmp command 'backup' failed - got timeout
INFO: Failed at 2024-07-17 01:12:19
INFO: Starting Backup of VM 101 (qemu)
INFO: Backup started at 2024-07-17 01:12:19
INFO: status = running
INFO: VM Name: AMENDED
INFO: include disk 'scsi0' 'local-lvm:vm-101-disk-0' 200G
INFO: backup mode: snapshot
INFO: ionice priority: 7
INFO: creating Proxmox Backup Server archive 'vm/101/2024-07-16T23:12:19Z'
INFO: issuing guest-agent 'fs-freeze' command
INFO: issuing guest-agent 'fs-thaw' command
ERROR: VM 101 qmp command 'backup' failed - got timeout
INFO: aborting backup job
ERROR: VM 101 qmp command 'backup-cancel' failed - got timeout
INFO: resuming VM again
ERROR: Backup of VM 101 failed - VM 101 qmp command 'cont' failed - got timeout
INFO: Failed at 2024-07-17 01:25:10
INFO: Starting Backup of VM 102 (qemu)
INFO: Backup started at 2024-07-17 01:25:10
INFO: status = running
INFO: VM Name: AMENDED
INFO: include disk 'scsi0' 'vmzfs:vm-102-disk-0' 200G
INFO: backup mode: snapshot
INFO: ionice priority: 7
INFO: creating Proxmox Backup Server archive 'vm/102/2024-07-16T23:25:10Z'
INFO: issuing guest-agent 'fs-freeze' command
... Тем временем, на PBS каждая задача резервного копирования остается запущенной, даже когда PVE сдается с INFO: aborting backup job. На PBS пример лога задачи выглядит так:

Code: 2024-07-17T01:00:17+02:00: starting new backup on datastore 'BlueNAS_PBS': "vm/100/2024-07-16T23:00:06Z"
2024-07-17T01:00:17+02:00: GET /previous: 400 Bad Request: no valid previous backup and it keeps running forever until I click on the "Stop" button. Даже задача сбора мусора на PBS висит навсегда, и - в этом случае - я не могу даже остановить ее с помощью кнопки "Стоп". Фактически, процесс GC довольно скоро умирает, но каким-то образом PBS этого не замечает. Это то, что я вижу в /var/log/daemon.log (фрагмент):

Code: Jul 17 01:33:36 host0 pvestatd[3992]: VM 100 qmp command failed - VM 100 qmp command 'query-proxmox-support' failed - got timeout
Jul 17 01:33:41 host0 pvestatd[3992]: VM 102 qmp command failed - VM 102 qmp command 'query-proxmox-support' failed - unable to connect to VM 102 qmp socket - timeout after 51 retries
Jul 17 01:33:46 host0 pvestatd[3992]: VM 101 qmp command failed - VM 101 qmp command 'query-proxmox-support' failed - got timeout
Jul 17 01:34:25 host0 pvestatd[3992]: VM 100 qmp command failed - VM 100 qmp command 'query-proxmox-support' failed - got timeout
Jul 17 01:34:30 host0 pvestatd[3992]: VM 102 qmp command failed - VM 102 qmp command 'query-proxmox-support' failed - unable to connect to VM 102 qmp socket - timeout after 51 retries
Jul 17 01:34:46 host0 pvestatd[3992]: VM 101 qmp command failed - VM 101 qmp command 'query-proxmox-support' failed - got timeout
Jul 17 01:34:51 host0 pvestatd[3992]: VM 100 qmp command failed - VM 100 qmp command 'query-proxmox-support' failed - got timeout
Jul 17 01:34:52 host0 pvestatd[3992]: status update time (21.759 seconds)

Замечание: когда PVE сдается на резервном копировании для VM, VM продолжает работать плавно, если она уже работала до этого. Если вместо этого она была выключена перед резервным копированием, она остается в ложном состоянии "работает", пока я не дам "qm stop" ( qm shutdown дает ошибку: VM 100 qmp command 'query-status' failed - got timeout). Я прочитал много тем по поводу проблем с qmp и ошибки "got timeout", но не нашел точного соответствия моей ситуации, и даже решенные темы имеют довольно сомнительные решения. Пожалуйста, помогите. Я готов предоставить любые недостающие детали, если это необходимо. Спасибо заранее!

Крис
17.07.2024 02:13:00, Cris70.]]> http://proxmox.su/forum/messages/forum63/message333439/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. http://proxmox.su/forum/messages/forum63/message333439/78936-komanda-_query_proxmox_support_-ne-vypolnilas-_-proizoshel-taymaut. Wed, 17 Jul 2024 02:13:00 +0300 Proxmox Виртуальная Среда