Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    VMs становятся неотзывчивыми

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    VMs становятся неотзывчивыми, Proxmox Виртуальная Среда
     
    Reddin
    Guest
    #1
    0
    11.01.2022 08:21:00
    Добрый день. У меня есть несколько виртуальных машин с настроенным хранилищем на nfs, и вдруг они стали недоступны. Процессор загружен на 25% (14% для некоторых из них). Диск чтения/записи падает до 0. В логах ничего нет. Виртуальную машину можно остановить только из консоли с помощью qm stop <VMID>. На что мне стоит обратить внимание? Версия PVE 6.3-4
     
     
     
    kaja
    Guest
    #2
    0
    14.04.2023 11:41:00
    Я предполагаю, что я могу делать что-то систематически неправильно на всех ВМ, но не вижу, чтобы делал что-то экстраординарное... Обычно я просто настраиваю msmtp, unattended upgrades и ssh-ключ... после этого некоторые из них имеют docker / usb-устройство / что-то вроде snapcast/pipewire... и всё. Я не могу понять, что происходит: PVE показывает стабильные 50% загрузки CPU (предполагаю, один из двух ядер перегружен до ручной остановки), не могу подключиться по ssh, пинговать или зайти через консоль PVE ВМ. Хотя консоль PVE показывала какое-то повторяющееся сообщение (не мог ввести ни одной команды), которое я попробую снять на скриншот в следующий раз :-/ В журнале системы гостя в этот раз тоже не было ошибок. Только почасовой отчет cron, тишина и сообщения о загрузке после ручного перезагрузки. Возможно, есть какой-то полезный демон systemd, который я мог бы проверить, но у меня нет идей. Я предполагаю, что "редактирование" о passthrough отменяет необходимость в этом выводе, но в любом случае: Код: /sys/kernel/iommu_groups/17/devices/0000:06:00.0 /sys/kernel/iommu_groups/7/devices/0000:00:1c.1 /sys/kernel/iommu_groups/15/devices/0000:03:00.0 /sys/kernel/iommu_groups/5/devices/0000:00:17.0 /sys/kernel/iommu_groups/13/devices/0000:01:00.0 /sys/kernel/iommu_groups/3/devices/0000:00:14.2 /sys/kernel/iommu_groups/3/devices/0000:00:14.0 /sys/kernel/iommu_groups/11/devices/0000:00:1c.6 /sys/kernel/iommu_groups/1/devices/0000:00:02.0 /sys/kernel/iommu_groups/8/devices/0000:00:1c.2 /sys/kernel/iommu_groups/16/devices/0000:04:00.0 /sys/kernel/iommu_groups/6/devices/0000:00:1c.0 /sys/kernel/iommu_groups/14/devices/0000:02:00.0 /sys/kernel/iommu_groups/4/devices/0000:00:16.0 /sys/kernel/iommu_groups/12/devices/0000:00:1f.0 /sys/kernel/iommu_groups/12/devices/0000:00:1f.5 /sys/kernel/iommu_groups/12/devices/0000:00:1f.3 /sys/kernel/iommu_groups/12/devices/0000:00:1f.4 /sys/kernel/iommu_groups/2/devices/0000:00:08.0 /sys/kernel/iommu_groups/10/devices/0000:00:1c.4 /sys/kernel/iommu_groups/0/devices/0000:00:00.0 /sys/kernel/iommu_groups/9/devices/0000:00:1c.3
     
     
     
    kaja
    Guest
    #3
    0
    04.05.2023 19:03:00
    Я на днях искал другие решения и наткнулся на это: https://forum.proxmox.com/threads/vm-freezes-irregularly.111494/page-33#post-552822, что похоже и есть проблема. Также, решение там, похоже, работает для меня пока что. Кратко: установите пакет "intel-microcode" версии 3.20230214.1 на хост Proxmox (он уже есть в репозитории debian bullseye contrib/non-free в этой версии). Полагаю, это проблема процессора Intel какого-то поколения или что-то в этом роде...
     
     
     
    kaja
    Guest
    #4
    0
    12.04.2023 01:15:00
    Привет, искал на форумах информацию о таком поведении ВМ, которое я наблюдаю уже несколько дней/недель. Состояние ---------- Версия: PVE 7.4-3 ВМ: около 4 работающих ВМ (debian 11-stable и 12-testing) ЦП: по 2 ядра для каждой ВМ Приложения: в некоторых ВМ установлен Docker, в других просто несколько обычных приложений Агент гостя QEMU: включен для всех ВМ Условие ---------- Раз в несколько дней одна (случайная) из ВМ перегружает одно из своих ядер процессора (показывает 50% загрузки из двух ядер) и становится неотзывчивой - ни ssh, ни консоль PVE не работают. Остается в этом состоянии, пока не будет остановлена вручную ("shutdown" не сработает). Это происходило с различными ВМ в течение последнего месяца. Debian 11 и 12, с установленным docker внутри ВМ или без него... Я обновил PVE до 7.4-3 с предыдущей версии - это все равно происходит как до обновления, так и после. Использование ОЗУ ВМ упало примерно с 600Mi до 400Mi в момент возникновения ошибки. Также я не заметил никаких проблем с сетью. Логи ---------- Я не нашел никаких логов, указывающих на проблему. Никаких указаний в /var/log/syslog или в системных журналах (проверял для нескольких демонов, с которыми явно работаю). Последние зафиксированные сообщения в /var/log/syslog выглядят так: 10 апр 22:45:09 dock-first systemd[1]: Достигнута цель Звуковая карта. 10 апр 23:00:30 dock-first systemd[1]: Запуск очистки временных каталогов... 10 апр 23:00:30 dock-first systemd[1]: systemd-tmpfiles-clean.service: Завершено успешно. 10 апр 23:00:30 dock-first systemd[1]: Очистка временных каталогов завершена. -> и тишина сразу после этого, до следующей загрузки Возможный контекст ---------- Когда я останавливаю и снова запускаю такую ВМ, мое соединение по bluetooth обрывается - имеется в виду адаптер Bluetooth USB с трансляцией (устройство, а не порт) к другой (не затронутой) ВМ. Хотя это может быть независимой проблемой/ошибкой.
     
     
     
    fiona
    Guest
    #5
    0
    12.04.2023 08:53:00
    Можешь поделиться выводом pveversion -v и qm config <ID> с ID затронутых ВМ? Какой у тебя CPU на хосте? Когда ВМ снова зависнет, сможешь выполнить strace -c -p $(cat /var/run/qemu-server/<ID>.pid) с ID зависшей ВМ? Нажми Ctrl+C через несколько секунд, чтобы получить вывод. Ты тоже проверял логи на хосте? Это единственное устройство, которое ты передаешь, или есть и другие? Достаточно ли IOMMU изолированы для твоего случая: https://pve.proxmox.com/wiki/PCI_Passthrough#Verify_IOMMU_Isolation?
     
     
     
    kaja
    Guest
    #6
    0
    13.04.2023 09:47:00
    Делюсь выводом ---------- pveversion -v proxmox-ve: 7.4-1 (работает на ядре: 5.15.104-1-pve) pve-manager: 7.4-3 (работает версия: 7.4-3/9002ab8a) pve-kernel-5.15: 7.4-1 pve-kernel-5.15.104-1-pve: 5.15.104-1 pve-kernel-5.15.102-1-pve: 5.15.102-1 pve-kernel-5.15.74-1-pve: 5.15.74-1 ceph-fuse: 15.2.17-pve1 corosync: 3.1.7-pve1 criu: 3.15-1+pve-1 glusterfs-client: 9.2-1 ifupdown2: 3.1.0-1+pmx3 ksm-control-daemon: 1.4-1 libjs-extjs: 7.0.0-1 libknet1: 1.24-pve2 libproxmox-acme-perl: 1.4.4 libproxmox-backup-qemu0: 1.3.1-1 libproxmox-rs-perl: 0.2.1 libpve-access-control: 7.4-2 libpve-apiclient-perl: 3.2-1 libpve-common-perl: 7.3-4 libpve-guest-common-perl: 4.2-4 libpve-http-server-perl: 4.2-1 libpve-rs-perl: 0.7.5 libpve-storage-perl: 7.4-2 libspice-server1: 0.14.3-2.1 lvm2: 2.03.11-2.1 lxc-pve: 5.0.2-2 lxcfs: 5.0.3-pve1 novnc-pve: 1.4.0-1 proxmox-backup-client: 2.4.1-1 proxmox-backup-file-restore: 2.4.1-1 proxmox-kernel-helper: 7.4-1 proxmox-mail-forward: 0.1.1-1 proxmox-mini-journalreader: 1.3-1 proxmox-widget-toolkit: 3.6.5 pve-cluster: 7.3-3 pve-container: 4.4-3 pve-docs: 7.4-2 pve-edk2-firmware: 3.20230228-2 pve-firewall: 4.3-1 pve-firmware: 3.6-4 pve-ha-manager: 3.6.0 pve-i18n: 2.12-1 pve-qemu-kvm: 7.2.0-8 pve-xtermjs: 4.16.0-1 qemu-server: 7.4-3 smartmontools: 7.2-pve3 spiceterm: 3.2-2 swtpm: 0.8.0~bpo11+3 vncterm: 1.7-1 zfsutils-linux: 2.1.9-pve1 qm config 103 agent: 1 balloon: 1024 boot: order=scsi0;ide2;net0 cores: 2 ide2: local:iso/debian-11.6.0-amd64-netinst.iso,media=cdrom,size=388M memory: 2048 meta: creation-qemu=7.1.0,ctime=1676657118 name: dock-first net0: virtio=46:5D:0D:F2:FB:FE,bridge=vmbr0,firewall=1,tag=50 numa: 0 onboot: 1 ostype: l26 parent: fifo_only_and_carlos_hudba scsi0: local-zfs:vm-103-disk-0,iothread=1,size=10G scsi1: local-zfs:vm-103-disk-1,backup=0,iothread=1,size=1G scsihw: virtio-scsi-single smbios1: uuid=b9742f71-7049-494c-9a05-1246536245b7 sockets: 1 usb0: host=0a5c:2101 usb1: host=0bda:8771 usb2: host=0d8c:0014 vmgenid: d4aeaf0b-6c4c-47db-a5e4-7c5443fad2a1 qm config 107 agent: 1 balloon: 1024 boot: order=scsi0;ide2;net0 cores: 2 description: scsi1%3A local-zfs%3Avm-107-disk-1,backup=0,iothread=1,size=1G%0Ascsi1%3A local-zfs%3Avm-107-disk-1,backup=0,iothread=1,size=1G%0Ascsi1%3A local-zfs%3Avm-107-disk-1,backup=0,iothread=1,size=1G ide2: local:iso/debian-11.6.0-amd64-netinst.iso,media=cdrom,size=388M memory: 2048 meta: creation-qemu=7.1.0,ctime=1676657118 name: audio-server net0: virtio=72:C4:1D:3D:E4:16,bridge=vmbr0,firewall=1,tag=50 numa: 0 onboot: 1 ostype: l26 scsi0: local-zfs:vm-107-disk-0,iothread=1,size=10G scsi1: local-zfs:vm-107-disk-1,backup=0,iothread=1,size=1G scsihw: virtio-scsi-single smbios1: uuid=50a2ccf2-7d3c-44ec-ae3e-0d4339b09423 sockets: 1 tablet: 0 usb0: host=0d8c:0014 usb1: host=0bda:8771 usb2: host=0a5c:2101 vmgenid: f57c0d43-93dc-4ace-8395-2800298e3fe8 qm config 108 agent: 1 balloon: 1024 boot: order=scsi0;ide2;net0 cores: 2 description: Bacha - это диск для swap, который не сохраняется... и при восстановлении его нужно подключить ЕЩЁ ПЕРЕД тем, как ты запустишь машину, иначе тебе придется снова вручную настраивать swap... ide2: local:iso/debian-11.6.0-amd64-netinst.iso,media=cdrom,size=388M memory: 4096 meta: creation-qemu=7.1.0,ctime=1676657118 name: dock-home net0: virtio=1A:E9:F5:C9:0A:E8,bridge=vmbr0,firewall=1,tag=50 numa: 0 onboot: 1 ostype: l26 parent: po_snapcastu_a_verce scsi0: local-zfs:vm-108-disk-0,iothread=1,size=16G scsi1: local-zfs:vm-108-disk-1,backup=0,iothread=1,size=1G scsihw: virtio-scsi-single smbios1: uuid=119a3435-c2a6-47be-b0c8-bf8557b2b1f5 sockets: 1 vmgenid: b613dc23-ca3e-4da2-9a7c-39cc41a933a4 Процессор хоста ---------- Intel Celeron Elkhart Lake J6412, 2GHz, макс 2.6GHz, четырехъядерный, AES-NI Журнал хоста ----------- Я забыл проверить хост, так что вот он: В какое-то время вокруг сбоя (не знаю точного времени :-/ ) я нашел сотни повторяющихся сообщений в секунду, таких как: 11 апр 00:27:57 hyper-home kernel: [ 6212.812606] usb 1-6: usbfs: процесс 3718 (CPU 1/KVM) не взял на себя интерфейс 1 перед использованием 11 апр 00:27:57 hyper-home kernel: [ 6212.981158] usb 1-6: usbfs: процесс 3717 (CPU 0/KVM) не взял на себя интерфейс 1 перед использованием 11 апр 00:27:57 hyper-home QEMU[3615]: kvm: libusb_set_interface_alt_setting: -99 [ДРУГОЕ] Не знаю, является ли это причиной или следствием. Эти два процесса (3717 и 3718) случайным образом изменяются в журнале. Они повторялись один раз через минуту, а затем дважды через 5 минут. Где-то среди этих сообщений я нашел: 11 апр 00:34:46 hyper-home kernel: [ 6621.202944] perf: прерывание заняло слишком много времени (3131 > 3130), снижая kernel.perf_event_max_sample_rate до 63750 Остальное ---------- Я отправлю информацию, когда это произойдет снова. У меня подключены два usb-устройства - адаптер Bluetooth и внешний звуковой карт. Они оба передаются в одну виртуальную машину (107). Что касается IOMMU - я полагаю, что использовал неправильный термин "passthrough", так как все, что я сделал, это "Добавить HW -> usb устройство -> использовать USB vendor ID". Так что я могу "lsusb" видеть их как на хосте, так и в 107 ВМ, и я понимаю, что это не "настоящее пропускное отверстие" устройства? Но вот что есть из lspci для usb - оно "делит" функции с RAM, но как я уже сказал - я полагаю, что не сделал настоящее пропускное отверстие? 00:14.0 USB контроллер: Intel Corporation Device 4b7d (rev 11) 00:14.2 ОЗУ: Intel Corporation Device 4b7f (rev 11)
     
     
     
    fiona
    Guest
    #7
    0
    13.04.2023 10:05:00
    Я думаю, что ты не можешь подключить одно и то же устройство к нескольким виртуальным машинам (и запустить их одновременно), так же как это невозможно сделать физически. Я бы не удивился, если это и есть проблема.
     
     
     
    kaja
    Guest
    #8
    0
    13.04.2023 11:28:00
    О, спасибо, не заметил этого... Я проверю/исправлю это позже сегодня, но это немного странно - может быть, я добавил одно из устройств в обе ВМ (моя ошибка), но не те другие два :-X... В любом случае, я начну с этого и посмотрю, что будет дальше. Спасибо еще раз.
     
     
     
    kaja
    Guest
    #9
    0
    13.04.2023 19:13:00
    Привет, сегодня днем пришел, чтобы починить свой USB — несколько ВМ не работают. При удалении их из ненужной ВМ возникла ошибка: Код: Неудачная проверка параметров. (400) usb1: проблема с горячей заменой - команда VM 103 qmp 'device_del' не удалась - получено время ожидания, что, как я предполагаю, может быть нормальным поведением (учитывая неисправное предыдущее состояние). USB-устройства успешно удалены из ВМ, однако в то же время я обнаружил, что ВМ зависла с полудня - VMID 108, которая вовсе не связана с USB-устройствами. Выполнил команду, как было рекомендовано: Код: strace -c -p $(cat /var/run/qemu-server/108.pid) strace: Процесс 4187 отсоединен % время     секунды  микросекунд/вызов     вызовы    ошибки системный вызов ------ ----------- ----------- --------- --------- ----------------  0.00    0.000000           0      4743           read  0.00    0.000000           0     18448           write  0.00    0.000000           0        21           close  0.00    0.000000           0        89           sendmsg  0.00    0.000000           0      4514           recvmsg  0.00    0.000000           0        21           getsockname  0.00    0.000000           0        42           fcntl  0.00    0.000000           0      4842           ppoll  0.00    0.000000           0        21           accept4 ------ ----------- ----------- --------- --------- ---------------- 100.00    0.000000           0     32741           всего Я также проверил хост Код: /var/log/syslog, но ошибок за несколько часов до или после сбоя не было (за исключением ошибки получения хранилищ данных от pbs каждые десять секунд, который в данный момент не работает - я предполагаю, что это просто общая ошибка "не могу с вами связаться по сети", но все же упоминаю это). Я предполагаю, что проблема с USB может быть причиной, хотя зависшая ВМ и не имела подключенного USB... В противном случае я с радостью предоставлю дополнительную информацию, если это повторится. С наилучшими пожеланиями, Кая
     
     
     
    fiona
    Guest
    #10
    0
    14.04.2023 10:22:00
    Странно, что отсутствуют временные метки, но распределение вызовов не кажется мне проблемным. Если ошибок не было, то это может быть проблема внутри самой виртуальной машины. Как вы определили, что ВМ зависла, то есть по консоли, пингу и т.д.? Есть ли что-то интересное в логах гостя? Да, ошибки PBS не должны быть связаны с этим. Вы можете отключить хранилище в те время, когда оно не в сети, чтобы избежать ошибок. Можете поделиться выводом команды find /sys/kernel/iommu_groups/ -type l? ИЗМЕНЕНИЕ: @dcsapak сказал мне, что это не должно быть проблемой, USB-проходка использует другой механизм.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры