+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Proxmox 4.4 NMI сторож и сбой сети, Proxmox Виртуальная Среда

nseba

Guest

17.01.2017 08:19:00

Привет, я только что получил новую машину, на которую установил proxmox 4.4. Установка прошла отлично, полный доступ к веб-админке и так далее. Однако на следующий день система заблокировалась, экран заполнили строки, например: Code: Message from syslog kernel:[90524.099987] NMI watchdog: BUG: soft lockup - CPU#3 stuck for 23s! [systemd-timesyn:788] и время от времени: Code: [90675.828055] INFO: rccu_sched detected stall on CPUs/tasks: [90675.828xxx]$0-...: (1 GPs behind) idle=ff9/1/0 softirq=1360721/1360723 fqs=2752358 [90675.828yyy]$(detected by 2, t=3030337 jiffies, g=927259, c=927258, q=161956). Что более удивительно, ни одна из машин, подключенных к тому же коммутатору (физический сетевой коммутатор), не могла общаться по IP (Wireshark показывал только ARP-пакеты). IP-трафик восстанавливался, когда я отключал сетевой кабель от машины px4.4, и останавливался при подключении снова. После жесткой перезагрузки машина работает хорошо 7-8 часов, а затем снова зависает с той же ошибкой, но с другим процессом. В первый раз она вылетела с процессом RRDCached, во второй — с iptables-restore, а в третий раз с systemd-timesyn. Технические характеристики машины: материнская плата: MSI X99A Raider (используется встроенный Ethernet), процессор: Intel Core i7 6800K, ОП: 4 x 8GB DDR4 2400MHz, блок питания: Seasonic G-650 (650W). Похоже, можно подавить NMI watchdog, но это значит, что какой-то процесс будет случайным образом зависать. У кого-то возникали такие же проблемы? Есть ли какие-то советы, что я могу сделать/протестировать, чтобы решить эту проблему? Огромное спасибо за вашу помощь.

nseba Guest	#2 0 05.05.2017 16:04:00 Сначала я тестировал без пакетов nvidia, но в конце концов это оказалось решающим. Я настоятельно рекомендую это.

joshlukas Guest	#3 0 05.05.2017 15:53:00 Привет. Нет, я просто установил пакет микрокода Intel. Пакеты Nvidia имеют слишком много зависимостей, так что я не стал пытаться. Попробую сегодня.

manu

Guest

08.05.2017 10:14:00

сообщение NMI watchdog: ОШИБКА: сообщения о софт-локапе появляются, когда ЦП заблокирован более чем на 5 секунд в задаче. Стек ядра strace, добавленный к сообщению, должен указать, какая часть подсистемы заблокирована ([<ffffffff9710e5f4>] futex_wait_queue_me+0xc4/0x120 [<ffffffff9710f276>] futex_wait+0x116/0x270 [<ffffffff9711115d>] do_futex+0x2cd/0xb60 [<ffffffff97111a75>] SyS_futex+0x85/0x180 [<ffffffff978f4efb>] entry_SYSCALL_64_fastpath+0x1e/0xad [<ffffffffffffffff>] 0xffffffffffffffff часть). Обычно это сводится к неисправному оборудованию и поломке сетевых подключений, судя по моему опыту.

Carbon

Guest

27.07.2017 20:18:00

@joshlukas Привет, у меня сейчас такая же проблема, и я тоже использую Proxmox 5. Но когда я пытаюсь установить пакет "nvidia-driver", я получаю следующее сообщение об ошибке: root@Proxmox:~# apt-get install nvidia-driver Чтение списков пакетов... Готово Формирование дерева зависимостей Чтение состояния информации... Готово Некоторые пакеты не могут быть установлены. Это может означать, что вы запросили невозможную ситуацию или, если вы используете нестабильное распределение, что некоторые необходимые пакеты еще не были созданы или были перемещены из Incoming. Следующая информация может помочь в разрешении ситуации: Следующие пакеты имеют неудовлетворенные зависимости: nvidia-driver : Зависит: xserver-xorg-video-nvidia (= 340.102-1), но он не будет установлен Рекомендуется: libgl1-nvidia-glx-i386, но он не может быть установлен E: Невозможно исправить проблемы, у вас есть удерживаемые сломанные пакеты. Можешь помочь мне? Или кто-то другой?

vooze

Guest

27.07.2017 22:01:00

Не устанавливайте драйвер nvidia, в этом нет смысла для сервера. Вам просто нужно заблокировать nouveau (драйвер с открытым исходным кодом): - nano /etc/modprobe.d/blacklist-nouveau.conf - вставьте это: blacklist nouveau blacklist lbm-nouveau options nouveau modeset=0 alias nouveau off alias lbm-nouveau off - echo options nouveau modeset=0 | tee -a /etc/modprobe.d/nouveau-kms.conf - обновите initramfs: - update-initramfs -u - перезагрузите. Теперь проблема решена.

joshlukas

Guest

08.05.2017 09:28:00

Привет. Ну, похоже, теперь всё стабильно работает. Хотел бы узнать, в чем причина. Но, в любом случае, это работает. Я также не устанавливал пакет irqbalance. Только микродрайвер Intel и официальные драйверы nVidia. Спасибо.

Michael Haase

Guest

09.02.2017 13:49:00

Я получаю воспроизводимый сбой с этим сообщением об ошибке (после сообщений о жесткой блокировке) также на свежей установке Proxmox 4.4 (после обновления) при копировании 20Г.raw-диска из источника NFS на хранилище drbd9. Когда это происходит, загрузка процессора ресурса drbd достигает 100%. Так что @nseba: мне очень интересно узнать, используете ли вы drbd вообще.

nseba

Guest

10.02.2017 07:43:00

Привет, Майкл, мне жаль слышать, что у тебя тоже происходят эти сбои. Я вообще не использую drbd, но мне интересно, не может ли быть проблема с управлением дисками. Вот несколько тестов, которые я провел: 1. отключил как можно больше жестких дисков и поменял кабели. Моя текущая конфигурация — всего один жесткий диск, подключенный новым sata-кабелем. 2. удалил ZFS, так как он может требовать много ресурсов. 3. поиграл с несколькими переменными sysctl, указанными на https://forum.proxmox.com/threads/f...sts-during-high-io-on-host.30702/#post-159066 4. поиграл с watchdog https://pve.proxmox.com/wiki/High_Availability_Cluster_4.x#Hardware_Watchdogs (тестировал с nmi_watchdog=0, 1 или 2). Ни один из тестов не сработал для меня, но, возможно, пункт 3 будет интересен тебе для проверки.

nseba

Guest

#10

24.03.2017 13:01:00

После бесконечных тестирований и переустановок я смог настроить конфигурацию, которая работает уже больше 24 часов. Чтобы этого достичь, я установил несколько проприетарных пакетов на гипервизор. Вот пошаговая инструкция: - Добавьте репозитории contrib и non-free в Debian Код: nano /etc/apt/sources.list - обновите основную запись Debian до Код: deb http://ftp.fr.debian.org/debian jessie main contrib non-free - обновите кэш aptitude Код: apt-get update - установите необходимые пакеты (в моем случае это были драйвера для Intel и NVIDIA) Код: apt-get install intel-microcode irqbalance nvidia-settings nvidia-driver И не забудьте аккуратно перезагрузить систему, чтобы убедиться, что все изменения учтены (особенно, проверьте черный список модуля nouveau для NVIDIA, он может вызвать проблемы). Если мой сервер не упадет в эти выходные, я в понедельник закрою тему.

udo Guest	#11 0 24.03.2017 16:41:00 Привет, я не уверен, что irqbalance — это хорошая идея на хосте KVM. Удо

joshlukas

Guest

#12

05.05.2017 13:41:00

Привет. Почему это плохая идея? У меня аналогичная проблема: Код: kernel:[11563.649652] NMI watchdog: BUG: soft lockup - CPU#1 завис на 22с! [kworker/1:1:68] и Код: kernel:[12277.425302] NMI watchdog: BUG: soft lockup - CPU#1 завис на 23с! [(md-udevd):25026] Я использую proxmox 5.0 beta1 с последними обновлениями debian. Система полностью зависает. Иногда это занимает минуты, иногда система работает 20 часов, пока я не получу эту ошибку. В это время вся система зависает. Моя конфигурация оборудования: Intel Xeon E-3 1230v3 MSI Gaming 5 Board 4x 4GB Kingston 1333 DDR-3 RAM nVidia GT710 (для хоста - в первом слоте pcie 16x) nVidia GTX 970 (для KVM Win10 гостя - во втором слоте pcie 16x) 3x 3TB WD ecoGreen HDD для холодного хранения (raidz-1 zfs - все мои виртуальные машины хранятся в этом пуле) 1x 250 GB Evo 850 SSD (здесь находится установка хоста - ext4) Ошибка возникает даже если никакая ВМ не запущена, так что я думаю, это либо аппаратная проблема, либо это баг? Такие же проблемы были и с proxmox 4.4.

nseba Guest	#13 0 05.05.2017 15:44:00 Привет, я успешно запускаю свою систему уже несколько недель. Я пробовал без пакета irqbalance, и всё работает без проблем. Думаю, моя основная проблема заключалась в открытом драйвере nvidia "nouveau" (и, вероятно, также в intel-microcode). Joshlukas, ты установил официальный драйвер nvidia? Я был очень удивлён, но думаю, что стоит попробовать, даже с GT710, используемой в качестве хоста (у меня такая же…). Держи нас в курсе.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры