+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Хранилище NFS не в сети (500), Proxmox Виртуальная Среда

borahshadow

Guest

29.02.2016 08:34:00

Привет! У меня есть двухузловой кластер Proxmox VE версии 4.1. У меня настроено несколько хранилищ, указывающих на мой NAS с FreeNAS, который раздает их по NFS. Постоянно сталкиваюсь с проблемой, когда веб-интерфейс сообщает, что хранилище 'NAME' не онлайн (500). Но я точно знаю, что моё NFS-хранилище доступно. Во-первых, работающие виртуальные машины, которые хранятся на этом шаре, всё ещё отвечают. Во-вторых, я пробовал монтировать тот же NFS-шар с другого компьютера в сети — доступ к нему есть.

Я долго искал решение, но так и не нашёл ничего полезного. Единственная тема, которую удалось найти, это https://forum.proxmox.com/threads/nfs-shares-storage-is-not-online-500.11121/, но она особо не помогла, да и версии Proxmox VE там уже устарели.

Сейчас вывод команды rpcinfo -p 10.10.40.105 выглядит так:

program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
100000 4 7 111 portmapper
100000 3 7 111 portmapper
100000 2 7 111 portmapper
100005 1 udp 935 mountd
100005 3 udp 935 mountd
100005 1 tcp 935 mountd
100005 3 tcp 935 mountd
100003 2 udp 2049 nfs
100003 3 udp 2049 nfs
100003 2 tcp 2049 nfs
100003 3 tcp 2049 nfs
100024 1 udp 875 status
100024 1 tcp 875 status
100021 0 udp 897 nlockmgr
100021 0 tcp 667 nlockmgr
100021 1 udp 897 nlockmgr
100021 1 tcp 667 nlockmgr
100021 3 udp 897 nlockmgr
100021 3 tcp 667 nlockmgr
100021 4 udp 897 nlockmgr
100021 4 tcp 667 nlockmgr

Хотя я не уверен на 100%, но кажется, в прошлый раз, когда я копался с этой проблемой, rpcinfo выдавал тайм-ауты. Но, повторюсь, память может и подводить. Сейчас я вижу только то, что показано выше.

Кстати, проблема возникает нерегулярно. У меня настроено ночное резервное копирование: бывают ночи, когда оно проходит без ошибок, бывают, когда падает резервное копирование одной-двух ВМ с ошибкой о недоступности хранилища, а бывают ночи, когда не удаётся сохранить ни одну ВМ.

Через веб-интерфейс ошибка проявляется чаще всего.

Буду признателен за любую помощь!

Robin Vincent

Guest

01.04.2016 07:04:00

У меня такая же проблема. Proxmox версии 4.1 в кластере из трёх узлов. Монтирование к FreeNAS-9.10 по NFS. NFS-монты, по сути, не бывают офлайн (я даже не уверен, что они когда-либо действительно отключаются), так как я могу просмотреть содержимое с помощью CLI, но в веб-интерфейсе они отображаются как офлайн. Также ВМ, смонтированные на этом шаре и с других узлов, продолжают работать. В syslog регулярно появляются ошибки.

root@pve3:/etc#
rpcinfo -p 10.x.x.20
program vers proto port service
100000 4 tcp 111 portmapper
100000 3 tcp 111 portmapper
100000 2 tcp 111 portmapper
100000 4 udp 111 portmapper
100000 3 udp 111 portmapper
100000 2 udp 111 portmapper
100000 4 7 111 portmapper
100000 3 7 111 portmapper
100000 2 7 111 portmapper
100005 1 udp 990 mountd
100005 3 udp 990 mountd
100005 1 tcp 990 mountd
100005 3 tcp 990 mountd
100003 2 tcp 2049 nfs
100003 3 tcp 2049 nfs
100024 1 udp 634 status
100024 1 tcp 634 status
100021 0 udp 622 nlockmgr
100021 0 tcp 679 nlockmgr
100021 1 udp 622 nlockmgr
100021 1 tcp 679 nlockmgr
100021 3 udp 622 nlockmgr
100021 3 tcp 679 nlockmgr
100021 4 udp 622 nlockmgr
100021 4 tcp 679 nlockmgr

storage.cfg
nfs:
pveVolume1
path /mnt/pve/pveVolume1
server 10.x.x.20
export /mnt/pveVolume1
content images,rootdir,backup,iso,vztmpl
maxfiles 10
options vers=3

Ещё один симптом, который, как я предполагаю, связан с этим: когда в системе начинают появляться ошибки, показатели ожидания резко растут, и машину приходится перезагружать, хотя, как я уже говорил, я могу спокойно просматривать и записывать на шаре через CLI, пока всё это происходит.

Буду очень благодарен за любую помощь.

f4242

Guest

17.05.2017 15:37:00

Привет, у меня такая же проблема с похожим выводом rpcinfo. Proxmox говорит, что хранилище не онлайн, но я могу просматривать общий ресурс через командную строку в /mnt/pve/mount.point. Проблема возникает время от времени: иногда работает неделю, а потом в один день пишет, что хранилище не онлайн... Моё хранилище тоже размещено на FreeNAS 9.10.

manu Guest	#4 0 18.05.2017 10:14:00 PVE использует следующую команду, чтобы проверить, в сети ли NFS-сервер: /sbin/showmount --no-headers --exports <my_server> Эта команда правильно отрабатывает за менее чем две секунды, когда ваш сервер помечен как оффлайн?

f4242 Guest	#5 0 18.05.2017 15:09:00 Сегодня всё работает (я ничего не делал с вчерашнего дня...). В следующий раз попробую команду. Спасибо!

borahshadow

Guest

24.05.2017 18:46:00

Прошло уже какое-то время с тех пор, как я впервые сообщил об этой проблеме. Она у меня до сих пор есть, но я просто обходил её, когда нужно было. Всё ещё выдает ошибку "Storage <name of storage> is not online 500". Я выполнил команду, которую вы предложили, и она вернула список экспортов на моём NFS сервере (FreeNAS). Экспорт VM_Storage — это тот, что настроен в конфигурации Proxmox. Остальные два экспорта смонтированы напрямую на нескольких виртуальных машинах и не подключены внутри Proxmox.

Код:
root@host:~# /sbin/showmount --no-headers --exports <IP Address of NFS server>
/mnt/path/data <IP Address restriction>
/mnt/path/VM_Storage (everyone)
/mnt/path/media (everyone)

Также я проверил доступность RPC bind на сервере с помощью команды nmap -p 111 -sU <address of NFS server>, и она выдала:

Код:
nmap -p 111 -sU <IP Address>

Starting Nmap 6.47 ( ) at 2017-05-24 10:30 MDT
Nmap scan report for <IP Address>
Host is up (0.00023s latency).
PORT STATE SERVICE
111/udp open rpcbind
MAC Address: 00:25:90:49:E0:2D (Super Micro Computer)

Nmap done: 1 IP address (1 host up) scanned in 13.55 seconds

LUCF3R Guest	#7 0 25.07.2017 10:39:00 Привет, ребята! Эта проблема уже решена? У меня такая же штука на втором узле, хотя первый работает отлично! Кто-нибудь может помочь?

RedneckBob Guest	#8 0 30.07.2017 21:36:00 В конце концов я отказался от FreeNAS из-за нестабильной работы ZFS send/receive и решил использовать Proxmox в качестве сервера хранения. Я использую хранилище на базе ZFS с zraid1 или zraid2, что позволяет использовать сервер и для хранения снимков, и для экспорта NFS-монтирований и SMB-расшариваний. Все машины у меня на одинаковой версии и с одинаковыми патчами. Пока никаких проблем.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры