+7 (495) 320-70-49
- Назад
- Телефоны
- +7 (495) 320-70-49
- Заказать звонок
info@proxmox.su
Москва, Бакунинская улица, 69с1
Пн-Пт: 09-00 до 18-00
Сб-Вс: выходной

Проблемы с кластером iSCSI, Proxmox Виртуальная Среда

troycarpenter

Guest

14.06.2016 17:11:00

У меня есть кластер, который изначально был настроен на 5 узлов. Каждый узел имеет управляемый интерфейс, а также приватную сеть для связи corosync. Со временем я добавил в кластер ещё три узла, и вроде всё работает. Сейчас я настроил iSCSI в дата-центре, как описано в разных источниках, и настроил на этом LVM.

Что я заметил: первые пять узлов кластера без проблем работают с общим хранилищем. А вот странность — три новых узла испытывают всевозможные проблемы с доступом к общему хранилищу. На одном из новых узлов я видел такие ошибки:

[431436.828980] blk_update_request: I/O error, dev dm-0, sector 4294967168
[431436.835805] blk_update_request: I/O error, dev dm-0, sector 4294967280
[431436.842690] blk_update_request: I/O error, dev dm-0, sector 0
[431436.848771] blk_update_request: I/O error, dev dm-0, sector 8

А на другом новом узле (это самая частая ошибка, которую я вижу) вот что появляется:

[3284852.201673] connection1:0: detected conn error (1020)

Как я уже сказал, на старых узлах проблем нет, они работают с iSCSI отлично, а вот три новых, добавленных позже, постоянно глючат. Есть идеи?

troycarpenter

Guest

06.07.2016 21:59:00

Извини, последние три недели был в отпуске. Я не использую lxc на iscsi lvm, у меня всё работает на kvm. Пока что я обнаружил, что на трёх новых узлах был одинаковый iSCSI initiator ID. Я их изменил, теперь все уникальны (на остальных узлах ID были уникальными изначально), и, похоже, это решило проблемы с подключением. Но у одного узла всё ещё возникают ошибки с секторами. ОБНОВЛЕНИЕ: Я сделал все iSCSI initiator уникальными и перезагрузил проблемные узлы. Теперь, похоже, все узлы работают с iSCSI без проблем.

RobFantini Guest	#3 0 06.07.2016 22:10:00 Как проверить 'iSCSI initiator ID'?

troycarpenter Guest	#4 0 06.07.2016 22:16:00 cat /etc/iscsi/initiatorname.iscsi Думаю, правильнее назвать это InitiatorName. Надо было внимательнее смотреть логи FreeNAS... они всё время мне подсказывали, в чем была проблема.

RobFantini Guest	#5 0 06.07.2016 23:16:00 Итак, InitiatorName= должен быть уникальным на каждом узле. Есть идеи, почему появились дубликаты?

troycarpenter

Guest

06.07.2016 23:23:00

Думаю, это потому, что новые узлы были созданы с образа диска одного из других узлов. Вот почему у них были одинаковые имена... Придется добавить это в список того, что нужно менять при добавлении нового узла в кластер.

mir Guest	#7 0 06.07.2016 23:23:00 Клонированная виртуальная машина?

troycarpenter Guest	#8 0 06.07.2016 23:50:00 Нет, это образ клонированного хоста.

mir Guest	#9 0 07.07.2016 00:24:00 Здесь ключевое слово — клонированный. У каждого клона будет одинаковое содержимое в /etc/iscsi/initiatorname.iscsi

troycarpenter Guest	#10 0 07.07.2016 00:53:00 Конечно. Это один из файлов, который мне нужно добавить в заметки, чтобы не забыть его изменить. Раньше я его пропустил, потому что не пользовался iSCSI до сих пор.

mir Guest	#11 0 07.07.2016 01:39:00 initiatorname для iSCSI выполняет ту же функцию, что и MAC-адрес для Ethernet.

RobFantini Guest	#12 0 07.07.2016 03:20:00 Это хорошая аналогия, Mir. Позже добавлю это в вики. Отличное объяснение.

Читают тему

Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры