Я тестирую среду Proxmox 6 и испытываю трудности с настройкой iSCSI и мультипутей. У меня есть Dell Rc710 (4 встроенных 1 Гб сетевых интерфейса для ВМ и управления) и 2 10 Гб сетевых интерфейса для iSCSI. Эти два интерфейса я подключил к хранилищу Lenovo De2000h. Я создал систему мультипутей, и если я ее тестирую, то вижу, что она работает.
root@Mercurio:~# systemctl status -l multipath-tools.service – multipathd.service – контроллер устройства Multipath Device Mapper Загружен: loaded (/lib/systemd/system/multipathd.service; включен; предустановка поставщика: включена) Активен: активен (работает) с Вск 2019-08-25 02:36:11 -03; 22 секунды назад Процесс: 15173 ExecStartPre=/sbin/modprobe -a scsi_dh_alua scsi_dh_emc scsi_dh_rdac dm-multipath (код=завершён, статус=0/УСПЕШНО) Главный PID: 15180 (multipathd) Статус: "включен" Задачи: 7 Память: 11.1M CGroup: /system.slice/multipathd.service ––15180 /sbin/multipathd -d -s 25 авг 02:36:11 Mercurio systemd[1]: Запуск контроллера устройства Multipath Device Mapper... 25 авг 02:36:11 Mercurio multipathd[15180]: --------запуск-------- 25 авг 02:36:11 Mercurio multipathd[15180]: чтение /etc/multipath.conf 25 авг 02:36:11 Mercurio multipathd[15180]: проверка путей запускается 25 авг 02:36:11 Mercurio systemd[1]: Запущен контроллер устройства Multipath Device Mapper. /etc/multipath.conf по умолчанию { polling_interval 2 path_selector "round-robin 0" path_grouping_policy multibus uid_attribute ID_SERIAL rr_min_io 100 failback immediate no_path_retry queue user_friendly_names yes } blacklist_exceptions { wwid "3600a098000fd5a7c000000c05d5e0f25" } multipaths { multipath { wwid "3600a098000fd5a7c000000c05d5e0f25" alias mpath0 } root@Mercurio:~# ls -l /dev/mapper/ всего 0 crw------- 1 root root 10,236 25 авг 01:49 control lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data -> ../dm-4 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data_tdata -> ../dm-3 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data_tmeta -> ../dm-2 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-root -> ../dm-1 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-swap -> ../dm-0 * Устройство mpath0 отсутствует multipath -ll не показывает ничего root@Mercurio:~# multipath -v3 ===== список путей ===== uuid hcil dev dev_t pri dm_st chk_st vend/prod 3600a098000fd5a7c000000c05d5e0f25 7:0:0:1 sdd 8:48 50 undef undef LENOVO,DE 3600a098000fd5a7c000000c05d5e0f25 8:0:0:1 sde 8:64 10 undef undef LENOVO,DE 25 авг 02:51:18 | версия libdevmapper 1.02.155 (2018-12-18) 25 авг 02:51:18 | DM multipath драйвер ядра v1.13.0 25 авг 02:51:18 | sdd: свойство udev ID_WWN внесено в белый список 25 авг 02:51:18 | sdd: wwid 3600a098000fd5a7c000000c05d5e0f25 внесен в белый список 25 авг 02:51:18 | wwid 3600a098000fd5a7c000000c05d5e0f25 не найден в файле wwids, пропускаем sdd 25 авг 02:51:18 | sdd: сиротский путь, всего один путь 25 авг 02:51:18 | alua prioritizer refcount 2 25 авг 02:51:18 | sde: свойство udev ID_WWN внесено в белый список 25 авг 02:51:18 | sde: wwid 3600a098000fd5a7c000000c05d5e0f25 внесен в белый список 25 авг 02:51:18 | wwid 3600a098000fd5a7c000000c05d5e0f25 не найден в файле wwids, пропускаем sde 25 авг 02:51:18 | sde: сиротский путь, всего один путь 25 авг 02:51:18 | alua prioritizer refcount 1 25 авг 02:51:18 | выгрузка alua prioritizer 25 авг 02:51:18 | выгрузка const prioritizer 25 авг 02:51:18 | выгрузка rdac checker 25 авг 02:51:18 | выгрузка tur checker root@Mercurio:~# lsscsi [0:0:0:0] cd/dvd TEAC DVD-ROM DV-28SW R.2A /dev/sr0 [2:0:0:0] диск SanDisk Cruzer Glide 3.0 1.00 /dev/sda [4:0:0:0] диск iDRAC LCDRIVE 0323 /dev/sdc [5:0:0:0] cd/dvd iDRAC Virtual CD 0323 /dev/sr1 [5:0:0:1] диск iDRAC Virtual Floppy 0323 /dev/sdb [7:0:0:0] диск LENOVO DE_Series 0851 - [7:0:0:1] диск LENOVO DE_Series 0851 /dev/sdd [7:0:0:7] диск LENOVO Universal Xport 0851 - [8:0:0:0] диск LENOVO DE_Series 0851 - [8:0:0:1] диск LENOVO DE_Series 0851 /dev/sde [8:0:0:7] диск LENOVO Universal Xport 0851 - root@Mercurio:~# /lib/udev/scsi_id -g -u -d /dev/sdd 3600a098000fd5a7c000000c05d5e0f25 С уважением, Диего
root@Mercurio:~# systemctl status -l multipath-tools.service – multipathd.service – контроллер устройства Multipath Device Mapper Загружен: loaded (/lib/systemd/system/multipathd.service; включен; предустановка поставщика: включена) Активен: активен (работает) с Вск 2019-08-25 02:36:11 -03; 22 секунды назад Процесс: 15173 ExecStartPre=/sbin/modprobe -a scsi_dh_alua scsi_dh_emc scsi_dh_rdac dm-multipath (код=завершён, статус=0/УСПЕШНО) Главный PID: 15180 (multipathd) Статус: "включен" Задачи: 7 Память: 11.1M CGroup: /system.slice/multipathd.service ––15180 /sbin/multipathd -d -s 25 авг 02:36:11 Mercurio systemd[1]: Запуск контроллера устройства Multipath Device Mapper... 25 авг 02:36:11 Mercurio multipathd[15180]: --------запуск-------- 25 авг 02:36:11 Mercurio multipathd[15180]: чтение /etc/multipath.conf 25 авг 02:36:11 Mercurio multipathd[15180]: проверка путей запускается 25 авг 02:36:11 Mercurio systemd[1]: Запущен контроллер устройства Multipath Device Mapper. /etc/multipath.conf по умолчанию { polling_interval 2 path_selector "round-robin 0" path_grouping_policy multibus uid_attribute ID_SERIAL rr_min_io 100 failback immediate no_path_retry queue user_friendly_names yes } blacklist_exceptions { wwid "3600a098000fd5a7c000000c05d5e0f25" } multipaths { multipath { wwid "3600a098000fd5a7c000000c05d5e0f25" alias mpath0 } root@Mercurio:~# ls -l /dev/mapper/ всего 0 crw------- 1 root root 10,236 25 авг 01:49 control lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data -> ../dm-4 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data_tdata -> ../dm-3 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-data_tmeta -> ../dm-2 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-root -> ../dm-1 lrwxrwxrwx 1 root root 7 25 авг 01:49 pve-swap -> ../dm-0 * Устройство mpath0 отсутствует multipath -ll не показывает ничего root@Mercurio:~# multipath -v3 ===== список путей ===== uuid hcil dev dev_t pri dm_st chk_st vend/prod 3600a098000fd5a7c000000c05d5e0f25 7:0:0:1 sdd 8:48 50 undef undef LENOVO,DE 3600a098000fd5a7c000000c05d5e0f25 8:0:0:1 sde 8:64 10 undef undef LENOVO,DE 25 авг 02:51:18 | версия libdevmapper 1.02.155 (2018-12-18) 25 авг 02:51:18 | DM multipath драйвер ядра v1.13.0 25 авг 02:51:18 | sdd: свойство udev ID_WWN внесено в белый список 25 авг 02:51:18 | sdd: wwid 3600a098000fd5a7c000000c05d5e0f25 внесен в белый список 25 авг 02:51:18 | wwid 3600a098000fd5a7c000000c05d5e0f25 не найден в файле wwids, пропускаем sdd 25 авг 02:51:18 | sdd: сиротский путь, всего один путь 25 авг 02:51:18 | alua prioritizer refcount 2 25 авг 02:51:18 | sde: свойство udev ID_WWN внесено в белый список 25 авг 02:51:18 | sde: wwid 3600a098000fd5a7c000000c05d5e0f25 внесен в белый список 25 авг 02:51:18 | wwid 3600a098000fd5a7c000000c05d5e0f25 не найден в файле wwids, пропускаем sde 25 авг 02:51:18 | sde: сиротский путь, всего один путь 25 авг 02:51:18 | alua prioritizer refcount 1 25 авг 02:51:18 | выгрузка alua prioritizer 25 авг 02:51:18 | выгрузка const prioritizer 25 авг 02:51:18 | выгрузка rdac checker 25 авг 02:51:18 | выгрузка tur checker root@Mercurio:~# lsscsi [0:0:0:0] cd/dvd TEAC DVD-ROM DV-28SW R.2A /dev/sr0 [2:0:0:0] диск SanDisk Cruzer Glide 3.0 1.00 /dev/sda [4:0:0:0] диск iDRAC LCDRIVE 0323 /dev/sdc [5:0:0:0] cd/dvd iDRAC Virtual CD 0323 /dev/sr1 [5:0:0:1] диск iDRAC Virtual Floppy 0323 /dev/sdb [7:0:0:0] диск LENOVO DE_Series 0851 - [7:0:0:1] диск LENOVO DE_Series 0851 /dev/sdd [7:0:0:7] диск LENOVO Universal Xport 0851 - [8:0:0:0] диск LENOVO DE_Series 0851 - [8:0:0:1] диск LENOVO DE_Series 0851 /dev/sde [8:0:0:7] диск LENOVO Universal Xport 0851 - root@Mercurio:~# /lib/udev/scsi_id -g -u -d /dev/sdd 3600a098000fd5a7c000000c05d5e0f25 С уважением, Диего
