Когда я увидел, что поддержка установки iSCSI с официального ISO вообще не планируется, я начал искать способы это реализовать. Я нашел обходной путь с официальным ISO PVE 7.1 и хочу поделиться, возможно, это кому-то поможет. Будет объяснен только обходной путь с iSCSI, я предполагаю, что вы знаете, как создать целевой ресурс на вашем хранилище и как настроить прошивку сетевого адаптера для загрузки. Этот туториал не использует iPXE или что-то подобное, поэтому это можно сделать только с CNA адаптером, поддерживающим iSCSI загрузку. Для справки, я использую Intel X520-DA2 CNA для этого туториала, который использует драйвер ixgbe, включенный в ядро PVE.
1. Создайте LUN и целевой ресурс на вашем хранилище.
2. Настройте IP/целевой адрес в прошивке CNA для загрузки.
3. Запишите ISO с [этой страницы](URL) на USB-накопитель и загрузите гипервизор с USB. (Лично я загружаюсь в режиме MBR, потому что у меня проблемы с UEFI с моим CNA).
4. Выберите второй вариант (Установить в режиме отладки).
5. Появляется первая консоль, в этот момент ресурсов нет, мы не можем работать здесь, поэтому вы можете нажать Ctrl+D, чтобы продолжить.
6. Появляется вторая консоль, теперь ресурсы смонтированы, и сеть доступна. Поехали!
7. В моем случае я использую generic SFP+ трансиверы, которые не поддерживаются модулем ixgbe, поэтому давайте скажем ему, что можно использовать эти. Если ваши SFP модули поддерживаются или вы не используете Intel 10Gb адаптер, вы можете пропустить этот шаг.
Bash: nano /etc/modprobe.d/ixgbe.conf
Добавьте на первой строке:
Code: options ixgbe allow_unsupported_sfp=1
Нажмите Ctrl+x, чтобы сохранить и закрыть.
Теперь перезапустите модуль ixgbe и ваши интерфейсы появятся:
Bash: rmmod ixgbe && modprobe ixgbe
Вы можете увидеть их с:
Bash: ip a
8. Настройте ваш интерфейс и IP-адрес.
Мой интерфейс - enp43s0f0, замените его своим. Сначала включите соединение:
Bash: ip link set enp43s0f0 up
Затем назначьте IP-адрес в той же подсети, что и ваш целевой:
Замените IP/CIDR своим.
Bash: ip addr add 192.168.100.101/24 dev enp43s0f0
Вы можете подтвердить, что все в порядке, с:
Code: ip a
Для проверки можете попробовать пинговать ваш целевой хост.
9. Установите open-iscsi в initramfs.
ВАЖНО: Мы находимся в initramfs установщика, поэтому все задачи, которые вы здесь выполняете, не будут сохранены и будут удалены, если вы выключите сервер или отмените установку.
Пакет open-iscsi на самом деле не установлен, но он включен для установки новой системы в /cdrom/debian/proxmox/packages/.
Если вы попытаетесь установить его сейчас, dpkg пожалуется, что отсутствуют две зависимости. Итак, давайте сначала установим их из той же директории.
Bash: dpkg -i /cdrom/debian/proxmox/packages/libisns0_0.100-3_adm64.deb
dpkg -i /cdrom/debian/proxmox/packages/libopeniscsiusr_2.1.3-5_adm64.deb
dpkg -i /cdrom/debian/proxmox/packages/open-iscsi_2.1.3-5_adm64.deb
Установка open-iscsi никогда не завершится, но это не важно, вы можете отменить ее с Ctrl+c.
10. Подключитесь к вашему целевому ресурсу.
Теперь мы можем использовать iscsistart для подключения к целевому ресурсу! Замените здесь <IQN> идентификатором вашего целевого ресурса, а <IP> адресом целевого хоста.
Bash: iscsistart -i initiator_1 -t <IQN> -g N -a <IP>
Если вы правильно настроили сетевой адаптер с правильным IP-адресом, ваш целевой ресурс теперь подключен и доступен установщику в качестве блочного устройства. Если целевой ресурс подключен, нам больше не нужна эта консоль. Вы можете закрыть ее с Ctrl+d.
11. Вернитесь к графическому интерфейсу.
Вы можете принять EULA и настроить жесткий диск и файловую систему.
12. Настройте часовой пояс/раскладку клавиатуры и ваш основной сетевой интерфейс (не используйте тот, который вы использовали для подключения к целевому ресурсу).
После этого не забудьте снять флажок автоматического перезапуска после установки, прежде чем нажать кнопку установки.
13. После завершения установки нажмите перезагрузку, и появится консоль. Нам нужно выполнить несколько небольших шагов здесь.
Нам нужно chroot внутри свежей системы.
Bash: mount /dev/pve/root /mnt
mount -o bind /dev /mnt/dev
mount -o bind /proc /mnt/proc
mount -o bind /sys /mnt/sys
Наконец, chroot внутрь /mnt:
Bash: chroot /mnt /bin/bash
14. Настройка списка источников apt.
Если у вас нет ключа подписки, вы можете удалить корпоративный репозиторий.
Bash: rm /etc/apt/sources.list.d/pve-entreprise.list
И добавьте no-subscription в sources.list:
Bash: nano /etc/apt/sources.list
Добавьте в конец:
Code: # PVE repository
deb bullseye pve-no-subscription
Сохраните и закройте с Ctrl+x.
Обновите списки пакетов:
Для следующих шагов вам нужен доступ к интернету, вам нужно настроить один из ваших интерфейсов вручную, если у вас нет DHCP.
Bash: apt update
ВНИМАНИЕ: Не пытайтесь выполнить apt upgrade, он не удастся, потому что реальная система не работает. Дождитесь перезагрузки, чтобы выполнить ее.
15. Настройка grub.
Этот шаг для unsupported SFP модулей с ixgbe, вы можете пропустить его, если вас это не касается.
Bash: nano /etc/default/grub
Найдите строку GRUB_CMDLINE_LINUX="" и измените ее следующим образом:
Code: GRUB_CMDLINE_LINUX="ixgbe.allow_unsupported_sfp=1"
Сохраните и закройте с Ctrl+x.
16. Настройка iSCSI загрузки.
Модуль iscsi_ibft можно использовать при загрузке для получения настроек целевого ресурса из прошивки CNA автоматически, нам нужно сказать ему это:
Bash: nano /etc/iscsi/iscsi.initramfs
Добавьте новую строку:
Code: ISCSI_AUTO=true
Сохраните и закройте с Ctrl+x.
17. Проблема с ядром 5.13.
На момент написания этого туториала, по неизвестным причинам, ядро 5.13 не работало с моим iSCSI адаптером. Моя настройка не загружалась через iSCSI с ядром, поэтому нам нужно обновить его:
Bash: apt install pve-kernel-5.15
Обновите grub и initramfs:
Bash: update-grub && update-initramfs -u -k all
Теперь вы можете выйти из chroot, набрав exit, и перезагрузиться с Ctrl+d.
Теперь настройте ваш iSCSI адаптер в качестве устройства загрузки и наслаждайтесь вашей свежей и чистой системой без диска. Не забудьте загрузиться с 5.15 ядра, если оно не установлено как стандартное.
Надеюсь, этот туториал поможет некоторым людям.
1. Создайте LUN и целевой ресурс на вашем хранилище.
2. Настройте IP/целевой адрес в прошивке CNA для загрузки.
3. Запишите ISO с [этой страницы](URL) на USB-накопитель и загрузите гипервизор с USB. (Лично я загружаюсь в режиме MBR, потому что у меня проблемы с UEFI с моим CNA).
4. Выберите второй вариант (Установить в режиме отладки).
5. Появляется первая консоль, в этот момент ресурсов нет, мы не можем работать здесь, поэтому вы можете нажать Ctrl+D, чтобы продолжить.
6. Появляется вторая консоль, теперь ресурсы смонтированы, и сеть доступна. Поехали!
7. В моем случае я использую generic SFP+ трансиверы, которые не поддерживаются модулем ixgbe, поэтому давайте скажем ему, что можно использовать эти. Если ваши SFP модули поддерживаются или вы не используете Intel 10Gb адаптер, вы можете пропустить этот шаг.
Bash: nano /etc/modprobe.d/ixgbe.conf
Добавьте на первой строке:
Code: options ixgbe allow_unsupported_sfp=1
Нажмите Ctrl+x, чтобы сохранить и закрыть.
Теперь перезапустите модуль ixgbe и ваши интерфейсы появятся:
Bash: rmmod ixgbe && modprobe ixgbe
Вы можете увидеть их с:
Bash: ip a
8. Настройте ваш интерфейс и IP-адрес.
Мой интерфейс - enp43s0f0, замените его своим. Сначала включите соединение:
Bash: ip link set enp43s0f0 up
Затем назначьте IP-адрес в той же подсети, что и ваш целевой:
Замените IP/CIDR своим.
Bash: ip addr add 192.168.100.101/24 dev enp43s0f0
Вы можете подтвердить, что все в порядке, с:
Code: ip a
Для проверки можете попробовать пинговать ваш целевой хост.
9. Установите open-iscsi в initramfs.
ВАЖНО: Мы находимся в initramfs установщика, поэтому все задачи, которые вы здесь выполняете, не будут сохранены и будут удалены, если вы выключите сервер или отмените установку.
Пакет open-iscsi на самом деле не установлен, но он включен для установки новой системы в /cdrom/debian/proxmox/packages/.
Если вы попытаетесь установить его сейчас, dpkg пожалуется, что отсутствуют две зависимости. Итак, давайте сначала установим их из той же директории.
Bash: dpkg -i /cdrom/debian/proxmox/packages/libisns0_0.100-3_adm64.deb
dpkg -i /cdrom/debian/proxmox/packages/libopeniscsiusr_2.1.3-5_adm64.deb
dpkg -i /cdrom/debian/proxmox/packages/open-iscsi_2.1.3-5_adm64.deb
Установка open-iscsi никогда не завершится, но это не важно, вы можете отменить ее с Ctrl+c.
10. Подключитесь к вашему целевому ресурсу.
Теперь мы можем использовать iscsistart для подключения к целевому ресурсу! Замените здесь <IQN> идентификатором вашего целевого ресурса, а <IP> адресом целевого хоста.
Bash: iscsistart -i initiator_1 -t <IQN> -g N -a <IP>
Если вы правильно настроили сетевой адаптер с правильным IP-адресом, ваш целевой ресурс теперь подключен и доступен установщику в качестве блочного устройства. Если целевой ресурс подключен, нам больше не нужна эта консоль. Вы можете закрыть ее с Ctrl+d.
11. Вернитесь к графическому интерфейсу.
Вы можете принять EULA и настроить жесткий диск и файловую систему.
12. Настройте часовой пояс/раскладку клавиатуры и ваш основной сетевой интерфейс (не используйте тот, который вы использовали для подключения к целевому ресурсу).
После этого не забудьте снять флажок автоматического перезапуска после установки, прежде чем нажать кнопку установки.
13. После завершения установки нажмите перезагрузку, и появится консоль. Нам нужно выполнить несколько небольших шагов здесь.
Нам нужно chroot внутри свежей системы.
Bash: mount /dev/pve/root /mnt
mount -o bind /dev /mnt/dev
mount -o bind /proc /mnt/proc
mount -o bind /sys /mnt/sys
Наконец, chroot внутрь /mnt:
Bash: chroot /mnt /bin/bash
14. Настройка списка источников apt.
Если у вас нет ключа подписки, вы можете удалить корпоративный репозиторий.
Bash: rm /etc/apt/sources.list.d/pve-entreprise.list
И добавьте no-subscription в sources.list:
Bash: nano /etc/apt/sources.list
Добавьте в конец:
Code: # PVE repository
deb bullseye pve-no-subscription
Сохраните и закройте с Ctrl+x.
Обновите списки пакетов:
Для следующих шагов вам нужен доступ к интернету, вам нужно настроить один из ваших интерфейсов вручную, если у вас нет DHCP.
Bash: apt update
ВНИМАНИЕ: Не пытайтесь выполнить apt upgrade, он не удастся, потому что реальная система не работает. Дождитесь перезагрузки, чтобы выполнить ее.
15. Настройка grub.
Этот шаг для unsupported SFP модулей с ixgbe, вы можете пропустить его, если вас это не касается.
Bash: nano /etc/default/grub
Найдите строку GRUB_CMDLINE_LINUX="" и измените ее следующим образом:
Code: GRUB_CMDLINE_LINUX="ixgbe.allow_unsupported_sfp=1"
Сохраните и закройте с Ctrl+x.
16. Настройка iSCSI загрузки.
Модуль iscsi_ibft можно использовать при загрузке для получения настроек целевого ресурса из прошивки CNA автоматически, нам нужно сказать ему это:
Bash: nano /etc/iscsi/iscsi.initramfs
Добавьте новую строку:
Code: ISCSI_AUTO=true
Сохраните и закройте с Ctrl+x.
17. Проблема с ядром 5.13.
На момент написания этого туториала, по неизвестным причинам, ядро 5.13 не работало с моим iSCSI адаптером. Моя настройка не загружалась через iSCSI с ядром, поэтому нам нужно обновить его:
Bash: apt install pve-kernel-5.15
Обновите grub и initramfs:
Bash: update-grub && update-initramfs -u -k all
Теперь вы можете выйти из chroot, набрав exit, и перезагрузиться с Ctrl+d.
Теперь настройте ваш iSCSI адаптер в качестве устройства загрузки и наслаждайтесь вашей свежей и чистой системой без диска. Не забудьте загрузиться с 5.15 ядра, если оно не установлено как стандартное.
Надеюсь, этот туториал поможет некоторым людям.

Если я пытаюсь смонтировать его вручную, он не может прочитать superblock pve-root (та же проблема, что и в моей другой теме: )