Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Виртуальная Среда
    Установка PVE/PBS с ISO на Hetzner без KVM (Туториал)

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Установка PVE/PBS с ISO на Hetzner без KVM (Туториал), Proxmox Виртуальная Среда
     
    MaLe
    Guest
    #1
    0
    13.08.2021 19:33:00
    Привет, ребята! Я новенький на форуме, это мой первый пост. Хочу поделиться своей настройкой для установки PVE/PBS из ISO на выделенные серверы Hetzner без необходимости подключения KVM-консоли. Знаю, уже есть некоторые руководства, но многие из них неполные или не работают.

    Коротко о преимуществах: установка из ISO позволяет, например, настроить ZFS RAID на загрузочном диске. Многие серверы Hetzner имеют только два диска. При установке из Debian 10 можно использовать только Linux RAID с помощью Hetzner InstallImage, но, на мой взгляд, встроенный ZFS мощнее. С другой стороны, с этой настройкой можно установить PVE7/PBS2 без предварительной установки Debian 10, а затем выполнить dist-upgrade до Debian 11 и, наконец, установить PVE7/PBS2. Лично мне не нравится такой способ установки и предпочитаю "чистый" способ с ISO. Поэтому я использую эту настройку.

    Пример ниже описывает процедуру для PVE7 на машине Hetzner AX. Для других версий замените имя ISO-файла, чтобы соответствовать продукту, который хотите установить. Я тестировал PBS2, но должно работать и с PVE6 и PBS1.

    Установка PVE7:

    - загрузите сервер в систему восстановления Hetzner (на Robot console активируйте rescue + перезагрузите сервер)
    - подключитесь по SSH к системе восстановления
    - если сервер уже использовался, я бы рекомендовал начать с чистого листа и удалить все диски
    - скачайте ISO PVE7 в систему восстановления:
    ```
    wget http://download.proxmox.com/iso/proxmox-ve_7.0-1.iso
    ```
    - сразу после подключения к системе восстановления отобразится информация о подключенных дисках и их названиях устройств.
    - замените названия устройств в примере ниже на названия устройств в вашей системе. У меня подключены два NVMe-диска.
    - запустите VM, которая загружается с ISO-файла PVE и отображает ее на физические диски вашего сервера:
    ```
    qemu-system-x86_64 -enable-kvm -smp 4 -m 4096 -boot d -cdrom ./proxmox-ve_7.0-1.iso -drive file=/dev/nvme0n1,format=raw,media=disk,if=virtio -drive file=/dev/nvme1n1,format=raw,media=disk,if=virtio -vnc 127.0.0.1:1
    ```
    - по соображениям безопасности вывод VNC VM установлен на локальный IP. Поэтому вам нужно установить SSH-туннель для доступа к машине.
    - если используете Putty, перейдите в Connection->SSH->Tunnels и добавьте туннель с исходным портом 9501 и назначением 127.0.0.1:5901
    - теперь вы можете подключиться с помощью второго сеанса SSH. После установления запустите свой VNC-клиент по адресу 127.0.0.1:9501
    - теперь вы увидите экран настройки PVE. Выполните все настройки (например, создайте ZFS RAID1) и завершите процедуру настройки
    - после завершения установки VM снова загрузится в настройку PVE
    - нажмите ctrl+c в первом сеансе SSH и завершите работу VM (можно сделать без повреждений)
    - если попытаться запустить физический сервер в этот момент, он будет недоступен. Необходимо выполнить дополнительный шаг.
    - поэтому запустите VM во второй раз, но без загрузки ISO-образа:
    ```
    qemu-system-x86_64 -enable-kvm -smp 4 -m 4096 -drive file=/dev/nvme0n1,format=raw,media=disk,if=virtio -drive file=/dev/nvme1n1,format=raw,media=disk,if=virtio -vnc 127.0.0.1:1
    ```
    - только что установленный PVE впервые загружается внутри VM
    - из-за того, что сетевые настройки отличаются от физической машины, они в настоящее время не работают, поэтому нам нужно их отредактировать
    - в сеансе VNC войдите в PVE, используя желаемый пароль, установленный во время установки
    - откройте файл конфигурации сети:
    ```
    nano /etc/network/interfaces
    ```
    - для настройки маршрутизированной сети следует удалить мост vmbr0 по умолчанию (я думаю, что большинство используют PVE на Hetzner с маршрутизированной настройкой и подсетями)
    - также название сетевого адаптера VM отличается от названия физической машины. В моем случае адаптер назывался ens3, но его нужно называть enp41s0
    - определите правильное название адаптера и отредактируйте конфигурацию, чтобы она выглядела примерно так:
    ```
    auto lo
    iface lo inet loopback

    auto enp41s0
    iface enp41s0 inet static
           address x.x.x.x/xx
           gateway x.x.x.x
    ```
    - возможно, будет хорошей идеей добавить хотя бы один мост (например: vmbr0) для сети VM сразу.
    - сохраните конфигурацию сети, выполните чистую остановку системы через оболочку VNC и дождитесь остановки VM
    - перезагрузите физический сервер из оболочки восстановления
    - через некоторое время вы должны иметь возможность получить доступ к веб-GUI по публичному IP (https://x.x.x.x:8006) и завершить настройку
    - не забудьте подписаться на фантастические продукты Proxmox, чтобы воспользоваться преимуществами стабильных корпоративных репозиториев.

    Если вы думаете, что что-то можно оптимизировать или сделать лучше, не стесняйтесь сообщить мне свои предложения. Также дайте мне знать, если вас интересует более подробный просмотр моей конфигурации сети. Я использую маршрутизированную настройку с плавающей подсеткой и внутренними + внешними сетями. Во внешней сети я распределяю публичные IP через DHCP для VM, которым нужен прямой публичный доступ. Кстати, это часть полноценного облачного рабочего пространства для малых предприятий, основанного на Proxmox и силе нескольких других продуктов Linux. В моем случае требуется только одна коммерческая лицензия для Windows Terminal Server, на котором работает приложение. Все остальное, такое как контроллер домена, файловый сервер, межсетевой экран и VPN, построено на основе открытого исходного кода и простое в администрировании. Так что если кому-то нужно создать что-то подобное, не стесняйтесь обращаться ко мне. Я с удовольствием поделюсь своей работой.

    С наилучшими пожеланиями,
    Martin
     
     
     
    chrcoluk
    Guest
    #2
    0
    13.08.2021 22:58:00
    Я тоже так делаю, чтобы Proxmox заработал в дата-центрах: устанавливаю из rescue OS в Qemu. Мой совет касается сетевых интерфейсов. Старая схема именования имеет свою логику, понимаешь, первый сетевой адаптер всегда будет eth0, второй eth1 и так далее. Поэтому я обычно добавляю net.ifnames=0 biosdevname=0 в командную строку ядра, а затем меняю название сетевого устройства в файле интерфейса (обычно eth0). Ты можешь избежать второй загрузки, сделать отладочную установку и, когда выбираешь перезагрузку, оно просто вернет тебя в оболочку. Ты можешь импортировать пул, внести любые изменения, а потом экспортировать его, когда закончишь.
     
     
     
    MaLe
    Guest
    #3
    0
    14.08.2021 11:02:00
    Большое спасибо за твои предложения. Я пробовал старую схему именования в одной из первых попыток, но по какой-то причине у меня не получилось. Так что если у тебя это работает, то я уверен, что это была моя ошибка.
     
     
     
    iwik
    Guest
    #4
    0
    22.09.2022 12:27:00
    Спасибо за эту идею, сработало очень хорошо. Просто игрался с net.ifnames=0 biosdevname=0, KVM требовалось для подключения, и в моём случае тоже. Но я очень рад, что всё работает в этой классной конфигурации с zfs.
     
     
     
    MaLe
    Guest
    #5
    0
    04.10.2022 13:57:00
    Привет, спасибо за ответ. Небольшое обновление к моей инструкции в первом сообщении: пару недель назад у меня возникли проблемы во время процедуры установки — иногда установщик зависал и требовал перезагрузки при выборе настройки диска. После некоторых тестов я выяснил, как исправить эту проблему и изменил команду qemu с другим типом машины: qemu-system-x86_64 -machine pc-q35-5.2 -enable-kvm -smp 4 -m 4096 -boot d -cdrom ./proxmox-ve_7.0-1.iso -drive file=/dev/nvme0n1,format=raw,media=disk,if=virtio -drive file=/dev/nvme1n1,format=raw,media=disk,if=virtio -vnc 127.0.0.1:1. У меня это работает отлично.
     
     
     
    ValkraS
    Guest
    #6
    0
    13.10.2022 08:11:00
    Такая же проблема с proxmox-ve_7.2-1.iso. Решил эту проблему, установив с proxmox-ve_7.1-2.iso вместо этого.
     
     
     
    Skyrider
    Guest
    #7
    0
    21.10.2022 15:40:00
    У меня та же проблема, даже если я использую версию 7.1, установка все равно случайно вылетает.
     
     
     
    ValkraS
    Guest
    #8
    0
    22.10.2022 19:24:00
    Как и упоминал @MaLe, Bash: qemu-system-x86_64 -machine pc-q35-5.2 -enable-kvm -smp 4 -m 4096 -boot d -cdrom ./proxmox-ve_7.0-1.iso -drive file=/dev/nvme0n1,format=raw,media=disk,if=virtio -drive file=/dev/nvme1n1,format=raw,media=disk,if=virtio. Думаю, сбои связаны с -hda, -hdb. Попробуй вместо этого использовать -machine и -drive.
     
     
     
    Skyrider
    Guest
    #9
    0
    22.10.2022 19:35:00
    Спасибо, но я всё-таки воспользовался его предложением. Результат тот же.
     
     
     
    Jpppb
    Guest
    #10
    0
    01.05.2023 21:02:00
    Эти проблемы со стабильностью только при установке?
     
     
     
    MaLe
    Guest
    #11
    0
    02.05.2023 09:33:00
    Да, могу подтвердить наверняка. У нас работает больше 30 машин с PVE на серверах Hetzner (AMD и Intel серии) без проблем уже около 3 лет. Все эти машины были установлены этим способом. Кстати, сейчас на AMD машинах во время настройки проблем не наблюдается.
     
     
     
    Jpppb
    Guest
    #12
    0
    02.05.2023 23:22:00
    Во-первых, огромное спасибо! Я чуть с ума не сошёл из-за этого, но наконец-то могу подтвердить, что твой способ установки работает. Хотя была небольшая проблема с vnc во втором запуске qemu (без cd). Решение, предоставленное GitHub; Ariadata/proxmox-hetzner для этого второго запуска, сработало в моем случае (ssh вместо vnc, но думаю, я использовал неправильный пароль, я уже 13 часов этим занимаюсь, хаха). Финальный вопрос: я не могу подключиться, не могу пинговать ни один публичный IP или домен (так что, вероятно, проблема с dns, как я понял из форумов). Не мог бы ты поделиться своей (анонимизированной) конфигурацией pve-host? Я тестировал конфигурацию без bridge, как описано выше, и как упоминалось в ссылке на GitHub с bridge, но не могу добиться подключения. Большое спасибо за ту помощь, которую ты уже оказал.

    P.S. Перенесу это в отдельный пост или перенесу на подходящий форум, если попросят. Не хотел предоставлять слишком много информации и захватывать тему.
     
     
     
    MaLe
    Guest
    #13
    0
    03.05.2023 09:42:00
    У меня нет никаких вопросов, думаю, мы всё ещё в теме этого обсуждения. У меня есть различные настройки сети для Hetzner. Эта конфигурация не требует дополнительного одиночного IP или IP-сети. Она направляет исходящие соединения с виртуальных машин через IP хоста. С помощью переадресации портов виртуальные машины можно сделать доступными из интернета. Пожалуйста, убедитесь, что вы защитили это с помощью некоторых правил брандмауэра PVE. Сначала нужно определить альтернативное имя сетевого адаптера в консоли восстановления Hetzner, потому что во время установки PVE использовалось имя адаптера среды QEMU/KVM. Можно использовать `ip -a`. В моём случае это `enp35s0`. Затем активируйте переадресацию IP. В `/etc/sysctl.conf` установите `net.ipv4.ip_forward=1` и активируйте её с помощью `sysctl -p`. Наконец, это пример `/etc/network/interfaces`:

    ```
    # The loopback network interface
    auto lo
    iface lo inet loopback

    # The primary network interface
    auto enp35s0
    iface enp35s0 inet static
      address 1.2.3.4/26
      gateway 5.6.7.8
    #WAN Server

    # The VM bridge
    auto vmbr0
    iface vmbr0 inet static
    address 10.0.0.254
    netmask 255.255.255.0
    bridge_ports none
    bridge_stp off
    bridge_fd 0
    #LAN VM Net

    # NAT enable
    post-up iptables -t nat -A POSTROUTING -s '10.0.0.0/24' -o enp35s0 -j MASQUERADE
    post-down iptables -t nat -D POSTROUTING -s '10.0.0.0/24' -o enp35s0 -j MASQUERADE

    # conntrack zones for outgoing connections
    post-up   iptables -t raw -I PREROUTING -i fwbr+ -j CT --zone 1
    post-down iptables -t raw -D PREROUTING -i fwbr+ -j CT --zone 1

    # Example for Portforwarding to VM HTTP from port 80 to VM 10.0.0.250 on port 80
    post-up iptables -t nat -A PREROUTING -i enp35s0 -p tcp --dport 80 -j DNAT --to 10.0.0.250:80
    post-down iptables -t nat -D PREROUTING -i enp35s0 -p tcp --dport 80 -j DNAT --to 10.0.0.250:80
    ```

    Вы можете использовать `isc-dhcp-server` на бридже `vmbr0`, чтобы назначать IP-адреса в сети `10.0.0.0` для виртуальных машин. Пожалуйста, используйте `10.0.0.254` для шлюза. Дайте знать, если вам нужна помощь с конфигурацией.
     
     
     
    ronaldst
    Guest
    #14
    0
    27.07.2023 00:40:00
    Кто-нибудь пробовал этот метод с Proxmox 8? У меня не получается запустить новый AX-51 после установки и изменения сетевой конфигурации. Сервер сразу в BIOS и похоже не находит загрузчик на NVM. Установка Proxmox 8 с использованием KVM тоже не удалась. Установщик выдаёт ошибку "Unable to unmount ZFS" после начала установки.
     
     
     
    Ramalama
    Guest
    #15
    0
    27.07.2023 01:14:00
    Но ты можешь получить бесплатный физический KVM на 3 часа... Это значит просто смонтируй ISO, установи PVE8 как хочешь... Потом зайди в GUI PVE, установи Opnsense или Pfsense. Не забудь пробросить vmbr virtio nic. Настрой этот nic как LAN, с нужной сетью/IP... Включи доступ по SSH внутри Opnsense... Выключи VM, пробрось свой физический nic и включи автозапуск. Заблокируй через KVM драйвер своего физического nic и перезагрузи хост. Когда он снова запустится, Opnsense автоматически запустится, а потом ты просто войдешь по SSH в свой Opnsense. Настрой в CLI физический nic как WAN, установи свой правильный IP или просто включи DHCP, так как Hetzner предоставляет IPv4 DHCP-сервер на WAN... Потом зайди в оболочку Opnsense и отключи файрвол с помощью "pfctl -d", если я правильно помню. Потом ты можешь просто получить доступ к своему Opn/Pfsense обычно через веб-GUI и настроить все по своему вкусу. Например, правильно настроить интерфейс WAN, IPv4 и IPv6 как DHCP/DHCPv6... На интерфейсе LAN – нужную LAN-сеть, любой диапазон RFC1918, который ты хочешь... На интерфейсе LAN IPv6 как статический с твоим Hetzner IPv6, но с ::1 в конце и /64 сетью... Отредактируй dhcpv6_wan gateway во вкладке "gateways" в Opnsense до fe80::1. Включи DHCPv4 сервер и настрои его по своему вкусу... Включи DHCPv6 сервер + router advertisements, или только router advertisements как stateless, что бы ты ни хотел настроить. Не забудь отредактировать свой /etc/network/interfaces в Proxmox, пока у тебя есть доступ к KVM, до правильного IP/подсети и шлюза... И установи "bridge-ports none", так как у тебя нет физического порта... Или так как физический порт проброшен в Opnsense... И перезагрузи хост, как только твой Opnsense или Pfsense будет настроен наполовину, чтобы применить настройки сети хоста... Настрой в Opnsense WireGuard соединение, VPN в него и ты можешь получить доступ к Proxmox и каждой VM обычно, как если бы ты находился в "LAN" твоего Hetzner сервера.... Ты можешь даже заблокировать доступ к GUI на WAN, потому что ты можешь получить доступ к Opnsense через VPN... Но я обычно только настраиваю 2FA и оставляю доступ к GUI доступным, на случай, если что-то произойдет и у меня нет VPN... 2FA с хорошим паролем достаточно защищает.

    -----

    Тебе не нужны какие-то странные модификации iptables с адресом RFC1918 на интерфейсе WAN внутри Opn/Pfsense... Я даже не понимаю, почему люди это делают на Hetzner серверах, где у тебя есть бесплатный физический доступ к KVM. Ты получаешь доступ к KVM, если нажмешь внутри Hetzner robot на твоем сервере в разделе поддержки, там есть опция запросить KVM доступ на 1/2/3 часа.

    Cheers
     
     
     
    Ramalama
    Guest
    #16
    0
    27.07.2023 01:18:00
    Кстати, бывает, что тебе попадет какой-то глупый физический KVM, который только ISO монтирует через Samba. Но ты можешь попросить их сделать загрузочную флешку с pve8 и воткнуть её в сервер. Они сделают бесплатно, кстати. Можно даже добавить бесплатное 50Гб облачное хранилище, туда загрузить ISO и активировать доступ через Samba. И это можно использовать для их паршивого KVM. Но бывает, что тебе достанется приличный KVM-устройство, где можно просто выбрать ISO с компьютера, чтобы смонтировать его на сервере. Если нет, скажи им, чтобы сделали флешку. Удачи!
     
     
     
    ronaldst
    Guest
    #17
    0
    27.07.2023 01:58:00
    Как я и говорил, пытался установить Proxmox 8 через KVM/IPMI. Установщик выдаёт ошибку "Unable to unmount ZFS" после начала установки.
     
     
     
    MaLe
    Guest
    #18
    0
    27.07.2023 08:32:00
    @ronaldst Успешно поставил Proxmox 8 на старенький AX41. Так что, должно работать в целом. По моему опыту, на некоторых новееших машинах нужно использовать UEFI загрузку. Попробуй вариант с UEFI: Код: wget http://download.proxmox.com/iso/proxmox-ve_8.0-2.iso
    wget -qO- /root http://www.danpros.com/content/files/uefi.tar.gz | tar -xvz -C /root
    qemu-system-x86_64 -enable-kvm -smp 4 -m 4096 -boot once=d -cdrom ./proxmox-ve_8.0-2.iso -drive file=/dev/nvme0n1,format=raw,media=disk,if=virtio -drive file=/dev/nvme1n1,format=raw,media=disk,if=virtio -vnc 127.0.0.1:1 -bios /root/uefi.bin
     
     
     
    ronaldst
    Guest
    #19
    0
    27.07.2023 10:59:00
    Могу подтвердить, что этот метод работает. Спасибо!
     
     
     
    Ramalama
    Guest
    #20
    0
    27.07.2023 02:20:00
    Аа, я думал, ты имеешь в виду опцию загрузки KVM, это как загрузить сервер с Qemu и передать диски напрямую. Да, если у тебя проблемы с физическим KVM, это странно. Похоже, у тебя уже есть zpool, вероятно, на дисках? Но даже в этом случае это крайне странно. Можно загрузиться с какого-нибудь лайв-диска Linux и снести диски? Пробовал 7.4 установщик и потом обновить до 8.0?
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры