Привет всем! Как и несколько других, я пытаюсь настроить GPU passthrough с Ryzen APU, но теперь застрял. Первым делом – я понятия не имею, что делаю. Меня двигает наивность молодости и 500 открытых вкладок браузера, поэтому, пожалуйста, будьте ко мне снисходительны. Мне кажется, что базовая передача работает, но у меня проблемы с загрузкой драйвера amdgpu в гостевой системе. Мой хост: Ryzen 5 4600G Asus ROG B550-A Gaming 32GB Samsung M391A4G43MB1-CTDQ Вот мой файл vm.conf:
```
agent: 1
bios: ovmf
boot: order=scsi0;net0
cores: 6
efidisk0: local:102/vm-102-disk-1.qcow2,efitype=4m,pre-enrolled-keys=1,size=528K
hostpci0: 0000:0b:00.0,pcie=1
machine: q35
memory: 6144
meta: creation-qemu=6.1.1,ctime=1668423230
name: ornn
net0: virtio=7E:16:4E:A6:67:30,bridge=vmbr0,firewall=1
numa: 0
onboot: 1
ostype: l26
parent: install
scsi0: local:102/vm-102-disk-0.qcow2,size=32G
scsihw: virtio-scsi-pci
smbios1: uuid=b28abe58-882e-475e-ae88-1460a426df3d
sockets: 1
vmgenid: 4c6b53bd-e771-4011-8997-6a86a3911754
```
Вывод `lspci -nnk` на хосте выглядит так:
```
0b:00.0 VGA compatible controller [0300]: Advanced Micro Devices, Inc. [AMD/ATI] Renoir [1002:1636] (rev c9)
Subsystem: ASUSTeK Computer Inc. Renoir [1043:87e1]
Kernel driver in use: vfio-pci
Kernel modules: amdgpu
```
Так что хост успешно игнорирует драйвер. Вывод `lspci -nnk` в гостевой выглядит так:
```
01:00.0 VGA compatible controller [0300]: Advanced Micro Devices, Inc. [AMD/ATI] Renoir [1002:1636] (rev c9)
Subsystem: ASUSTeK Computer Inc. Renoir [1043:87e1]
Kernel modules: amdgpu
```
Так что передача выглядит нормально, кроме того, что драйвер не используется. Вот ошибка, которую я получал до включения pcie на устройстве, которую я оставляю здесь на случай, если кто-то еще застрял:
```
[ 2.423230] amdgpu 0000:01:00.0: BAR 6: can't assign [??? 0x00000000 flags 0x20000000] (bogus alignment)
[ 2.426412] amdgpu 0000:01:00.0: amdgpu: Unable to locate a BIOS ROM
[ 2.426417] amdgpu 0000:01:00.0: amdgpu: Fatal error during GPU init
[ 2.426420] amdgpu 0000:01:00.0: amdgpu: amdgpu: finishing device.
[ 2.427239] amdgpu: probe of 0000:01:00.0 failed with error -22
```
Я также отключил SecureBoot как на хосте, так и на гостевой системе, чтобы добраться до этого места. Теперь я получаю следующий вывод для `sudo dmesg | grep amdgpu`:
```
[ 3.163064] [drm] amdgpu kernel modesetting enabled.
[ 3.163086] [drm] amdgpu version: 5.18.13
[ 3.163931] amdgpu: CRAT table not found
[ 3.163961] amdgpu: Virtual CRAT table created for CPU
[ 3.163984] amdgpu: Topology: Add CPU node
[ 3.184178] amdgpu: PeerDirect support was initialized successfully
[ 3.228494] amdgpu 0000:01:00.0: amdgpu: Fetched VBIOS from ROM BAR
[ 3.229023] amdgpu: ATOM BIOS: 113-RENOIR-034
[ 3.230660] amdgpu 0000:01:00.0: amdgpu: Trusted Memory Zone (TMZ) feature enabled
[ 3.231094] amdgpu 0000:01:00.0: amdgpu: PCIE atomic ops is not supported
[ 3.231516] amdgpu 0000:01:00.0: amdgpu: MODE2 reset
[ 7.514970] amdgpu 0000:01:00.0: amdgpu: SMU: I'm not done with your previous command: SMN_C2PMSG_66:0x0000001E SMN_C2PMSG_82:0x00000002
[ 7.515358] amdgpu 0000:01:00.0: amdgpu: Mode2 reset failed!
[ 7.515652] amdgpu 0000:01:00.0: amdgpu: asic reset on init failed
[ 7.515908] amdgpu 0000:01:00.0: amdgpu: Fatal error during GPU init
[ 7.516396] amdgpu 0000:01:00.0: amdgpu: amdgpu: finishing device.
[ 7.517976] amdgpu: probe of 0000:01:00.0 failed with error -62
```
Судя по всему, MODE2 – это проблема APU. Но я видел, как другие люди продвигаются дальше, поэтому на данном этапе я не уверен, стоит ли продолжать устранять неполадки на хосте или на гостевой системе. В этой теме люди проходят MODE2 без проблем, и драйвер amdgpu показан как используемый: [ >) Я также видел, что драйвер загружается для некоторых других людей, но есть противоречия относительно того, какие параметры ядра нужны на хосте, такие как nomodset, нужны ли вообще параметры amd_iommu и другие, и так далее. Для полноты картины вот мои настройки на хосте:
```
GRUB_CMDLINE_LINUX_DEFAULT="quiet amd_iommu=on pcie_acs_override=downstream,multifunction video=efifb:off"
```
В гостевой системе работает Ubuntu 22.10 с ядром 5.19.0-26. Я также пробовал 22.04 с ядром 5.15, но без успеха. Я также пробовал драйвер amdgpu по умолчанию и тот, который был установлен с помощью скрипта amdgpu-install с веб-сайта AMD. Сейчас я немного в тупике, не знаю, где искать неполадки... Устройство, похоже, передается нормально, поэтому я подозреваю, что проблема в настройках гостевой системы, но некоторые люди продвинулись дальше, чем я, поэтому это все еще может быть настройка на хосте. Буду рад любому совету.
```
agent: 1
bios: ovmf
boot: order=scsi0;net0
cores: 6
efidisk0: local:102/vm-102-disk-1.qcow2,efitype=4m,pre-enrolled-keys=1,size=528K
hostpci0: 0000:0b:00.0,pcie=1
machine: q35
memory: 6144
meta: creation-qemu=6.1.1,ctime=1668423230
name: ornn
net0: virtio=7E:16:4E:A6:67:30,bridge=vmbr0,firewall=1
numa: 0
onboot: 1
ostype: l26
parent: install
scsi0: local:102/vm-102-disk-0.qcow2,size=32G
scsihw: virtio-scsi-pci
smbios1: uuid=b28abe58-882e-475e-ae88-1460a426df3d
sockets: 1
vmgenid: 4c6b53bd-e771-4011-8997-6a86a3911754
```
Вывод `lspci -nnk` на хосте выглядит так:
```
0b:00.0 VGA compatible controller [0300]: Advanced Micro Devices, Inc. [AMD/ATI] Renoir [1002:1636] (rev c9)
Subsystem: ASUSTeK Computer Inc. Renoir [1043:87e1]
Kernel driver in use: vfio-pci
Kernel modules: amdgpu
```
Так что хост успешно игнорирует драйвер. Вывод `lspci -nnk` в гостевой выглядит так:
```
01:00.0 VGA compatible controller [0300]: Advanced Micro Devices, Inc. [AMD/ATI] Renoir [1002:1636] (rev c9)
Subsystem: ASUSTeK Computer Inc. Renoir [1043:87e1]
Kernel modules: amdgpu
```
Так что передача выглядит нормально, кроме того, что драйвер не используется. Вот ошибка, которую я получал до включения pcie на устройстве, которую я оставляю здесь на случай, если кто-то еще застрял:
```
[ 2.423230] amdgpu 0000:01:00.0: BAR 6: can't assign [??? 0x00000000 flags 0x20000000] (bogus alignment)
[ 2.426412] amdgpu 0000:01:00.0: amdgpu: Unable to locate a BIOS ROM
[ 2.426417] amdgpu 0000:01:00.0: amdgpu: Fatal error during GPU init
[ 2.426420] amdgpu 0000:01:00.0: amdgpu: amdgpu: finishing device.
[ 2.427239] amdgpu: probe of 0000:01:00.0 failed with error -22
```
Я также отключил SecureBoot как на хосте, так и на гостевой системе, чтобы добраться до этого места. Теперь я получаю следующий вывод для `sudo dmesg | grep amdgpu`:
```
[ 3.163064] [drm] amdgpu kernel modesetting enabled.
[ 3.163086] [drm] amdgpu version: 5.18.13
[ 3.163931] amdgpu: CRAT table not found
[ 3.163961] amdgpu: Virtual CRAT table created for CPU
[ 3.163984] amdgpu: Topology: Add CPU node
[ 3.184178] amdgpu: PeerDirect support was initialized successfully
[ 3.228494] amdgpu 0000:01:00.0: amdgpu: Fetched VBIOS from ROM BAR
[ 3.229023] amdgpu: ATOM BIOS: 113-RENOIR-034
[ 3.230660] amdgpu 0000:01:00.0: amdgpu: Trusted Memory Zone (TMZ) feature enabled
[ 3.231094] amdgpu 0000:01:00.0: amdgpu: PCIE atomic ops is not supported
[ 3.231516] amdgpu 0000:01:00.0: amdgpu: MODE2 reset
[ 7.514970] amdgpu 0000:01:00.0: amdgpu: SMU: I'm not done with your previous command: SMN_C2PMSG_66:0x0000001E SMN_C2PMSG_82:0x00000002
[ 7.515358] amdgpu 0000:01:00.0: amdgpu: Mode2 reset failed!
[ 7.515652] amdgpu 0000:01:00.0: amdgpu: asic reset on init failed
[ 7.515908] amdgpu 0000:01:00.0: amdgpu: Fatal error during GPU init
[ 7.516396] amdgpu 0000:01:00.0: amdgpu: amdgpu: finishing device.
[ 7.517976] amdgpu: probe of 0000:01:00.0 failed with error -62
```
Судя по всему, MODE2 – это проблема APU. Но я видел, как другие люди продвигаются дальше, поэтому на данном этапе я не уверен, стоит ли продолжать устранять неполадки на хосте или на гостевой системе. В этой теме люди проходят MODE2 без проблем, и драйвер amdgpu показан как используемый: [ >) Я также видел, что драйвер загружается для некоторых других людей, но есть противоречия относительно того, какие параметры ядра нужны на хосте, такие как nomodset, нужны ли вообще параметры amd_iommu и другие, и так далее. Для полноты картины вот мои настройки на хосте:
```
GRUB_CMDLINE_LINUX_DEFAULT="quiet amd_iommu=on pcie_acs_override=downstream,multifunction video=efifb:off"
```
В гостевой системе работает Ubuntu 22.10 с ядром 5.19.0-26. Я также пробовал 22.04 с ядром 5.15, но без успеха. Я также пробовал драйвер amdgpu по умолчанию и тот, который был установлен с помощью скрипта amdgpu-install с веб-сайта AMD. Сейчас я немного в тупике, не знаю, где искать неполадки... Устройство, похоже, передается нормально, поэтому я подозреваю, что проблема в настройках гостевой системы, но некоторые люди продвинулись дальше, чем я, поэтому это все еще может быть настройка на хосте. Буду рад любому совету.
