Proxmox VE 8 PCI/PCIE Passthrough ที่สำคัญ การปรับแต่ง การแก้ไข และวิธีแก้ปัญหา

ในช่วงไม่กี่ปีที่ผ่านมา การรองรับ PCI/PCIE (เช่น GPU passthrough) ได้รับการปรับปรุงอย่างมากในฮาร์ดแวร์รุ่นใหม่ ดังนั้นขาประจำ คู่มือการส่งผ่าน Proxmox VE PCI/PCIE และ GPU ควรใช้งานได้กับฮาร์ดแวร์ใหม่ส่วนใหญ่ อย่างไรก็ตาม คุณอาจประสบปัญหามากมายในการส่งผ่าน GPU และอุปกรณ์ PCI/PCIE อื่นๆ บนเครื่องเสมือน Proxmox VE มีการปรับแต่ง/แก้ไข/วิธีแก้ปัญหามากมายสำหรับปัญหาการส่งผ่าน Proxmox VE GPU และ PCI/PCIE ทั่วไปบางส่วน

ในบทความนี้ ฉันจะพูดถึงปัญหาการส่งผ่าน Proxmox VE PCI/PCIE และการส่งผ่าน GPU ที่พบบ่อยที่สุด และขั้นตอนที่คุณสามารถทำได้เพื่อแก้ไขปัญหาเหล่านั้น

สารบัญ

1. จะทำอย่างไรถ้า IOMMU Interrupt Remapping ไม่รองรับ?
2. จะทำอย่างไรถ้า GPU ของฉัน (หรืออุปกรณ์ PCI/PCIE) ไม่อยู่ในกลุ่ม IOMMU ของตัวเอง?
3. ฉันจะขึ้นบัญชีดำไดรเวอร์ GPU AMD บน Proxmox VE ได้อย่างไร
4. ฉันจะขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU บน Proxmox VE ได้อย่างไร
5. ฉันจะขึ้นบัญชีดำไดรเวอร์ Intel GPU บน Proxmox VE ได้อย่างไร
6. จะตรวจสอบว่า GPU ของฉัน (หรืออุปกรณ์ PCI/PCIE) ใช้ไดรเวอร์ VFIO บน Proxmox VE ได้อย่างไร
7. ฉันขึ้นบัญชีดำไดรเวอร์ AMU GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?
8. ฉันขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?
9. ฉันขึ้นบัญชีดำไดรเวอร์ Intel GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?
10. GPU ตัวเดียวใช้ไดรเวอร์ VFIO แต่เมื่อกำหนดค่า GPU ตัวที่สอง มันไม่ทำงาน เพราะเหตุใด
11. เหตุใดจึงปิดใช้งานอนุญาโตตุลาการ VGA สำหรับ GPU และทำอย่างไร
12. จะเกิดอะไรขึ้นหาก GPU ของฉันยังคงไม่ได้ใช้ไดรเวอร์ VFIO แม้ว่าจะกำหนดค่า VFIO แล้วก็ตาม
13. GPU Passthrough ไม่พบข้อผิดพลาด แต่ฉันได้รับหน้าจอสีดำบนจอภาพที่เชื่อมต่อกับ GPU ที่ส่งผ่านไปยัง Proxmox VE VM เพราะเหตุใด
14. Bug การรีเซ็ตผู้ขาย AMD คืออะไร และจะแก้ไขได้อย่างไร
15. จะให้ vBIOS สำหรับ GPU ที่ผ่านบนเครื่องเสมือน Proxmox VE ได้อย่างไร
16. จะทำอย่างไรถ้าบางแอพขัดข้องกับ Proxmox VE Windows Virtual Machine?
17. วิธีแก้ปัญหาเสียงแคร็ก/ปัญหาเสียง HDMI บนเครื่องเสมือน Proxmox VE Linux
18. จะอัพเดต Proxmox VE initramfs ได้อย่างไร
19. จะอัพเดต Proxmox VE GRUB Bootloader ได้อย่างไร
20. บทสรุป
21. อ้างอิง

จะทำอย่างไรหากไม่รองรับ IOMMU Interrupt Remapping

สำหรับการส่งผ่าน PCI/PCIE การแมปขัดจังหวะ IOMMU ใหม่ถือเป็นสิ่งสำคัญ

หากต้องการตรวจสอบว่าโปรเซสเซอร์ของคุณรองรับการแมปขัดจังหวะ IOMMU หรือไม่ ให้รันคำสั่งด้านล่าง:

หากโปรเซสเซอร์ของคุณรองรับการแมปขัดจังหวะ IOMMU คุณจะเห็นเอาต์พุตบางประเภทที่ยืนยันว่าเปิดใช้งานการแมปขัดจังหวะใหม่แล้ว มิฉะนั้น คุณจะไม่เห็นผลลัพธ์

หากโปรเซสเซอร์ของคุณไม่รองรับการแมปการขัดจังหวะ IOMMU คุณจะต้องกำหนดค่าการขัดจังหวะที่ไม่ปลอดภัยบนเซิร์ฟเวอร์ Proxmox VE ของคุณเพื่อส่งผ่านอุปกรณ์ PCI/PCIE บนเครื่องเสมือน Proxmox VE

หากต้องการกำหนดค่าการขัดจังหวะที่ไม่ปลอดภัยบน Proxmox VE ให้สร้างไฟล์ใหม่ iommu_unsafe_interrupts.conf ใน /etc/modprobe.d ไดเร็กทอรีและเปิดด้วยโปรแกรมแก้ไขข้อความนาโนดังนี้:

เพิ่มบรรทัดต่อไปนี้ใน iommu_unsafe_interrupts.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ -

จะทำอย่างไรถ้า GPU ของฉัน (หรืออุปกรณ์ PCI/PCIE) ไม่อยู่ในกลุ่ม IOMMU ของตัวเอง?

หากเซิร์ฟเวอร์ของคุณมีสล็อต PCI/PCIE หลายช่อง คุณสามารถย้าย GPU ไปยังสล็อต PCI/PCIE อื่นได้ และดูว่า GPU อยู่ในกลุ่ม IOMMU ของตัวเองหรือไม่

หากไม่ได้ผล คุณสามารถลองเปิดใช้งานแพทช์เคอร์เนลแทนที่ ACS บน Proxmox VE ได้

หากต้องการลองเปิดใช้งานแพตช์เคอร์เนลแทนที่ ACS บน Proxmox VE ให้เปิดไฟล์ /etc/default/grub ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

เพิ่มตัวเลือกการบูตเคอร์เนล pcie_acs_override=ดาวน์สตรีม ในตอนท้ายของ GRUB_CMDLINE_LINUX_DEFAULT -

เมื่อเสร็จแล้วให้กด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์และตรวจสอบให้แน่ใจ อัปเดต bootloader Proxmox VE GRUB เพื่อให้การเปลี่ยนแปลงมีผล

คุณควรมีการจัดกลุ่ม IOMMU ที่ดีขึ้นเมื่อเซิร์ฟเวอร์ Proxmox VE ของคุณบูท

หาก GPU ของคุณยังไม่มีกลุ่ม IOMMU ของตัวเอง คุณสามารถก้าวไปอีกขั้นหนึ่งได้โดยใช้ pcie_acs_override=ดาวน์สตรีม มัลติฟังก์ชั่น แทน. คุณควรมีการจัดกลุ่ม IOMMU ที่ดียิ่งขึ้น

ถ้า pcie_acs_override=ดาวน์สตรีม มัลติฟังก์ชั่น ส่งผลให้ IOMMU จัดกลุ่มได้ดีขึ้น pcie_acs_override=ดาวน์สตรีม แล้วทำไมถึงใช้ pcie_acs_override=ดาวน์สตรีม เลยเหรอ?

จุดประสงค์ของการแทนที่ PCIE ACS คือการหลอกเคอร์เนลให้คิดว่าอุปกรณ์ PCIE ถูกแยกออกจากกันเมื่อไม่ได้อยู่ในความเป็นจริง ดังนั้นการแทนที่ PCIE ACS จึงมาพร้อมกับปัญหาด้านความปลอดภัยและความเสถียร นั่นเป็นเหตุผลที่คุณควรลองใช้ตัวเลือกแทนที่ PCIE ACS ที่ก้าวร้าวน้อยกว่า pcie_acs_override=ดาวน์สตรีม ก่อนอื่นและดูว่าปัญหาของคุณได้รับการแก้ไขหรือไม่ ถ้า pcie_acs_override=ดาวน์สตรีม ใช้งานไม่ได้เพียงเท่านี้คุณควรใช้ตัวเลือกที่ก้าวร้าวกว่านี้ pcie_acs_override=ดาวน์สตรีม มัลติฟังก์ชั่น -

ฉันจะขึ้นบัญชีดำไดรเวอร์ GPU AMD บน Proxmox VE ได้อย่างไร

หากคุณต้องการส่งผ่าน AMD GPU บนเครื่องเสมือน Proxmox VE คุณต้องขึ้นบัญชีดำไดรเวอร์ AMD GPU และตรวจสอบให้แน่ใจว่าใช้ไดรเวอร์ VFIO แทน

ขั้นแรกให้เปิด /etc/modprobe.d/blacklist.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการขึ้นบัญชีดำไดรเวอร์ AMD GPU ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/blacklist.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

ฉันจะขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU บน Proxmox VE ได้อย่างไร

หากคุณต้องการส่งผ่าน NVIDIA GPU บนเครื่องเสมือน Proxmox VE คุณต้องขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU และตรวจสอบให้แน่ใจว่าใช้ไดรเวอร์ VFIO แทน

ขั้นแรกให้เปิด /etc/modprobe.d/blacklist.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/blacklist.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

ฉันจะขึ้นบัญชีดำไดรเวอร์ Intel GPU บน Proxmox VE ได้อย่างไร

หากคุณต้องการส่งผ่าน Intel GPU บนเครื่องเสมือน Proxmox VE คุณต้องขึ้นบัญชีดำไดรเวอร์ Intel GPU และตรวจสอบให้แน่ใจว่าใช้ไดรเวอร์ VFIO แทน

ขั้นแรกให้เปิด /etc/modprobe.d/blacklist.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการขึ้นบัญชีดำไดรเวอร์ Intel GPU ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/blacklist.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

จะตรวจสอบว่า GPU ของฉัน (หรืออุปกรณ์ PCI/PCIE) ใช้ไดรเวอร์ VFIO บน Proxmox VE ได้อย่างไร

หากต้องการตรวจสอบว่า GPU ของคุณหรืออุปกรณ์ PCI/PCIE ที่ต้องการใช้ไดรเวอร์ VFIO หรือไม่ ให้รันคำสั่งต่อไปนี้:

หาก GPU หรืออุปกรณ์ PCI/PCIE ของคุณใช้ไดรเวอร์ VFIO คุณจะเห็นเส้นดังกล่าว ไดรเวอร์เคอร์เนลที่ใช้งานอยู่: vfio-pci ตามที่ระบุไว้ในภาพหน้าจอด้านล่าง

ฉันขึ้นบัญชีดำไดรเวอร์ AMU GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?

ในบางครั้ง การขึ้นบัญชีดำไดรเวอร์ AMD GPU นั้นไม่เพียงพอ คุณยังต้องกำหนดค่าไดรเวอร์ AMD GPU ให้โหลดหลังจากไดรเวอร์ VFIO

หากต้องการทำเช่นนั้น ให้เปิดไฟล์ /etc/modprobe.d/vfio.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการกำหนดค่าไดรเวอร์ AMD GPU ให้โหลดหลังจากไดรเวอร์ VFIO ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/vfio.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

ฉันขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?

ในบางครั้ง การขึ้นบัญชีดำไดรเวอร์ NVIDIA GPU ยังไม่เพียงพอ คุณยังต้องกำหนดค่าไดรเวอร์ NVIDIA GPU ให้โหลดหลังจากไดรเวอร์ VFIO

หากต้องการทำเช่นนั้น ให้เปิดไฟล์ /etc/modprobe.d/vfio.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการกำหนดค่าไดรเวอร์ NVIDIA GPU ให้โหลดหลังจากไดรเวอร์ VFIO ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/vfio.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

ฉันขึ้นบัญชีดำไดรเวอร์ Intel GPU แล้ว แต่ GPU ไม่ได้ใช้ไดรเวอร์ VFIO จะต้องทำอย่างไร?

ในบางครั้ง การขึ้นบัญชีดำไดรเวอร์ Intel GPU นั้นไม่เพียงพอ คุณยังต้องกำหนดค่าไดรเวอร์ Intel GPU ให้โหลดหลังจากไดรเวอร์ VFIO

หากต้องการทำเช่นนั้น ให้เปิดไฟล์ /etc/modprobe.d/vfio.conf ไฟล์ด้วยโปรแกรมแก้ไขข้อความนาโนดังต่อไปนี้:

หากต้องการกำหนดค่าไดรเวอร์ Intel GPU ให้โหลดหลังจากไดรเวอร์ VFIO ให้เพิ่มบรรทัดต่อไปนี้ใน /etc/modprobe.d/vfio.conf ไฟล์แล้วกด - เอ็กซ์ ติดตามโดย และ และ <ป้อน> เพื่อบันทึกไฟล์

เมื่อเสร็จแล้วคุณต้อง อัปเดต initramfs ของเซิร์ฟเวอร์ Proxmox VE ของคุณ เพื่อให้การเปลี่ยนแปลงมีผล

GPU ตัวเดียวใช้ไดรเวอร์ VFIO แต่เมื่อกำหนดค่า GPU ตัวที่สอง มันไม่ทำงาน เพราะเหตุใด

ใน /etc/modprobe.d/vfio.conf คุณต้องเพิ่ม ID ของอุปกรณ์ PCI/PCIE ทั้งหมดที่คุณต้องการใช้ไดรเวอร์ VFIO ในบรรทัดเดียว อุปกรณ์หนึ่งเครื่องต่อบรรทัดจะไม่ทำงาน

ตัวอย่างเช่น หากคุณมี GPU 2 ตัวที่คุณต้องการกำหนดค่าให้ใช้ไดรเวอร์ VFIO คุณต้องเพิ่ม ID ของพวกเขาในบรรทัดเดียวใน /etc/modprobe.d/vfio.conf ไฟล์ดังต่อไปนี้: