Новости проекта "Мой сервер".
С играми я всех, включая себя, обламал...
В последних версиях драйверов для Windows 10 нет настройки SLI (NvLink). Сменив несколько версий драйверов настройки не нашел. Рыться в заметках к выпускам драйверов устал. Накладно и сомнительно.
Но удалось получить информацию о поддержке функций и работе моста:
C:\Users\AES>nvidia-smi nvlink -s
GPU 0: NVIDIA GeForce RTX 2080 Ti (UUID: GPU-3bb30069-c738-1201-753f-57bd83043909)
Link 0: 25.781 GB/s
Link 1: 25.781 GB/s
GPU 1: NVIDIA GeForce RTX 2080 Ti (UUID: GPU-6a624045-9309-e72e-a834-0412f7a52013)
Link 0: 25.781 GB/s
Link 1: 25.781 GB/s
C:\Users\AES>nvidia-smi nvlink -c
GPU 0: NVIDIA GeForce RTX 2080 Ti (UUID: GPU-3bb30069-c738-1201-753f-57bd83043909)
Link 0, P2P is supported: true
Link 0, Access to system memory supported: true
Link 0, P2P atomics supported: true
Link 0, System memory atomics supported: true
Link 0, SLI is supported: true
Link 0, Link is supported: true
Link 1, P2P is supported: true
Link 1, Access to system memory supported: true
Link 1, P2P atomics supported: true
Link 1, System memory atomics supported: true
Link 1, SLI is supported: true
Link 1, Link is supported: true
GPU 1: NVIDIA GeForce RTX 2080 Ti (UUID: GPU-6a624045-9309-e72e-a834-0412f7a52013)
Link 0, P2P is supported: true
Link 0, Access to system memory supported: true
Link 0, P2P atomics supported: true
Link 0, System memory atomics supported: true
Link 0, SLI is supported: true
Link 0, Link is supported: true
Link 1, P2P is supported: true
Link 1, Access to system memory supported: true
Link 1, P2P atomics supported: true
Link 1, System memory atomics supported: true
Link 1, SLI is supported: true
Link 1, Link is supported: true
Соединение есть и функции поддерживаются! Хоть что-то. Но, например, в GPU-Z параметр SLI все так же disabled.
В тестах и играх эффективно используется только одна карта.
Производительность карты в соло не отличается от референсной RTX 2080 Ti (11GB), т.е. особой ценности результаты бенчмарков не несут.
Откатываться до более старых версий ради поддержки SLI - потерять фишки и производительность последних версий. А игры, поддерживающие SLI еще нужно поискать. В общем затея сомнительная, особенно если вспомнить, что карты были куплены для ИИ.
Чтобы откинуть последние сомнения нужно взглянуть как выглядит сервер сейчас: все в сборе, но без боковой крышки. Почему? Потому что при прокидывании видеокарт в виртуальную машину мы теряем возможность с хоста следить за их температурой и регулировать обороты корпусных кулеров. А без крышки - без риска задушить и перегреть карты.
Для того, чтобы реализовать управление оборотами корпусных кулеров с зависимостью от карт и процессоров необходимо подключать карты к хосту. По той же причине пока нет тестов температур (только поочередные и с открытой крышкой, а так не интересно).
Сейчас идет этап настройки кулеров. А после - тесты на температуры и стабильность.
Для тех, у кого в proxmox с двумя картами не запускается виртуальная машина, оставляю свой конфиг (на момент работы виртуалки с двумя картами и nvlink):
cat /etc/default/grub
...
GRUB_CMDLINE_LINUX_DEFAULT="intel_iommu=on iommu=pt pci=nommconf pcie_acs_override=downstream,multifunction video=efifb:off video=vesa:off vfio_iommu_type1.allow_unsafe_interrupts=1 kvm.ignore_msrs=1 modprobe.blacklist=radeon,nouveau,nvidia,nvidiafb,nvidia-gpu initcall_blacklist=sysfb_init"
...
cat /etc/modprobe.d/blacklist.conf
blacklist nouveau
blacklist nvidia*
и для виртуальной машины:
Экран: none
Устройство PCI (hostpci0): <pci_id>,pcie=1,x-vga=1
Устройство PCI (hostpci1): <pci_id>,pcie=1,rombar=0
Монитор подключается к hostpci0.
Со стороны хоста да, избыточно, но у меня долго не получалось хоть как-то запустить. Вам может потребоваться только 1-2 параметра. Но не забывайте, что работа KVM зависит и от настроек в биосе!
Пока это все новости.