Dos tarjetas NVIDIA 780Ti instaladas. Usando cuda 7.5 en Ubuntu 14.04. La lista de verificación posterior a la instalación muestra que cuda está instalado correctamente y funciona correctamente. Mis monitores están conectados al dispositivo 0. Compilé las muestras de cuda y ejecuté nvidia-smi. El resultado de TI muestra dos tarjetas NVIDIA como se esperaba:
Fri Apr 1 01:04:31 2016
+------------------------------------------------------+
| NVIDIA-SMI 352.79 Driver Version: 352.79 |
|-------------------------------+----------------------+----------------------+
| GPU Name Persistence-M| Bus-Id Disp.A | Volatile Uncorr. ECC |
| Fan Temp Perf Pwr:Usage/Cap| Memory-Usage | GPU-Util Compute M. |
|===============================+======================+======================|
| 0 GeForce GTX 780 Ti Off | 0000:01:00.0 N/A | N/A |
| 38% 50C P2 N/A / N/A | 1084MiB / 3071MiB | N/A Default |
+-------------------------------+----------------------+----------------------+
| 1 GeForce GTX 780 Ti Off | 0000:03:00.0 N/A | N/A |
| 29% 34C P8 N/A / N/A | 11MiB / 3071MiB | N/A Default |
+-------------------------------+----------------------+----------------------+
+-----------------------------------------------------------------------------+
| Processes: GPU Memory |
| GPU PID Type Process name Usage |
|=============================================================================|
| 0 Not Supported |
| 1 Not Supported |
+-----------------------------------------------------------------------------+
Sin embargo, deviceQuery solo muestra 1 tarjeta:
./deviceQuery Starting...
CUDA Device Query (Runtime API) version (CUDART static linking)
Detected 1 CUDA Capable device(s)
Device 0: "GeForce GTX 780 Ti"
CUDA Driver Version / Runtime Version 7.5 / 7.5
CUDA Capability Major/Minor version number: 3.5
Total amount of global memory: 3072 MBytes (3221028864 bytes)
(15) Multiprocessors, (192) CUDA Cores/MP: 2880 CUDA Cores
GPU Max Clock rate: 1084 MHz (1.08 GHz)
Memory Clock rate: 3500 Mhz
Memory Bus Width: 384-bit
L2 Cache Size: 1572864 bytes
Maximum Texture Dimension Size (x,y,z) 1D=(65536), 2D=(65536, 65536), 3D=(4096, 4096, 4096)
Maximum Layered 1D Texture Size, (num) layers 1D=(16384), 2048 layers
Maximum Layered 2D Texture Size, (num) layers 2D=(16384, 16384), 2048 layers
Total amount of constant memory: 65536 bytes
Total amount of shared memory per block: 49152 bytes
Total number of registers available per block: 65536
Warp size: 32
Maximum number of threads per multiprocessor: 2048
Maximum number of threads per block: 1024
Max dimension size of a thread block (x,y,z): (1024, 1024, 64)
Max dimension size of a grid size (x,y,z): (2147483647, 65535, 65535)
Maximum memory pitch: 2147483647 bytes
Texture alignment: 512 bytes
Concurrent copy and kernel execution: Yes with 1 copy engine(s)
Run time limit on kernels: No
Integrated GPU sharing Host Memory: No
Support host page-locked memory mapping: Yes
Alignment requirement for Surfaces: Yes
Device has ECC support: Disabled
Device supports Unified Addressing (UVA): Yes
Device PCI Domain ID / Bus ID / location ID: 0 / 3 / 0
Compute Mode:
< Default (multiple host threads can use ::cudaSetDevice() with device simultaneously) >
deviceQuery, CUDA Driver = CUDART, CUDA Driver Version = 7.5, CUDA Runtime Version = 7.5, NumDevs = 1, Device0 = GeForce GTX 780 Ti
Result = PASS
Intenté dirigir cuda a la otra tarjeta de video usando la variable de entorno
CUDA_VISIBLE_DEVICES=1
Agregué la línea
export CUDA_VISIBLE_DEVICES=1
a .bashrc y abrió una nueva ventana de terminal. Printenv me mostró CUDA_VISIBLE_DEVICES=1 entre otros.
Ejecuté la prueba de ancho de banda. Su salida es:
[CUDA Bandwidth Test] - Starting...
Running on...
Device 0: GeForce GTX 780 Ti
Quick Mode
Host to Device Bandwidth, 1 Device(s)
PINNED Memory Transfers
Transfer Size (Bytes) Bandwidth(MB/s)
33554432 11618.3
Device to Host Bandwidth, 1 Device(s)
PINNED Memory Transfers
Transfer Size (Bytes) Bandwidth(MB/s)
33554432 12909.9
Device to Device Bandwidth, 1 Device(s)
PINNED Memory Transfers
Transfer Size (Bytes) Bandwidth(MB/s)
33554432 265048.1
Result = PASS
Reinicié y volví a ejecutar la prueba de ancho de banda pero aún comienza su salida con:
[CUDA Bandwidth Test] - Starting...
Running on...
Device 0: GeForce GTX 780 Ti
Quick Mode
widthTest TODAVÍA usa el dispositivo 0. Quiero que use el dispositivo 1. ¿Por qué deviceQuery solo vio una tarjeta? ¿Qué me estoy perdiendo?
Respuesta1
Parece que esto es un problema con deviceQuery.
Cuando comienzo
nvidia-smi -l 1 --query --display=PERFORMANCE >> gpu_utillization.log
y luego inicie una aplicación de muestra compilada de cuda, partículas
El registro muestra algo interesante. En "reposo", antes de que se inicien las partículas, GPU0 está en el estado de rendimiento 2 y GPU1 está en el estado de rendimiento 8. Después de que se inician las partículas, ambos estados de rendimiento son 0.
Después de dejar las partículas, los estados de rendimiento vuelven a la línea base. GPU0 está ajustando mis pantallas, así que imagino que es por eso que nunca llega al estado 8.
Esteexplica los estados de desempeño.
P0/P1 - Maximum 3D performance
P2/P3 - Balanced 3D performance-power
P8 - Basic HD video playback
P10 - DVD playback
P12 - Minimum idle power consumption