훈련 프로세스를 직렬로 실행해야 합니까, 아니면 병렬로 실행해야 합니까?

훈련 프로세스를 직렬로 실행해야 합니까, 아니면 병렬로 실행해야 합니까?

실행할 ANN 교육 프로세스가 21개 있습니다.

내 손에는 네 대의 컴퓨터가 있습니다. 그 중 3개에는 GPU가 장착되어 있습니다(각각 2개의 GPU).

GPU가 있는 컴퓨터에서는 세 개 이상의 프로세스를 동시에 실행할 수 없습니다. GPU는 메모리에 3개 이상의 프로세스를 수용할 수 없습니다. 결과적으로 3개 이상의 프로세스를 실행하면 하나 이상의 프로세스가 자동으로 종료됩니다.

최소한의 시간에 교육을 활성화하기 위한 프로세스를 실행하는 가장 좋은 방법은 무엇입니까?

관련 정보