Como posso encaminhar a saída de áudio do meu desktop Ubuntu para outra máquina (Debian)?

Question

(Divulgação completa: eu perguntei a umpergunta no lado Pi deste processono Pi StackExchange.)

Eu tenho um Raspberry Pi (com OSMC, praticamente Debian) que quero deixar ligado permanentemente e um desktop com Ubuntu 14.04. Quero que meus alto-falantes estejam conectados ao Pi para que eu possa usá-lo sempre, mas quando estou usando meu desktop, quero ouvir o som dele.

Agora, percebi que poderia evitar ter que conectar meus alto-falantes em cada sistema diferente o tempo todo, transmitindo a saída de áudio do meu desktop por meio do Raspberry Pi.

Pelo que entendi, o PulseAudio deveria me permitir fazer isso. Só que não tenho certeza de como fazer.

Atualmente fiz o seguinte.

Em paprefs(na área de trabalho), basta clicar em "Ativar remetente Multicast/RTP" e selecionar o dispositivo de saída "RTP Multicast" nas preferências de som?

Depois, no Pi (onde não tenho GUI), instalei o PulseAudio e editei /etc/pulse/default.papara habilitar o pactl load-module module-rtp-recv. Depois disso, tentei iniciar o PulseAudio executando o arquivo pulseaudio -D.

Infelizmente, isso não fez com que o áudio reproduzido na minha área de trabalho fosse emitido pelo Pi. O que estou fazendo de errado?