Звук рабочего стола отстает при записи микрофона + звука рабочего стола + экрана с помощью ffmpeg

Question 1

Не уверен, что это исправит ситуацию для вас, но у меня есть скрипт, с которым у меня не было проблем. Сравнивая наши два скрипта, я вижу только следующие различия:

мой filter_complexпросто объединен
Я принудительно использую 4 потока
Мой аудиокодек — mp3lame

Я думаю, что смена аудиокодека — самое важное отличие. Я думаю, что некоторые аудиокодеки каким-то образом чересстрочно синхронизируются с видео, поэтому они не могут рассинхронизироваться. К сожалению, я не видеоинженер, поэтому не могу быть так уверен.

Вот мой сценарий:

#!/usr/bin/bash

# video information
INRES="1920x1080"
OUTRES="1280x720"
FPS="24"
QUAL="fast"
FILE_OUT="$1"

#audio information
PULSE_IN="alsa_input.pci-0000_00_1b.0.analog-stereo"
PULSE_OUT="alsa_output.pci-0000_00_1b.0.analog-stereo.monitor"

ffmpeg -f x11grab -s "$INRES" -r "$FPS" -i :0.0 \
    -f pulse -i "$PULSE_IN" -f pulse -i "$PULSE_OUT" \
    -filter_complex amerge \
    -vcodec libx264 -crf 30 -preset "$QUAL" -s "$OUTRES" \
    -acodec libmp3lame -ab 96k -ar 44100 -threads 4 -pix_fmt yuv420p \
    -f flv "$FILE_OUT"

Answer

Не уверен, что это исправит ситуацию для вас, но у меня есть скрипт, с которым у меня не было проблем. Сравнивая наши два скрипта, я вижу только следующие различия:

мой filter_complexпросто объединен
Я принудительно использую 4 потока
Мой аудиокодек — mp3lame

Я думаю, что смена аудиокодека — самое важное отличие. Я думаю, что некоторые аудиокодеки каким-то образом чересстрочно синхронизируются с видео, поэтому они не могут рассинхронизироваться. К сожалению, я не видеоинженер, поэтому не могу быть так уверен.

Вот мой сценарий:

#!/usr/bin/bash

# video information
INRES="1920x1080"
OUTRES="1280x720"
FPS="24"
QUAL="fast"
FILE_OUT="$1"

#audio information
PULSE_IN="alsa_input.pci-0000_00_1b.0.analog-stereo"
PULSE_OUT="alsa_output.pci-0000_00_1b.0.analog-stereo.monitor"

ffmpeg -f x11grab -s "$INRES" -r "$FPS" -i :0.0 \
    -f pulse -i "$PULSE_IN" -f pulse -i "$PULSE_OUT" \
    -filter_complex amerge \
    -vcodec libx264 -crf 30 -preset "$QUAL" -s "$OUTRES" \
    -acodec libmp3lame -ab 96k -ar 44100 -threads 4 -pix_fmt yuv420p \
    -f flv "$FILE_OUT"

Question 2

Что может происходить, так это то, что звук рабочего стола захватывается с неправильной частотой дискретизации. Это может произойти, еслипульсовый аудиосигнал сообщает о частоте дискретизации неправильно.

После изменения файла конфигурации, как предложено в связанном ответе (вероятно, раскомментируйте default-sample-rateпараметр /etc/pulse/daemon.confи установите для него правильное значение 48000), вам придетсяперезапустить демон аудиопульса пользователяс:

pulseaudio -k
pulseaudio -D

Разница в частоте дискретизации очевидна, если вы проигрываете музыку через динамики, так что она захватывается и с микрофона, и с монитора пульсового аудио. Не только поток монитора начнется позже, но и тенор перейдет в баритон.

Answer

Что может происходить, так это то, что звук рабочего стола захватывается с неправильной частотой дискретизации. Это может произойти, еслипульсовый аудиосигнал сообщает о частоте дискретизации неправильно.

После изменения файла конфигурации, как предложено в связанном ответе (вероятно, раскомментируйте default-sample-rateпараметр /etc/pulse/daemon.confи установите для него правильное значение 48000), вам придетсяперезапустить демон аудиопульса пользователяс:

pulseaudio -k
pulseaudio -D

Разница в частоте дискретизации очевидна, если вы проигрываете музыку через динамики, так что она захватывается и с микрофона, и с монитора пульсового аудио. Не только поток монитора начнется позже, но и тенор перейдет в баритон.

Звук рабочего стола отстает при записи микрофона + звука рабочего стола + экрана с помощью ffmpeg

решение1

решение2

Связанный контент