¿Cómo controlar la tasa de bits (por tiempo) de MP3 - diferentes CBR/VBR en diferentes secciones?

Question

Tengo un archivo de audio de varias horas de duración que consiste en un 85% de conversación y un 15% de música. Quiero que la conversación tenga un VBR de ~64 kbps y que la música sea de 256 kbps. Configurar solo 1 VBR en el archivo no funciona tan bien, prefiero hacerlo manualmente y decir "Quiero que estas partes tengan esta tasa de bits y estas otras tengan una diferente". es posible? ¿Y si no con mp3, con otro formato?