Добавление аудиоканала с помощью ffmpeg

Question

Я работаю над ffmpeg и пытаюсь добавить аудиопоток на лету. Я использую AudioQueues, и я получаю исходный звуковой буфер. Я кодирую аудио с линейным PCM, и, следовательно, звук, который я получаю, будет иметь необработанный формат, который, как я знаю, ffmpeg действительно принимает его. Но я не могу понять, как это сделать. Я просмотрел AVStream, где мы должны создать новый поток для этого аудиоканала, но как его кодировать на видео, которое уже инициализировано в другой структуре AVStream.

В целом, я хотел бы иметь представление об архитектуре ffmpeg. Мне было трудно работать, так как это наименее документировано. Любые указатели или детали оцениваются.

Спасибо и наилучшие пожелания, Радж Паван G

Answer 1

Если вы хотите использовать Java, вы найдете гораздо лучше документированы API обертку для FFmpeg с Xuggler.

Это означает, что FFmpeg может поддерживать Raw PCM, т. Е. Все контейнеры могут его содержать. используйте кодеки PCM (см. avcodec.h) и найдите тот, который имеет нужный размер и атрибуты. Чтобы добавить аудио в тот же контейнер, найдите объект AVFormatContext, который вы используете для существующего видеопотока, и используйте команду av_new_stream (...) для добавления нового потока. Затем присоедините свой кодер ИКМ и «закодируйте» к нему и напишите полученные пакеты. См. Output_example.c в FFmpeg для примеров этого API в действии.