Как вы кодируете видео со звуком с помощью MediaCodec

Question

Итак, я закодировал элементарный поток h264 с MediaCodec путем сбора кадров с использованием метода onPreviewFrame камеры (с использованием Encoding H.264 from camera with Android MediaCodec). Затем я сгенерировал mp4-видео, используя поток h264. К сожалению, в нем нет никакого звука.

Я заметил, что MediaCodec также должен допускать кодирование звука, поскольку он имеет настройки для аудиокодеков.

Есть ли способы добавить аудио в поток h264?

благодарит за чтение и будет благодарен за любые комментарии или предложения.

Answer 1

Данный экземпляр MediaCodec будет кодировать либо видео, либо аудио. Вам нужно будет создать второй экземпляр MediaCodec для кодирования аудио, а затем объединить потоки с классом MediaMuxer (представленный в Android 4.3, API 18).

Есть примеры использования MediaMuxer на bigflake, но в то время я пишу это есть не один, который демонстрирует комбинирования аудио и видео (они просто «мультиплексирование» видео в файл .mp4). Этого должно быть достаточно, чтобы продемонстрировать, как использовать класс.