Доступ к видео кадру за кадром

Question

Что такое самая простая в использовании технология, которая даст мне доступ к рамкам видео в реальном времени и позволит мне изменить их. Я знаю DirectShow, но модель программирования кажется довольно сложной. Есть ли среда, которая упрощает программирование такого фильтра рамки?

Answer 1

ОК, поскольку вы попросили «легко», я должен упомянуть HTML5 < video>. Смотрите демо и объяснения по этим ссылкам:

• http://hacks.mozilla.org/2009/07/video-more-than-just-a-tag/
• http://people.mozilla.com/~prouget/demos/DynamicContentInjection/play.xhtml

Answer 2

Был обнаружен класс под названием AviFile в нескольких пакетах C++ от MS некоторое время назад. Я не уверен, что с этим происходит.

Лучший способ решить эту проблему - использовать DirectShow, если вы придерживаетесь окон.

Формат AVI файл (который хорошо documentent и вы можете найти под Google) немного похож на:

AVIRIFF size speed imgWidth imgHeight frameTotal imgCodec audioCodec frame size 
    FRAME 
    SOUND 
    FRAME 
    SOUND 

Answer 3

Вы можете взглянуть на ffmpeg команд и с открытым исходным кодом проект, который использует кодек библиотека.

Answer 4

Hy Opencv - это то, что вам нужно. Ее основа, которая может можно управлять изображением, видео и много еще кое-что проверить http://opencv.willowgarage.com/wiki/

Answer 5

рассмотреть вопрос о создании VLC plug-in

Работает на Linux и Windows, поддерживает видео в реальном времени в режиме реального времени, потоковое из файла, нагрузки кодеки и т. д.

Answer 6

наиболее простым является решение проблемы с AVIFile API. Есть много доступных образцов.

Answer 7

Вы можете использовать FFMpeg.

Проверить FFmpeg documentation

Answer 8

Дайте мне доступ в реальном времени к рамах Видео-ролик, и позвольте мне изменить их

Вы хотите получить несжатые видеокадры и изменять их до того, как они будут визуализированы? Или вы хотите изменить видеокадры, сохранив их обратно в медиафайле?

Первый из них будет немного легче. Несмотря на то, что DirectShow может показаться сложным сначала, это действительно элегантный дизайн. Я бы настоятельно предложил посмотреть образцы DirectShow.NET. Чтобы получить доступ к кадрам видео, вы просто настраиваете и добавляете фильтр SampleGrabber на график DirectShow, делаете graph.RenderFile (mymediafile, null), и вы получите обратный вызов для каждого фрейма. Вы можете изменить данные пикселя, и он появится на визуализированном видео. Это не должно занимать более 1 страницы кода. У меня есть example source code on using SampleGrabber, но он сделан для веб-камер. Воспроизведение медиа намного проще (graph.RenderFile!).

Если вам нужно записать этот материал в файл, вы бы сделали что-то похожее на то, что описано выше, но вместо использования средства визуализации видео вам нужно будет настроить график для использования видеокодеров и мультиплексоров. Наверное, не для кого-то нового для DirectShow;).

Если вы просто хотите получить фреймы, в Directshow имеется очень простой интерфейс под названием IMediaDet. У меня есть written a simple class, чтобы легко извлечь любые кадры из медиафайла. Он ориентирован на WPF, но вы можете использовать его для работы с прямым GDI.

Answer 9

Я понятия не имею, что именно вы пытаетесь достичь, поэтому это может вам не помочь, но если вам просто нужно изменить рамки видео на лету, я бы настоятельно рекомендовал посмотреть на AviSynth. Это видеосервер, который использует язык сценариев для изменения видео. Для него есть SDK, который вы можете использовать для записи двоичных плагинов. Для выполнения различных задач доступно множество плагинов. Пример сценария будет выглядеть следующим образом:

AviSource("C:\video.avi") 
Crop(20,0,-20,0) //Crops 20px from the left and right of video 
BicubicResize(640,480) //Resize to 640x480 using bicubic filter 
# increase the gamma 
Levels(0, 1.2, 255, 0, 255) 

Эти сценарии могут быть затем открыт в медиаплеере или кодировщика, такие как Virtualdub.