Отображение видеопотока на oculus Rift

Question

Я пытаюсь продемонстрировать видеоролик Oculus World Demo, чтобы показать видеопоток с камеры, а не предварительно установленную графику, однако мне трудно найти правильный способ выведите на экран Oculus cv :: IplImage или cv :: mat образ. Если кто-нибудь знает, как отобразить изображение в окуле, я был бы очень благодарен. Это для DK 2.

Answer 1

Pure OpenCV не очень хорошо подходит для рендеринга в Rift, потому что вам нужно будет вручную реализовать механизмы искажения, которые обычно предоставляются Oculus Rift SDK.

Лучший способ визуализации изображения с OpenCV на экран - загрузить изображение в текстуру OpenGL или Direct3D и использовать API 3D-рендеринга (GL or D3D), чтобы поместить его в визуализированную сцену. Существует example этого в репозитории Github для my book on Rift development.

Таким образом, он устанавливает захват видео с использованием API OpenCV, а затем запускает поток, который отвечает за захват изображений с устройства камеры. В основном потоке вызов рисования отображает простую трехмерную сцену, которая включает в себя захваченное изображение. Большая часть интересного кода, связанного с Rift, находится в родительском классе, RiftApp.