Оценка положения головы в режиме реального времени

Question

Мне нужно сделать оценку позы в видео в реальном времени. Я пробовал несколько вариантов, таких как POSIT и shervin Emami's code.

Проблема в том, что я не смог найти код, который использует видео в качестве входного сигнала. Может ли кто-нибудь предложить хороший код или методы Open Source для поиска головы.

Ввод: Кадры с камеры.

Ожидаемый результат: Поиск позы лица.

Было бы здорово, если бы я получил ссылки или коды, если они есть. Также я планирую сделать то же приложение в Android и IOS, чтобы иметь несколько полезных ссылок, которые могут мне помочь.

Answer 1

Взгляните на OpenPose, это система в режиме реального времени, предназначенная для совместного обнаружения человеческих тел, рук и лицевых ключевых точек (всего 130 ключевых точек) на отдельных изображениях. Используя CNN, это отличный пример Deep Learning в области компьютерного зрения.

OpenPose изначально создается с помощью Caffe, но порты TensorFlow начинают появляться. Например, это github repo, представляет собой реализацию OpenPose с использованием TensorFlow. Кроме того, новая модель основана на Mobilenet, что делает ее более подходящей для работы на процессорах или маломощных встроенных устройствах (например, в смартфоне). BTW, TensorFlow поддерживает Android и iOS!