Как определить углы лица?

Question

У меня есть более 2000 изображений в оттенках серого с размерами 96x96 пикселей в numpy. У меня есть координаты (x, y), такие как left_eye_center, right_eye_center, nose_center, mouth_left, mouth_right и т. Д.

Многие из лиц в наборе данных наклонены либо влево, либо вправо или вверх или вниз. Поэтому я хотел бы узнать углы ориентации лица к камере.

Есть ли библиотека, позволяющая обнаружить это? Я заглянул в opencv, но, похоже, только для обнаружения лица, а не для ориентации.

Answer 1

Я бы разделил данные тренировки на 3 метки (слева, в центре, справа), а затем использовал его с вашим алгоритмом обучения в машине, чтобы изучить 3 класса. Если вы используете opencv, вы можете, например, используйте HaarCascadeClassifiers (у меня когда-то был проект, в котором я использовал его для классификации ориентации). Но на самом деле все работает. Вам нужно только расширить его от бинарной классификации (распознавание лиц) до классификации многоклассов (ориентация лица).

Answer 2

Cmon, это просто математика:

double eyeXdis = eye_r.x - eye_l.x; 
    double eyeYdis = eye_r.y - eye_l.y; 
    double angle = atan(eyeYdis/eyeXdis); 
    double degree = angle*180/CV_PI; 

[править:]

, кажется, что вы ищете на самом деле "голова ставят оценку" (или "постулировать")

вам понадобится (примитивная) 3D-модель головы, получите соответствующие 3D-точки для ваших ориентиров один раз, а затем для каждого изображения найдите 2d ориентиры на изображении и получите вектор вращения/перевода от solvPnP() с этим.