3

Когда нам нужно распознать жест, мы должны обучить несколько HMM для каждого жеста. тогда, когда нам нужно классифицировать жест, мы вычисляем вероятность последовательности из каждого HMM и берем ту, которая имеет наибольший вероятность.непрерывное распознавание жестов с использованием скрытой марковской модели

Но что делать, когда нам нужно классифицировать несколько жестов в последовательности, и мы не знаем, как сегментируйте множественные жесты, чтобы использовать один и тот же подход с одним жестом

Итак, как мы можем сделать эту классификацию последовательностей? подходит ли HMM? Существуют ли другие способы?

Благодаря

ответ

2

NLP обычно делает это с интерпретацией в режиме реального времени. Установите порог соответствия; когда последовательность движений разрешается единственным жестом и соответствует пороговому значению, вы интерпретируете это как жест.

Это прост в эксплуатации. На практике есть много отзывов, особенно если некоторые жесты являются подмножествами других, или если матчи не такие четкие, как хотелось бы.

Если вы хотите использовать HMM, можете ли вы его посеять после некоторого обучения маркерами для состояний терминалов?

+0

Большое спасибо. Это полезно. Я получил пороговую часть, но что вы подразумеваете под «когда последовательность движений разрешает уникальный жест» ?. Да, я могу отметить терминальные государства. Я пытаюсь реализовать это для распознавания языка жестов, поэтому жесты - это слова, и я отмечаю начало и конец каждого слова как отдельные состояния. Кроме того, если у вас есть учебник или документ, объясняющий это больше, я буду более чем благодарен. Спасибо – user5692502

+1

Некоторые слова не являются атомарными движениями, такими как «утро» или «вместе». Некоторые из них представляют собой соединения более простых понятий, таких как «учитель». Ваша первая необходимость синтаксического анализа состоит в том, чтобы разграничить слова в относительно жидкой последовательности движений. Прошу прощения; У меня нет бумаги или учебника по этому поводу. У меня есть постмейстерская работа по когнитивным наукам, в том числе по вычислительной лингвистике, и у меня есть интерес к жестовому языку. Многие из ваших проблем связаны с обработкой аудиопотока в речи и разрешением этого на слова. – Prune

Смежные вопросы