Мне нужно использовать AMT HIT для решения ряда вопросов. Однако в моих вопросах есть определенная зависимость. Например, если они выбирают A с выбором Yes, мы будем направлять их на вопрос C в противном случае, мы направляем их на вопрос B. Проблема заключается в том, что с управлением групповыми партиями AMT это кажется невозможным. В этом случае вопрос B на HIT (если A выбран Да) будет нести дополнительные денежные затраты.Поддерживает ли Amazon Mechanical Turk динамическое регулирование контента в HIT?
Итак, если мы можем динамически изменять содержание HIT, тогда мы можем сначала показать вопрос A, а затем, когда выбран A. Да, мы можем показать следующий вопрос как C и пропустить вопрос B, чтобы сэкономить деньги.
Поддерживает ли Amazon Mechanical Turk динамическое изменение содержимого в одном HIT?
Спасибо.
Большое спасибо. Поддерживает ли AMT «default» QuestionForm получение общего коэффициента ошибок работника? Здесь я имею в виду получение исторического коэффициента ошибки рабочего, а не коэффициента ошибки для QuestionForm, который я опубликовал. – batcruise
Вы не можете получить информацию о таких работниках. Вы могли бы запросить предыдущую производительность работников на своих HIT (но вам понадобится серверное приложение, которое будет динамически запрашивать API для этого). Вы можете использовать QualificationRequirements, чтобы ограничить HITType рабочими с определенными уровнями производительности (> 90% одобренных HIT), но вы не можете получить оценки для конкретных работников по этим показателям. – Thomas
Я искал в Интернете и нашел метод, который может грубо выполнить эту задачу, добавив некоторые золотые стандартные HIT, то есть задачи, которые, как мы знаем, отвечают. Затем мы можем проверить коэффициент ошибок в золотых стандартах HIT и получить оценку отношения ошибки работника. – batcruise