Выборочная проверка мнением большинства
Напишите нам, если не нашли ответ в Справке. Вы можете приложить скриншоты или видео, чтобы ускорить помощь:
Написать в чат Написать в Telegram
Перед началом
Для того чтобы настроить выборочную проверку мнением большинства, вам понадобится: готовый проект, пул и файл с заданиями.
Теория
Эта функция позволяет настроить проверку мнением большинства только для некоторых заданий.
В зависимости от того, сколько заданий выполнил исполнитель за N дней, перекрытие для определенных заданий будет выше или ниже, чем в настройках пула.
Как работает
Уменьшение перекрытия
В пуле установлено перекрытие 4. Чтобы ускорить выполнение пула и снизить стоимость разметки, мы снизим перекрытие для каждого 3, 5 и 10 задания.
Исполнитель A за последние 10 дней выполнил 15 заданий. Исполнитель B — 30. Исполнитель C — 60.
Для исполнителя A каждое 3 задание будет выдаваться с перекрытием 3, для исполнителя B — каждое 5, для C — каждое 10.
Так мы можем снижать перекрытие для более опытных исполнителей.
Повышение перекрытия
В пуле установлено перекрытие 2. В этом проекте есть опытные исполнители, которые выполняют задания качественно. Мы хотим повысить перекрытие для новых исполнителей и периодически проверять ответы опытных исполнителей. Для этого мы повысим перекрытие для каждого 1, 3, 5 и 10 задания.
Исполнитель A за последние 10 дней выполнил 5 заданий. Исполнитель B — 15. Исполнитель C — 25. Исполнитель E — 40.
Для исполнителя A каждое задание будет выдаваться с перекрытием 5, для исполнителя B — каждое 3, для C — каждое 5, для E — каждое 10.
Так мы повысим перекрытие для неопытных исполнителей и сэкономим средства на ответах опытных исполнителей.
Когда использовать
Используйте выборочную проверку мнением большинства, если:
-
в проекте мало или нет контрольных заданий;
-
у вас есть опытные исполнители, которым вы доверяете.
Как выдаются проверочные задания
-
В открытом пуле исполнителю выдаются проверочные задания, которые не набрали свое перекрытие.
-
Если таких заданий в открытом пуле нет, они переносятся туда из архивных и закрытых пулов в рамках этого же проекта.
-
Если в проекте нет проверочных заданий, у которых перекрытие меньше установленного, в качестве проверочного выдается случайное задание из текущего открытого пула.
Практика
Чтобы добавить выборочную проверку мнением большинства:
-
Загрузите задания в пул при помощи умного смешивания.
-
Перейдите в режим редактирования пула.
-
Под заголовком Настройки «умного смешивания» нажмите кнопку
. -
Укажите, за какое количество дней учитывать ответы, исполнителей, а также перекрытие для заданий с выборочной проверкой большинства.
-
Установите интервалы выполненных заданий и количество проверочных заданий для каждого интервала.
Пример
Советы и рекомендации
-
Не используйте выборочную проверку мнением большинства там, где:
-
много вариантов ответа и много вопросов в задании;
-
к ответу нужно прикрепить файл;
-
требуется расшифровка текста или выделение объектов на фото, и других заданиях, где исполнители не смогут дать одинаковый ответ.
-
-
Используйте выборочную проверку мнением большинства вместе с правилами контроля качества быстрые ответы и пропуск заданий. Так вы отсеите недобросовестных исполнителей, которые пропускают задания или выполняют их слишком быстро, что напрямую влияет на количество выполненных заданий, а значит и на перекрытие.
Что дальше
-
Узнайте больше про настройку перекрытия:
Набор данных, которые нужно разметить в проекте. Можно использовать настройки пула для выбора исполнителей, установки цены за задание и добавления правил контроля качества. Задания в пуле объединены общими свойствами (например, настройки отбора исполнителей, плата за страницу заданий) и отправляются на выполнение единовременно.