Как устроена Толока

После регистрации в Толоке вы можете создавать задания для исполнителей. Задания должны быть составлены с учетом требований и рекомендаций. Определите внешний вид заданий, настройте логику их распределения и контроль качества ответов. Готовые задания отправляются исполнителям. Плата за выполнение заданий списывается с вашего счета в Толоке. Ответы исполнителей можно получить в TSV-файле результатов.

Задание в Толоке

Задание представляет собой фрагмент веб-страницы, в котором могут быть размещены различные объекты: картинки, текст, поля ввода. Исполнитель читает инструкцию, выполняет задание и вводит ответы. В Толоке можно размещать любые задания, которые соответствуют требованиям.

При создании заданий необходимо указать их параметры (набор полей, типы данных, логика валидации ответов и т. д.). Чтобы запустить задания, нужно определить:

Входные данные загружаются в Толоку в TSV-файле. Группа заданий, сформированная на основе этого TSV-файла, отправляется на выполнение одновременно и называется пулом. Ответы исполнителей можно получить в TSV-файле результатов.

Страница заданий

На HTML-странице можно разместить одно или несколько заданий. Размещение нескольких заданий на странице позволяет:

  • снизить затраты. Исполнитель получает вознаграждение за выполнение всей страницы заданий (таким образом, стоимость одного задания может быть меньше минимальной ставки в $0,01).

  • ускорить получение результатов. Исполнитель будет совершать меньше переходов между страницами.

Распределение заданий

Вы можете ограничить круг исполнителей, которым будут распределяться задания. Для этого в пуле нужно настроить фильтры по региону, навыку, используемому устройству и другим характеристикам исполнителей.

Чтобы получить более надежный результат, задания лучше выдавать с перекрытием: так, чтобы каждое задание было выполнено несколькими исполнителями.

Контроль качества ответов

Чтобы повысить качество ответов:

  • Обучайте исполнителей.

    Исполнители потренируются выполнять ваши задания. В случае неверного ответа будет показана подсказка, объясняющая, какой ответ правильный и почему.

  • Контролируйте качество.

    Позволяют установить критерии качества и выдавать задания только тем, кто удовлетворяет этим критериям.

    Примеры блоков контроля качества: «Если доля правильных ответов в пуле меньше 60%, заблокировать доступ к проекту», «Если исполнитель пропустил 5 заданий подряд, приостановить для него доступ к пулу».

  • Используйте отложенную приемку заданий.

    Позволяет проверить задания вручную и отклонить их, если задание выполнено некачественно. Отклоненные задания не оплачиваются.