Статистика по пулу

Отслеживать выполнение заданий можно на странице пула или нажав кнопку Статистика. Вы также можете узнавать о событии из писем на электронную почту, уведомлений в браузере или на странице Сообщения. В Профиле откройте вкладку Уведомления и выберите, какие уведомления и каким способом вы хотите получать.

Поле

Описание

Приблизительное время завершения

Ожидаемое время выполнения заданий в днях и часах. Рассчитывается исходя из среднего времени на одну страницу заданий.

Формула: ,

где:

 — число невыполненных страниц или выполненных в недостаточном перекрытии.

 — среднее время на одну страницу. Вычисляется исходя из времени, которое прошло с момента открытия пула, и числа выполненных страниц.

Это прогнозируемый показатель, который обновляется по ходу выполнения заданий исполнителями.

Рекомендации
  • Если этот показатель большой, скорее всего в вашем проекте осталось мало пользователей. Проверьте количество активных исполнителей, среднее время выполнения страницы заданий.

  • Если раньше показатель был маленький, а затем большой — проверьте настройки правил контроля качества, возможно у вас слишком много забаненных исполнителей.

  • Если раньше показатель был большой и сейчас остается большим, а количество активных исполнителей маленькое — проверьте настройки фильтров и обучение. Возможно мало кто видит ваши задания или не могут пройти обучение.

Среднее время выполнения страницы заданий

Среднее время выполнения страницы заданий в пуле. Указывается в секундах.

Вычисляется по 1000 последних выполненных страниц заданий.

Рекомендации

Если среднее время больше, чем вы ожидали, а качество результатов низкое, перепроверьте инструкцию.

Возможно ваши задания слишком сложные. Используйте декомпозицию и проверьте интерфейс задания. Затем попробуйте протестировать их на тех же исполнителях в формате обучения или опроса.

Если среднее время меньше, а качество результатов невысокое, пересмотрите настройки контроля качества.

Просроченных страниц заданий

Число страниц заданий, у которых истек срок выполнения.

Учитываются страницы, которые исполнители не смогли выполнить вовремя или отказались от их выполнения. Время на страницу заданий указывается при настройке пула.

Когда исполнитель отказывается выполнять задание — нажимает кнопку Выйти, задание оказывается в статусе просроченного. При этом исполнитель может вернуться к выполнению задания снова, если его не выполнили другие исполнители или не удалил из пула заказчик.

Рекомендации

Исполнители могли отказаться выполнять страницу заданий потому что:

  • Задания слишком сложные.
  • Заданий на странице было много.
  • Задания не работают — ответы невозможно отправить.
  • Исполнители не разобрались в инструкции и в интерфейсе задания.

Если в вашем пуле много просроченных страниц заданий, мы рекомендуем ознакомиться с разделом Советы по составлению заданий.

Пропущенных страниц заданий

Число страниц заданий, пропущенных исполнителями. Учитываются страницы, которые исполнители не захотели выполнять, и перешли к следующим.

Когда исполнитель нажимает кнопку Пропустить, задание оказывается в статусе пропущенного. При этом исполнитель больше не сможет вернуться к его выполнению.

Рекомендации

Если в вашем пуле много пропущенных страниц заданий, мы рекомендуем ознакомиться с разделом Советы по составлению заданий, а также настроить правило пропуск заданий.

Задания

На графике показано количество заданий по типам.

  • Отправлено на проверку — количество страниц заданий, отправленных на проверку.
  • Принятые — количество принятых страниц заданий.
  • Пропущенные — количество страниц заданий, пропущенных исполнителями.
  • Просроченные — число страниц заданий, у которых истек срок выполнения. Учитываются страницы, которые исполнители не смогли выполнить вовремя или отказались от их выполнения.
Рекомендации

Если у вас много пропущенных или просроченных заданий, мы рекомендуем ознакомиться с разделом Советы по составлению заданий, а также настроить правило пропуск заданий.

Среднее перекрытие

Среднее количество исполнителей, выполнивших одно и то же задание в пуле.

Рекомендации

Если вам кажется, что это число слишком большое или маленькое, возможно, вы неверно настроили повторное выполнение заданий после блокировки исполнителя или обработку отклоненных и принятых заданий . Дополнительно стоит проверить:

Время выполнения страницы заданий

Среднее время, потраченное исполнителями на выполнение страницы заданий в пуле. Указывается в секундах.

Потрачено денег (+ надбавка)

Сумма потраченных средств в пуле. В скобках указана сумма комиссии.

Если вы потратили больше, чем планировали, проверьте настройки цены в пуле и правила контроля качества. Например, динамическое ценообразование и повторное выполнение заданий после блокировки исполнителя увеличивают стоимость пула.

Обратите внимание, что минимальная надбавка составляет 0.005$.

Рекомендации

В первую очередь стоит проверить правила контроля качества, отключить правила, которые увеличивают перекрытие, а затем пересмотреть назначенную за страницу заданий цену. Возможно, ее стоит снизить. Но не делайте ее неоправданно маленькой.

Также вы можете увеличить или уменьшить количество заданий на странице и скорректировать в соответствии с этим цену.

Приблизительный бюджет(+надбавка)

Сумма израсходованных средств и ожидаемых затрат (если все задания будут выполнены и все ответы будут приняты). В скобках указана сумма комиссии.

Рекомендации

Это показатель, использует имеющиеся данные для прогнозирования итоговой стоимости. Если он вас не устраивает, остановите пул и измените настройки. Подумайте, нужно ли вам динамическое перекрытие, динамическое ценообразование и, например, повторное выполнение заданий после блокировки исполнителя.

Пересмотрите цену за страницу заданий, возможно, вы ее снизите без потери интереса исполнителей.

Затраты (надбавка не включена)

На графике показана сумма потраченных средств без учета надбавки.

  • Затраты на бонусы — сумма средств, потраченных на бонусы.
  • Затраты на задания — сумма средств, потраченных на задания.

Средняя стоимость задания

Средняя цена разметки одного основного задания в пуле в долларах США с учетом перекрытия.

Обратите внимание, что указывается стоимость одного основного задания, а не всей страницы с учетом перекрытия.

Рекомендации

Если цена вам кажется завышенной, проверьте настройки цены в пуле и правила контроля качества. Например, динамическое ценообразование и повторное выполнение заданий после блокировки исполнителя увеличивают стоимость пула.

Качество по контрольным и обучающим заданиям

Этот график показывает процент правильных ответов на контрольные и обучающие задания.

Рекомендации

Если этот показатель слишком низкий, возможно ваши задания слишком сложные или инструкция написана недостаточно понятно.

Возможно в контрольных заданиях есть ошибки или они неактуальны. Если в заданиях есть ссылки, проверьте, что они работают.

Еще одна причина — неверные настройки правил контроля качества. Они недостаточно отсеивают плохих исполнителей.

Заблокировано по правилам

Число исполнителей, заблокированных по правилам контроля качества.

Обратите внимание, что число исполнителей считается отдельно по каждому правилу.

Рекомендации

Если этот показатель слишком высокий или низкий, проверьте настройки правил контроля качества.

Заблокированные пользователи

Общее число исполнителей, заблокированных в этом пуле.

На графике изображены два показателя:

  • В пуле — число исполнителей, заблокированных в пуле.
  • У заказчика — число исполнителей, заблокированных у заказчика.

Обратите внимание, что это только заблокированные исполнители. Исполнители, которым приостановлен доступ к пулу не входят в этот график.

Рекомендации

Если их слишком много, проверьте настройки правил контроля качества, возможно, они слишком жесткие.

Активные пользователи, для кого доступны задания

Число исполнителей, отобранных для пула с помощью фильтров. Учитываются только исполнители, которые просматривали и выполняли задания в Яндекс.Толоке в течение последнего часа.

Рекомендации

Если их мало, проверьте настройки фильтров и правил контроля качества.

Заинтересованные пользователи

Число исполнителей, которые начали выполнять или выполнили хотя бы одну страницу заданий.

Этот показатель включает в себя как заинтересованных, так и взявшихся исполнителей.

Рекомендации

Если разница между заинтересованными и взявшимися исполнителями большая, возможно, они недостаточно хорошо поняли инструкцию, задание оказалось слишком сложным, присутствуют ошибки в интерфейсе.

Взявшиеся пользователи

Количество исполнителей, которые выполнили хотя бы одну страницу заданий.

Рекомендации

Если этот показатель низкий, а количество качественно выполненных заданий вас устраивает, то вы достаточно хорошо настроили проект.

Выполненных страниц заданий на одного исполнителя

Среднее количество выполненных страниц заданий на одного исполнителя.

Если ваш пул большой и долго размечается, а страниц заданий на одного исполнителя мало, возможно вы неправильно настроили правила контроля качества или фильтры.

Рекомендации

Если количество страниц заданий на одного исполнителя близко к порогу срабатываний правил контроля качества — проверьте правила контроля качества, отвечающие за блокировку пользователей. Дополнительно стоит проверить графики: заблокированные пользователи и заблокировано по правилам.

Исполнители, выполнявшие задания в пуле

Этот график показывает общее число исполнителей, которые выполнили хотя бы одну страницу заданий в пуле.

Рекомендации

Если исполнителей мало, проверьте настройки правил контроля качества, фильтры.

Дополнительно стоит проверить графики: заблокированные пользователи и заблокировано по правилам.

Решение проблем

Почему упала скорость выполнения пула?
Возможные причины:
  • Вы остановили обучающий пул, и тем самым ограничили количество исполнителей имеющих доступ к заданиям. Запустите обучающий пул снова. Исполнителей, которым доступны задания, станет больше.

  • Установлены слишком жесткие фильтры, например строгое ограничение по навыку, которого нет у большинства пользователей.
  • Слишком много пользователей заблокированы. Сделайте правила контроля качества мягче.
Как ускорить выполнение заданий пула?
Почему в прогресс-баре максимум выполненных заданий меньше, чем общее загруженное количество?

В прогресс-баре указано количество страниц заданий с учетом перекрытия. Если перекрытие больше единицы, то количество страниц заданий будет отличаться от общего количества заданий.