Редактирование пула
Напишите нам, если не нашли ответ в Справке. Вы можете приложить скриншоты или видео, чтобы ускорить помощь:
Написать в чат Написать в Telegram
Пул доступен для редактирования как в статусе Закрыт, так и в статусе Открыт. На время редактирования открытый пул перейдет в статус Закрыт. Например, таким образом можно изменить размер выплаты в запущенном пуле.
Примечание
Стоимость задания фиксируется в тот момент, когда исполнитель берет его в работу. Если стоимость была изменена во время выполнения задания, исполнитель получит столько, сколько было указано до редактирования.
Чтобы изменить параметры пула, нажмите кнопку Редактировать вверху страницы пула или
Общая информация
Название пула
Название пула, которое будете видеть только вы (как заказчик) на странице проекта.
Публичное описание
Будет отображаться вместо описания проекта в списке заданий для исполнителей и у привязанного обучения.
Примечание
По умолчанию в списке заданий используется описание проекта. Если вы хотите использовать Публичное описание, то отключите опцию Использовать описание проекта.
Приватный комментарий
При желании вы можете добавить приватное описание пула, которое будет доступно только вам.
Цена
Цена за страницу заданий, ₽
Плата за выполнение страницы заданий в рублях. В качестве разделителя рублей и копеек используйте точку. Если в поле Тип пула выбрано значение Пул с обычными заданиями, то минимальная цена за страницу заданий составляет 0,5 ₽. Для остальных типов пула вы можете указать цену, равную нулю. Подробнее об управлении ценой вы можете узнать в разделе Настройка ценообразования.
Интерес исполнителей к цене
Рассчитывается автоматически. Показывает, насколько цена соответствует ожиданиям исполнителей.
Рекомендуемое количество задач на странице
Рассчитывается автоматически. Показывает, сколько задач на странице рекомендуется для этого типа проекта.
Перекрытие
Количество исполнителей, которые должны выполнить каждое задание пула.
Настраивайте этот параметр, когда нужно, чтобы ваше задание обязательно выполнило несколько человек. В таких задачах, когда собирается датасет фотографий, необходимы записи аудио или проводятся опросы, это просто необходимо. Иногда это повышает качество результатов.
Чтобы сэкономить, вы можете настроить динамическое перекрытие.
Цена за 1 задание
Рассчитывается автоматически с учетом комиссии.
Аудитория
Контент для взрослых
Наличие порнографического или шокирующего контента в заданиях. Задания из таких пулов раздаются только исполнителям, которые готовы их выполнять.
Если вы не проверяли задания на наличие подобного контента, выберите опцию В моих заданиях может содержаться шокирующий или порнографический контент.
Фильтры и навыки
Устанавливая определенные фильтры, вы выбираете для своего задания аудиторию исполнителей, которые соответствуют вашим требованиям. Есть наборы фильтров, фильтры по различным критериям и фильтры по навыкам, которые вы можете создавать самостоятельно.
Если у вас в задании работа с русскоязычными текстами, то вам не нужно, чтобы проект видели не носители русского языка. Вы можете установить фильтр по русскому языку. Аналогично вы можете ограничить исполнителей по месту проживания в конкретной стране или городе и т.д. Подробнее о фильтрах
Если вы дадите исполнителям обучающие задания, то можете добавить в пул навык, чтобы для новых заданий отбирать исполнителей уже с пройденным обучением. Подробнее о навыках
Соотношение скорости и качества
Настройка выбора аудитории исполнителей:
-
Когда исполнителей много, можно быстро получить результат, но качество ответов может быть низким.
-
Если выбрать только лучших исполнителей, качество может быть очень высоким, но ответы придется ждать дольше.
Важно найти баланс, который вас устроит. Подробнее
Контроль качества
Частота показа капчи
Вы можете выбрать, как часто показывать исполнителю капчу:
-
Нет — не показывать капчу.
-
Низкая — показывать капчу каждые 20 страниц заданий.
-
Средняя / Высокая — показывать капчу каждые 10 страниц заданий.
Чтобы показывать капчу исполнителям, настройте блок контроля качества.
Отложенная приемка заданий
Включите эту опцию, чтобы проверить выполненные задания вручную.
Подробнее читайте в разделах Отложенная приемка и Проверка ответов исполнителей.
Срок проверки в днях
Внимание
После окончания периода, указанного в поле Срок проверки в днях, все ответы принимаются автоматически.
Количество дней на приемку заданий (максимум — 21). Устанавливайте тот срок, в который вы сможете проверить правильность выполнения заданий и отклонить в случае низкого качества результатов.
Исполнитель увидит срок проверки:
-
в информации о задании на главной странице Яндекс Заданий;
-
в истории выполненных заданий.
Правила контроля качества
Вы можете добавить и другие правила контроля качества, для этого нажмите кнопку Добавить правило контроля качества. Можно выбрать готовые наборы правил, либо установить нужные вам правила вручную. Подробнее
Опционально
Быстрые ответы
Ограничьте доступ исполнителям, которые отвечают слишком быстро. Укажите минимальное время (в секундах), которое необходимо на выполнение страницы заданий, и задайте условие.
Например: если количество ответов > 5 и количество быстрых ответов > 3, то заблокировать на проекте на 5 дней. Подробнее
Мнение большинства
Оценивайте ответы исполнителей, сравнивая с мнением большинства. Вы можете поощрить исполнителей, которые дают правильные ответы, и блокировать тех, кто часто ошибается.
В поле Считать большинством укажите количество совпавших ответов, которое считается мнением большинства, и задайте условие. Правило начинает работать, когда количество ответов на задание равно перекрытию.
Например: если количество ответов > 5 и процент правильных ответов < 60, то заблокировать на проекте на 10 дней.
Обучение
Это поле доступно только, если у вас есть обучающие пулы в проекте.
Выберите обучающий пул, который будет привязан к основному.
Уровень прохождения
Это поле доступно только, если вы заполнили поле Обучение.
Процент правильных ответов в обучающих заданиях (от 0 до 100), необходимый для допуска к заданиям в пуле. Для подсчета используются первые ответы исполнителя в заданиях.
Минимальный уровень прохождения, который можно установить, равен 5. Исполнители, прошедшие обучение, но не достигшие заданного уровня, не будут допущены к заданиям.
Динамическое ценообразование и перекрытие
Динамическое ценообразование
Этот параметр позволяет варьировать стоимость заданий в зависимости от уровня навыка исполнителей. Подробнее
Динамическое перекрытие
Этот параметр можно использовать, если вы укажете фиксированные значения для полей входных данных. С ним вы можете экономить свой бюджет без установки фиксированного перекрытия для всех заданий пула.
Вы задаете диапазон, сервис анализирует оценки, их согласованность, уровень навыков исполнителей и при необходимости увеличивает перекрытие, не выходя из границ указанных вами значений.
Дополнительные настройки
Приоритет пула внутри проекта
Число от 0 до 100. Позволяет ранжировать пул в рамках проекта. Сначала исполнителю будут выданы задания из пула с бóльшим приоритетом.
Время на страницу заданий, с
Время на выполнение страницы заданий в секундах. Невыполненные задания перераспределяются другим исполнителям.
Рекомендуется выделять на страницу заданий не менее 60 секунд (с учетом времени на загрузку страницы, отправку ответов).
Если вы установите слишком большой интервал, то задания долго не будут закрываться. Если слишком маленький — задания не будут выполнены и оплачены.
Время ожидания закрытия пула, с
Интервал, в течении которого пул будет оставаться открытым с момента выполнения всех заданий. Минимум — 0 (1 в случае использования динамического перекрытия), максимум — 259 200 секунд (трое суток).
Например, вы можете использовать этот параметр, если вам нужен открытый пул, в который периодически загружаете задания.
Дата закрытия пула
Дата закрытия пула. Пул закроется автоматически в указанный срок, даже если задания не были размечены.
Тип пула
Укажите тип пула:
-
Пул с обычными заданиями — основной пул с вашими обычными заданиями;
-
Экзамен — пул, в котором содержатся только контрольные задания;
-
Тренировка — основной пул, который состоит только из обучающих заданий и может иметь нулевую стоимость. Используйте его, чтобы натренировать исполнителей перед выполнением реальных задач, если функциональность обучающего пула вам не подходит;
-
Реабилитация — пул, который поможет исполнителям, допустившим ошибки в разметке, улучшить навык и вернуться к выполнению задания;
-
Другой — если ни один из предыдущих не подошел.
Примечание
Обязательно выберите тип пула, если цена за страницу заданий равна нулю.
Сохранять порядок заданий
Опция выключена (значение по умолчанию)
Загруженные задания разбиваются на страницы и выдаются исполнителям в случайном порядке. Внутри страницы порядок заданий всегда случайный.
Пример
Если при загрузке в пул файла с заданиями со ссылками на картинки вы указали 2 задания на странице, то система может сформировать их следующим образом:
Задания в файле |
Страница 1 |
Страница 2 |
Страница 3 |
Изображение 1 |
Изображение 2 |
Изображение 6 |
Изображение 4 |
Изображение 2 |
Изображение 5 |
Изображение 1 |
Изображение 3 |
Изображение 3 |
|||
Изображение 4 |
|||
Изображение 5 |
|||
Изображение 6 |
Опция включена
Задания будут разбиты на страницы в том порядке, в котором они записаны в файл.
Пример
Если при загрузке в пул файла со ссылками на картинки вы указали 2 задания на странице, то с равной вероятностью вы можете получить страницы, где вначале идет первая ссылка, а затем вторая и наоборот:
Задания в файле |
Страница 1 |
Страница 2 |
Страница 3 |
Изображение 1 |
Изображение 1 |
Изображение 3 |
Изображение 5 |
Изображение 2 |
Изображение 2 |
Изображение 4 |
Изображение 6 |
Изображение 3 |
или |
или |
или |
Изображение 4 |
Изображение 2 |
Изображение 4 |
Изображение 6 |
Изображение 5 |
Изображение 1 |
Изображение 3 |
Изображение 5 |
Изображение 6 |
Если в пуле установлено перекрытие, следующее задание выдается только после того, как предыдущее задание выполнено нужным количеством исполнителей.
Используйте параметр Сохранять порядок заданий, чтобы:
-
Ускорить сбор статистики для контроля мнением большинства.
-
Выдавать задания в порядке приоритета.
Поместите самые важные задание в начале файла. Они выполнятся быстрее и с нужным перекрытием.
Как сделать это с помощью API
Чтобы отредактировать пул с помощью API, отправьте PUT
-запрос со всеми параметрами пула, включая те, которые нужно изменить:
curl -X PUT 'https://tasks.yandex.ru/api/v1/pools/32267581' \
-H 'Content-Type: application/json' \
-H 'Authorization: ApiKey PlaceYourRealOAuthToken_Here' \
-d '{"id":"32267581","project_id":"81776","private_name":"Transcript of audio recordings","may_contain_adult_content":true,"will_expire":"2023-03-09T00:00:00","auto_close_after_complete_delay_seconds":0,"reward_per_assignment":7,"metadata":{},"assignment_max_duration_seconds":600,"auto_accept_solutions":true,"auto_accept_period_day":21,"assignments_issuing_config":{"issue_task_suites_in_creation_order":false},"filter":{"and":[{"or":[{"category":"profile","key":"languages","operator":"IN","value":"EN"}]}]},"quality_control":{"configs":[{"collector_config":{"type":"ASSIGNMENT_SUBMIT_TIME","uuid":"38830d4b-930b-43ab-a98f-f52e992fd11a","parameters":{"fast_submit_threshold_seconds":15}},"rules":[{"conditions":[{"key":"fast_submitted_count","operator":"GTE","value":2}],"action":{"type":"RESTRICTION_V2","parameters":{"scope":"PROJECT","duration_unit":"PERMANENT"}}}]}]},"defaults":{"default_overlap_for_new_task_suites":3},"priority":0,"owner":{"id":"6c6e20dc86cca2ae787afcb2629de162","myself":true},"type":"REGULAR","status":"OPEN","created":"2022-03-10T07:41:53.626","speed_quality_balance":{"percent":100,"type":"TOP_PERCENTAGE_BY_QUALITY"}}'
См. подробную информацию о запросе, параметрах и ответах в разделе Редактировать пул документации API Яндекс Заданий. Там же есть примеры запросов на разных языках программирования.
Что дальше
-
Узнайте больше про настройку пула:
Решение проблем
Как определить время на выполнение задания?
Попробуйте выполнить задания сами, попросите своих друзей и коллег. Найдите среднее время выполнения и добавьте к нему 50%.
Какое значение перекрытия лучше установить?
Оптимальное перекрытие — это перекрытие, которое позволяет получить качество ответов, устраивающее заказчика. Для большинства заданий без отложенной приемки достаточно перекрытия от 3
до 5
. Если у вас простое задание, скорее всего, вам хватит перекрытия 3
. Для заданий с отложенной приемкой установите перекрытие 1
.
Можно ли изменить перекрытие после запуска пула?
Да. Установите новое значение перекрытия в настройках пула. Перезапускать пул не требуется. Обновление настроек обычно происходит быстро, но если заданий много, то может занять несколько минут.
Сколько заданий должно быть на странице?
Количество заданий зависит от сложности и длительности выполнения. Не делайте страницы заданий слишком большими: они неудобны для исполнителей (например, при сбоях в соединении с интернетом) и не пользуются спросом.
Почему упала скорость выполнения пула?
Возможные причины:
-
Вы остановили обучающий пул, и тем самым ограничили количество исполнителей имеющих доступ к заданиям. Запустите обучающий пул снова. Исполнителей, которым доступны задания, станет больше.
-
Установлены слишком жесткие фильтры, например строгое ограничение по навыку, которого нет у большинства исполнителей.
-
Слишком много исполнителей заблокированы. Сделайте правила контроля качества мягче.
Как ускорить выполнение заданий пула?
-
Мотивируйте исполнителей, назначив публичный навык и динамическое ценообразование.
-
Постарайтесь повысить рейтинг проекта, чтобы ваше задание оказалось выше в списке заданий у исполнителей.
-
Отрегулируйте соотношение скорости и качества.
-
Установите более высокий приоритет пула среди всех пулов проекта.
Если изменить время на выполнение одного задания, то изменится ли оно у уже выданных заданий?
Если вы изменили время на выполнение задания, то его значение применится к тем заданиям, которые еще не взяты исполнителями в работу. Тоже самое касается и случая, когда вы закрываете пул. У исполнителя, у которого задание активно, остается возможность его доделать.
Как изменить загруженные в пул задания: отредактировать или удалить их?
Если вы загрузили в пул задания с помощью умного смешивания, можно остановить пул и разметить задания — отредактировать ответы, подсказки или удалить задания.
Если вы загружали их другим способом, нужно клонировать пул и загрузить туда файл с обновленными заданиями.
Определенная цель для разметки. Например, модерация комментариев, классификация изображений, транскрипция аудиозаписей или еще что-то.
Тип автоматизированного теста, который помогает определить, является ли исполнитель человеком. Ограничивает доступ к заданиям исполнителям, которые неправильно ввели капчу несколько раз подряд. Это помогает защититься от роботов.
Формат входных и выходных данных, описываемых в поле Спецификации блока Интерфейс задания при настройке проекта.
Количество исполнителей, которые должны выполнить каждое задание пула. Перекрытие используется для того, чтобы убедиться, что результатам можно доверять.
Оценка качества выполнения заданий исполнителем (число от 0 до 100). Навык может рассчитываться автоматически, например, за правильные ответы на контрольные задания, а также назначаться вручную. Навыки используются для отбора исполнителей в пуле. Подробнее
Задание, которое содержит правильный ответ и подсказку. Если исполнитель ответит неправильно, он увидит подсказку и не сможет перейти к следующей странице заданий, пока не ответит правильно на все задания. В контроле качества и при расчете навыков учитывается только первый ответ на задание.
Файл, содержащий данные, которые нужно разметить. Заказчики используют эти файлы для загрузки заданий. В Яндекс Заданиях поддерживаются файлы в формате TSV.
Правило контроля качества, которое ограничивает количество страниц заданий, которые может выполнить один исполнитель (с учетом перекрытия). Это позволяет выбрать большее количество исполнителей.
Набор данных, которые нужно разметить в проекте. Можно использовать настройки пула для выбора исполнителей, установки цены за задание и добавления правил контроля качества. Задания в пуле объединены общими свойствами (например, настройки отбора исполнителей, плата за страницу заданий) и отправляются на выполнение единовременно.
Задание, которое содержит правильный ответ. Контрольные задания нужны, чтобы следить за качеством ответов исполнителя.
Группа из нескольких заданий, ответы на которые должен отправить исполнитель за один раз.
Пул бесплатных заданий, на которых исполнители могут потренироваться. Обучающие задания содержат правильный ответ и подсказку, которая будет показана, если исполнитель дал неверный ответ.
Параметр настройки пула, который позволяет проверять ответы и при этом платить только за правильные ответы и не платить за задания, которые исполнители сделали некачественно.
Способ сочетания заданий и формирования страниц заданий случайным образом так, чтобы задания не повторялись для каждого исполнителя.