Все вопросы на одной странице

Да, вы можете использовать при регистрации в Яндекс ID иностранный номер телефона.

1. Убедитесь, что вы правильно ввели номер телефона.

2. Проверьте номер телефона, указанный в Яндекс ID. Он должен быть указан как основной. Если в Яндекс ID указан другой номер телефон, то SMS c кодом придет на него.

Также вы можете воспользоваться Справкой Яндекс ID. Если проблему не удалось решить, напишите в службу поддержки.

Аккаунт привязан к адресу электронной почты, указанному при регистрации. Привязать аккаунт к другой учетной записи невозможно.

Чтобы управлять финансами и взаимодействовать с внешними сервисами, нужно входить под логином и паролем, указанными при регистрации. Если вы не хотите передавать учетные данные аккаунта, другому пользователю необходимо зарегистрировать свой аккаунт.

Изменить тип аккаунта с «Заказчика» на «Исполнителя» невозможно.

Для выполнения заданий вам необходимо повторно зарегистрироваться в Яндекс Заданиях как исполнитель, но с другим логином.

Чтобы создать аккаунт исполнителя:

1. Выйдите из аккаунта заказчика.

2. Перейдите на главную страницу Яндекс Заданий.

3. Нажмите кнопку Присоединиться.

4. Следуйте указаниям системы.

Если вы получили такое предупреждение, следуйте рекомендациям:

• Убедитесь, что вы правильно ввели номер телефона.

• Учтите, что на один номер телефона можно завести только 1 аккаунт заказчика (см. Пользовательское соглашение).

• Если в Яндекс ID привязан неверный номер, измените его. Подробнее о привязке номера см. Справку Яндекс ID.

• Если вы не помните учетные данные вашего аккаунта в Яндекс Заданиях, воспользуйтесь Восстановлением доступа.

• Если вы удалили ваш аккаунт в Яндекс Заданиях, создайте новый Яндекс ID и зарегистрируйтесь в Яндекс Заданиях.

Чтобы поменять номер телефона, перейдите в Яндекс ID и измените основной номер.

Зарегистрируйтесь в роли заказчика в песочнице.

Зарегистрируйтесь с другим аккаунтом в роли исполнителя.

В аккаунте заказчика добавьте исполнителя в список доверенных.

Создайте и запустите задание. Оно появится в списке заданий у ваших доверенных исполнителей. Подробнее об этом можно узнать на странице помощи.

Проверьте, что:

1. Пул запущен.

2. Исполнитель добавлен в доверенные.

3. Доверенный исполнитель зарегистрирован в песочнице как исполнитель.

4. Доверенный исполнитель не использовал социальные сети при регистрации.

5. Доверенный исполнитель подходит под установленные фильтры.

Чтобы протестировать свое задание, добавьте себя в доверенные исполнители в Песочнице. Для этого на странице Исполнители нажмите Добавить доверенных исполнителей. Вводите логин для аккаунта исполнителя с учетом регистра символов.

Для этого понадобится специальная версия приложения Яндекс Заданий для песочницы. Чтобы ее получить, напишите в службу поддержки.

Проверьте в предпросмотре пула с аккаунта заказчика, можно ли отправить задание. Если тоже не получится, скорее всего, в вашем проекте ошибка.

Нет, для каждой версии Яндекс Заданий нужен отдельный аккаунт. Чтобы создать задание в песочнице, зарегистрируйтесь в ней как заказчик, а чтобы выполнить свое задание, зарегистрируйте еще один аккаунт как исполнитель.

Возможные причины:

• Исполнитель не зарегистрирован в песочнице. Аккаунт, зарегистрированный в основной версии Яндекс Заданий не подойдет. Убедитесь, что вы указали правильный аккаунт исполнителя в качестве доверенного.

• Аккаунт исполнителя авторизован через социальные сети. Зарегистрируйте нового пользователя на Яндексе.

Скорее всего, проект настроен неправильно. Белый экран часто появляется при ошибках в интерфейсе задания (например, в JavaScript-коде). Кнопка Далее может не срабатывать, если:

• в выходной спецификации не хватает какого-то поля;

• в свойствах полей указаны недопустимые значения;

• в блоке JavaScript настроена валидация по несуществующему полю.

Есть три основных варианта решения:

• Разместить инструкцию в самом задании так, чтобы она не перегружала интерфейс.

• Сделать инструкцию в виде бокового окна, чтобы можно было быстро развернуть и скрыть.

• Разместить инструкцию под катом или добавить подсказки к отдельным элементам интерфейса. Для лучшего результата рекомендуем предварительно отобрать подходящих исполнителей и выставить правила контроля качества.

Нет, но вы можете разместить ссылки на медиафайлы.

Недопустимые теги нельзя использовать, они удаляются при сохранении проекта.

См. список допустимых тегов.

По умолчанию в обучении отображается инструкция проекта. Чтобы написать отдельную инструкцию, снимите флажок Использовать инструкцию проекта. Не забывайте обновлять инструкцию к обучению, если что-то меняется в инструкции к основному заданию.

При воспроизведении медиафайлов по ссылкам могут возникать ошибки. В окне предпросмотра показывается причина этих ошибок. В таблице ниже описано, как их решить.

Чтобы в интерфейсе отображалась горячая клавиша, задайте ей то же действие (action), которое происходит при нажатии кнопки.

Если для компонента действие не задано, то его необходимо назначить:

• action.set для радио-кнопок;
• action.toggle для чекбоксов;
• action.play-pause для управления воспроизведением;
• action.open-close для увеличения картинки.

Полный список действий можно посмотреть в разделе Список действий.

Особенности:

• Тип данных для действий должен совпадать. Например, горячая клавиша будет работать, но не будет отображаться, если кнопка при нажатии записывает в результат строку “true”, а для горячей клавиши указано логическое значение true.

• Если при нажатии кнопки вызывается несколько действий (action.bulk), то их последовательность для горячей клавиши должна быть такой же.

• Если используется условный оператор для выбора действия, например helper.if, то при нажатии горячей клавиши должен вызываться тот же условный оператор (helper.if) по тем же правилам.

Чтобы добавить в строку кавычку вида " или обратную косую черту \, дополните их обратной косой чертой \. Кавычки вида « » и / экранировать не надо.

Скорее всего, проект настроен неправильно. Белый экран часто появляется при ошибках в интерфейсе задания (например, в JavaScript-коде). Кнопка Далее может не срабатывать, если:

• в выходной спецификации не хватает какого-то поля;

• в свойствах полей указаны недопустимые значения;

• в блоке JavaScript настроена валидация по несуществующему полю.

Да, конечно, один и тот же навык можно назначать и использовать на различных проектах. Но чаще всего один навык используется в рамках одного проекта. Если исполнитель хорошо выполняет одно задание, это не значит, что он так же успешно справится с другим. Кроме того, используя фильтры по давно настроенным навыкам, вы ограничиваете количество доступных исполнителей.

Если речь идет о нескольких проектах, то так сделать не получится.

Вы можете перенести все в один проект и в блоках контроля качества использовать параметр Помнить значения. Примеры вы можете посмотреть в статье Контрольные задания.

Для того, чтобы использовать Агрегацию результатов по навыку, вам нужно будет перечислить все возможные значения навыка. Если значений навыка много, то такой способ может оказаться не очень удобным. Возможно, подойдет другой способ агрегации.

Задания из открытого пула доступны всем исполнителям, которые соответствуют установленным фильтрам.

В дополнение к фильтрам вы можете использовать для этой цели ограничение по навыкам.

За количество дней, в течение которых сохраняется тренировочный навык, отвечает параметр Повторное прохождение.

Навык будет удален через количество дней, указанное в поле Повторное прохождение, если исполнитель:

• Получил значение навыка ниже значения в поле Уровень прохождения.

• Не выполнил ни одного задания, к которому привязано обучение, в течение этого срока.

С истекшим навыком вашим исполнителям нужно проходить обучение заново.

Задания в пулах по умолчанию доступны для веб-версии Яндекс Заданий и мобильного приложения. Проверьте настройки пула, возможно у вас настроен фильтр: Клиент = Веб-версия Яндекс Заданий

Если исполнитель не соответствует установленным фильтрам, он не увидит задание.

Вы можете протестировать задание в песочнице, добавив нужного пользователя в список доверенных.

Можно, чтобы отобрать исполнителей для пула используйте фильтры.

Вы можете назначить им навык по результатам выполнения заданий в предыдущих пулах. Этот навык укажите в качестве фильтра в новом пуле.

Укажите этот навык в качестве фильтра, а значение оставьте пустым. Это равносильно тому, что навык отсутствует.

Если у исполнителя уже есть навык, то добавить ему этот же навык из интерфейса проверки задания нельзя. Вы можете зайти в профиль исполнителя и отредактировать значение навыка.

Если навык публичный или обучающий, то видят — им приходит сообщение об этом.

Такой возможности нет. Если навык публичный, то исполнитель видит его в своем профиле.

Заказчику недоступна полная информация о каждом конкретном исполнителе. Например, заказчик не видит дату рождения, пол, фамилию и имя. При этом фильтры по дате рождения и полу в настройках пула ему доступны, поскольку они позволяют отобрать группу исполнителей, не получая информации о каждом в отдельности. Это уменьшает риск деанонимизации пользователей.

Вы можете использовать для этого правило Контрольные задания:

1. Загрузите файл с заданиями при помощи Умного смешивания.

2. Укажите student в качестве правильного ответа на вопрос. Остальные вопросы не учитывайте (оставьте поля пустыми или не ставьте галочку).

3. Добавьте в пул правило Контрольные задания: если процент правильных контрольных ответов = 100, то установить значение навыка Студент = 1.

Настройка блоков контроля качества зависит от типа заданий. Общие рекомендации:

• Обязательно используйте один или несколько способов контроля качества.

• Подсчет быстрых ответов имеет смысл для большинства заданий.

• Если в задании нужно выбрать один из готовых вариантов ответа, его лучше проверить с помощью мнения большинства или контрольных заданий.

• Если задание подразумевает ответ в виде текста, ссылки, загруженного фото и т. д., оптимальным методом контроля качества является отложенная приемка. Приемку заданий можно поручить исполнителям. Создайте задания с вопросом (например, «Правильно ли переведена фраза?») и вариантами ответов (например, «да»/«нет»). Настройте перекрытие и проверку мнением большинства.

• Если задание похоже на опрос (например, выбрать более приятные картинки из ряда), мнение большинства не подходит для контроля качества. В этом случае составьте контрольные задания для проверки качества работы исполнителей.

Рекомендуем добавлять не менее 1% контрольных заданий в пул. А для маленьких пулов — 5–10%.

Если по каким-то причинам процесс разметки завершился неудачно, свяжитесь со службой поддержки. Для этого на вкладке контрольных заданий или на странице пула нажмите кнопку Написать в поддержку. После решения проблемы вы сможете заказать разметку контрольных заданий снова.

Чтобы новые страницы с заданиями стали доступны всем исполнителям, в том числе тем, которые уже выполнили часть заданий в пуле:

1. Остановите пул.

2. Загрузите файл с новыми контрольными заданиями.

3. Запустите пул.

Для открытого пула мы не рекомендуем делать контрольные задания из уже выполненных заданий другого типа. Так как исполнители, которые уже дали на них ответы, не смогут повторно выполнить такие задания как контрольные. Чтобы эти исполнители смогли продолжить выполнять страницы с заданиями, контрольные задания в пуле должны быть новыми.

Правило Контрольные задания начинает действовать после того, как исполнитель дал ответы на заданное число контрольных заданий. Если у вас в пуле есть и обучающие, и контрольные задания, то вы можете учитывать отеты:

• на обучающие и контрольные задания (параметр Количество ответов);
• только на контрольные (параметр Количество контрольных ответов).

Как только нужное количество ответов набрано, вычисляется процент правильных и неправильных ответов и выполняется действие (назначить навык, заблокировать в пуле или на проекте). Далее этот процент обновляется по мере выполнения заданий исполнителем. Количество последних ответов исполнителя, которое учитывается в расчете, задается в поле Учитывать последних ответов на контрольные задания. Если оставить его пустым, будут учитываются все ответы исполнителя в пуле.

Лучше использовать один навык в проекте. Можно выбрать способ подсчета навыка:

• Подсчет навыка для каждого пула отдельно. Текущее значение навыка — это значение навыка в пуле, который выполнялся последним. Такой вариант удобен, если:

  • Пулы предназначены для разных групп исполнителей (например, настроены фильтры по городам, странам).

  • Пулы запускаются последовательно, и вы не хотите учитывать качество ответов в предыдущих пулах при подсчете навыка в выполняемом пуле.

  Этот способ подсчета действует по умолчанию при добавлении блока контроля качества в пул. Для блока по контрольным заданиям оставьте пустым поле Учитывать последних ответов на контрольные задания.

• Подсчет навыка по всем выполненным заданиям в проекте. Такой вариант удобен, если пулы небольшие и вам не нужно рассчитывать навык для каждого пула.

  Этот способ подсчета доступен только для навыков по контрольным заданиям. Чтобы использовать его, заполните поле Учитывать последних ответов на контрольные задания в блоках контроля качества в пулах.

Действительно, такое правило выглядит слишком строго. Даже самый внимательный исполнитель может ошибиться — правило лучше сделать менее строгим. Помимо блокировки у отдельных заказчиков, у нас есть системные процессы, которые блокируют в Яндекс Заданиях исполнителей, которые систематически проваливают проверку капчей.

Частота показа капчи настраивается в пуле:

• Нет — не показывать капчу.

• Низкая — показывать капчу каждые 20 страниц заданий.

• Средняя / Высокая — показывать капчу каждые 10 страниц заданий.

Капча обычно используется в простых проектах с автоприемкой: классификация, категоризация, поиск информации. Это те проекты, в которых мало вариантов ответов, не нужно загружать файлы или писать тексты. Она позволяет отсеивать ботов и тех исполнителей, которые небрежно выполняют задания.

Частота показа капчи настраивается в пуле:

• Нет — не показывать капчу.

• Низкая — показывать капчу каждые 20 страниц заданий.

• Средняя / Высокая — показывать капчу каждые 10 страниц заданий.

Процент правильных ответов зависит от того, как часто исполнитель ошибается при вводе капчи. Учитывается количество вводов капчи, указанное в поле Учитывать последних вводов капчи. Если значение в поле не указано, то в расчет попадают все капчи, которые появляются при выполнении заданий пула, использующего данное правило. Подробнее см. в разделе Капча.

Обучающие и контрольные задания соответствуют спецификации проекта. Но вы можете сделать отдельный проект и разместить в нем необходимые задания, а потом по ответам из них назначить навык, по которому вы будете допускать исполнителей к основному проекту.

Экзаменационным мы называем пул, в котором содержатся только контрольные задания. Он обычно делается небольшим и служит для проверки того, как исполнители научились выполнять задание после чтения инструкции и прохождения обучения. В отличие от пула для основной разметки, ответы на все задания вам уже известны. Стоимость можно установить нулевой.

По результатам ответов на контрольные задания вы можете назначить исполнителям навык и далее указать его в основном пуле в качестве фильтра. Например, МойНавык = 80 или = отсутствует. Составление экзамена не обязательно — в простых заданиях достаточно тренировки, но многие заказчики используют также и экзамен.

Подробнее см. в разделе Использование экзаменов.

Да, в настройках быстрых ответов указывается время за выполнение одной страницы с заданиями.

Действительно, при копировании настроек фильтров и контроля качества уже добавленные вручную настройки заменяются. Мы предупреждаем об этом в окне копирования настроек.

К сожалению, да, может. Поэтому мы рекомендуем перед основным заданием делать обучение или экзамен, чтобы до основного пула допускались только те, кто хорошо прошел предыдущий этап отбора.

При загрузке заданий используйте умное смешивание, тогда экзамен будет с бесконечным перекрытием.

Однако это чревато тем, что вы будете тратить на экзамен много денег. Возможно, его стоит открывать тогда, когда открывается боевой пул, и закрывать, когда разметка боевого пула завершается.

Вы можете добавить обучающий пул, чтобы протестировать исполнителей. По результатам прохождения тестирования выдавайте навыки исполнителям в соответствии с тем, что они хорошо выполняют.

Затем откройте пулы только для исполнителей, имеющих определенный навык — для этого используйте фильтры.

Умное смешивание задается при загрузке заданий в пул. После создания пула нажмите Загрузить данные и выберите способ распределения заданий Умное смешивание. При этом вы можете расположить задания в любом порядке и загрузить их отдельными файлами или одним файлом.

Если исполнителю уже начислены деньги за задания, то обратно их не вернуть.

Да, может, если оба пула ему доступны. Чтобы ограничить доступ исполнителя к следующим заданиям, используйте правило Выполненные задания — выберите блокировку на проекте.

Нет, ответы такого исполнителя автоматически не исключаются из итогового файла.

Но вы можете это сделать самостоятельно. Для этого при скачивании результатов выберите опцию Не учитывать ответы заблокированных пользователей — из результатов удалятся ответы заблокированных в момент выгрузки исполнителей. Также вы можете отправить все ответы заблокированных исполнителей на повторное выполнение другим исполнителям — для этого используйте Повторное выполнение заданий после блокировки исполнителя.

Первый пул сделайте на базе обучающего пула. А второй — на базе основного и укажите тип пула Экзамен. Если в нем будут только контрольные и/или обучающие задания, такой пул может иметь нулевую стоимость.

В экзаменационном пуле вы можете назначить навык, который будет определять результат экзамена и служить допуском в основной пул. Например: Если количество ответов ≥ 10 , то установить навык из поля <экзаменационный навык> % правильных ответов.

В требованиях к исполнителям экзаменационного пула укажите: <экзаменационный навык> <80 или = отсутствует>.

Установите в основном пуле фильтр: <экзаменационный навык> >=80 и <основной навык> >=70 или = отсутствует>. Значения навыка вы сможете подобрать в зависимости от того, насколько хорошо исполнители справляются с вашим заданием.

Считаются все ответы в задании. Если на какой-то вопрос ответ отличается, результат всего задания засчитывается как несовпадающий с ответами других исполнителей.

Нет, при такой настройке каждый раз, когда будет выполняться условие правила, исполнителю будет устанавливаться навык = 1. Чтобы изменять значения по мере проверки заданий, понадобится «ступенчатое» правило (несколько одинаковых правил) с разным значением параметра Количество проверенных ответов.

Технически с одним заданием в обучении — никак. Навык будет или 0, или 100. Рекомендуем добавить несколько задний, хотя бы 2: на первом исполнитель потренируется, а второе сможет уже выполнить верно. Тогда можно начать допускать к основному пулу со значением навыка 50.

Также вы можете создать обучающий пул на основе обычного. Назначайте навык правилом Контрольные задания — тогда к основному пулу вы можете допустить исполнителей с любым уровнем навыка, даже нулевым. Но мы бы не советовали допускать к разметке тех, кто не справился с обучением.

Нет, но вы можете создать пул с обучающими заданиями на базе основного:

1. В поле Тип пула выберите Тренировка.
2. Включите опцию Отложенная приемка заданий.
3. Укажите количество дней на проверку в поле Срок проверки в днях.

Нет, не видят.

Если вы передаете тексты во входные данные, то достаточно загрузить в пул два разных задания. В одном из них в поле INPUT:<имя входного поля> вы передадите первый вариант текста, в другом — второй вариант. А если текст в самом шаблоне задания в блоке HTML, то нужно клонировать проект. Чтобы исполнитель мог сделать только одно задание в вашем проекте, используйте правило Выполненные задания. Вы можете назначить навык или заблокировать исполнителя после того, как он отправит один ответ.

Нет, исполнители не знают о блокировке.

В поле Учитывать последних ответов на контрольные задания указывается количество последних ответов исполнителя. Если у вас задание с отложенной приемкой, то для настройки правила по вашей логике укажите 3 в параметре Количество проверенных ответов.

Чтобы выполнять действия с исполнителями (назначение навыка, блокировка) на основе мнения большинства, добавьте в пул правило Мнение большинства.

Не забудьте включить опцию Сохранять порядок заданий в параметрах пула. Мнение большинства применяется в проектах с готовыми вариантами ответа. Для полей с вводом текста или с загрузкой файлов это правило не используется.

Чтобы ответ на контрольное или обучающее задание был засчитан как верный, он должен полностью совпасть с эталоном.

Для этого текст нужно нормализовать с помощью JavaScript:

1. Удалить пробелы, знаки препинания, специальные символы и заглавные буквы.
2. Записать результат в отдельное выходное поле. Такой обработанный ответ можно уже сравнивать с контрольным.

Другой вариант отбора исполнителей для проекта такого типа — отложенная приемка.

Это общее количество ответов на контрольные вопросы.

Для этого есть два способа:

1. Использование действия заблокировать в правилах контроля. В поле Если укажите условие, при котором исполнитель будет заблокирован, и выберите действие заблокировать в поле то.

   Пример

   

   Если исполнитель дал не меньше 3 ответов на контрольные задания и доля правильных ответов меньше 60%, то он будет заблокирован на проекте.

2. Использование навыков и фильтров по навыкам. Это будет полезно в том случае, если вы хотите запретить исполнителям с низким навыком выполнять ваши задания.

   Пример

   

   Если исполнитель дал не меньше 3 ответов на контрольные задания, то доля правильных ответов будет записана как значение навыка.

Возможные причины:

• Вы остановили обучающий пул, и тем самым ограничили количество исполнителей имеющих доступ к заданиям. Запустите обучающий пул снова. Исполнителей, которым доступны задания, станет больше.

• Установлены слишком жесткие фильтры, например строгое ограничение по навыку, которого нет у большинства исполнителей.

• Слишком много исполнителей заблокированы. Сделайте правила контроля качества мягче.

• Мотивируйте исполнителей, назначив публичный навык и динамическое ценообразование.

• Постарайтесь повысить рейтинг проекта, чтобы ваше задание оказалось выше в списке заданий у исполнителей.

• Отрегулируйте соотношение скорости и качества.

• Установите более высокий приоритет пула среди всех пулов проекта.

Оптимальное перекрытие — это перекрытие, которое позволяет получить качество ответов, устраивающее заказчика. Для большинства заданий без отложенной приемки достаточно перекрытия от 3 до 5. Если у вас простое задание, скорее всего, вам хватит перекрытия 3. Для заданий с отложенной приемкой установите перекрытие 1.

Да. Установите новое значение перекрытия в настройках пула. Перезапускать пул не требуется. Обновление настроек обычно происходит быстро, но если заданий много, то может занять несколько минут.

Да, такое может произойти. Необходимо установить достаточный интервал закрытия пула.

В этом случае, если у вас не наберется 3 одинаковых ответа для задания, то ни один из исполнителей не будет считаться ни плохим, ни хорошим. Система не будет знать, кто из исполнителей ошибся.

А если вы установите Перекрытие = 3 и Считать большинством = 2, то два исполнителя, у которых совпали ответы, будут считаться хорошими. Третий исполнитель, ответ которого отличается, будет считаться плохим.

Да, можно. Настройте динамическое перекрытие.

Чтобы одно и то же задание выполнило несколько разных исполнителей, используется перекрытие. Его значение устанавливается в настройках пула.

В индикаторе выполнения пула указано количество страниц заданий с учетом перекрытия. Если перекрытие больше единицы, то количество страниц заданий будет отличаться от общего количества заданий.

Количество заданий зависит от сложности и длительности выполнения. Не делайте страницы заданий слишком большими: они неудобны для исполнителей (например, при сбоях в соединении с интернетом) и не пользуются спросом.

Попробуйте выполнить задания сами, попросите своих друзей и коллег. Найдите среднее время выполнения и добавьте к нему 50%.

Вы можете указать сколько заданий будет на странице при загрузке заданий в пул. Подробнее о способах распределения заданий по страницам можно узнать здесь.

Каждое задание должно быть описано на отдельной строке в файле с заданиями. Подробнее об этом вы можете прочитать здесь.

Когда вы создадите пул, то в нем будет настройка количества заданий на странице.

Заэкранируйте запятые обратным слэшем \.

Для загрузки файла используйте кнопку Загрузить результаты. Формат можно посмотреть здесь.

Проверка ответов выполняется в файле с заданиями.

Текст из поля hint будет показан исполнителю в верхней части задания на красном фоне, если он в обучающем задании даст ответ, который отличается от указанного правильного.

Пример

Если текст из поля hint необходимо отразить в несколько строк, то переносы добавляются в файл, а текст заключается в кавычки.

Add your text here — это подсказка, которая говорит о том, что текст в поле вы можете заменить на свои данные для задания. О структуре файла и его заполнении можно узнать здесь.

Из-за наличия кавычек в одном слове загружать ответ следует таким образом: "Сколько букв в слове ""Лихтенштейн""". Если внутри текста есть экранирование кавычками, то весь текст следует заключать в кавычки. Подробнее описано в документации.

Если заголовки столбцов некорректны, файл будет полностью отклонен. В остальных случаях указано количество заданий с ошибками обработки.

Проверьте поле hint. Для обычных заданий это поле должно быть пустым.

В файле с основными заданиями должны быть заполнены столбцы с заголовками INPUT. Вы можете увидеть эти заголовки, если скачаете образец файла из пула.

Если создаете контрольные задания, то заполните столбцы с правильными ответами — GOLDEN.

Если обучающие, то также понадобится заполнить столбец HINT:text. Для основных заданий все столбцы кроме INPUT не нужны, их можно удалить.

Формат файла должен быть TSV, кодировка — UTF-8.

Подробнее о создании файла в документации. Если при загрузке возникают ошибки, поищите вашу ошибку на этой странице.

Ошибка будет возникать, если на вход ожидается тип URL, а приходит строка.

Причин может быть две:

• Входное поле имеет тип "ссылка".

• Пул работает на неактуальной версии проекта. То есть создан до того, как вы изменили тип входного поля.

Зависит от задания. Технически можно много.

Но, во-первых, исполнители неохотно берутся за задания, которые требуют много времени на выполнение. То есть, они скорее сделают 10 заданий по одной минуте, чем одно задание на 10 минут.

Во-вторых, при большом количестве заданий на странице может быть проблема с загрузкой файлов для разметки. Например, картинок.

Третий момент — контроль качества и оценка выполнения всей страницы. Если вы используете дооценку заблокированных исполнителей, то лучше дробить задание на более мелкие части, чтобы в переразметку отправлялось меньше заданий. Это позволит уложиться в бюджет.

Загруженные ссылки на картинки в файле Яндекс Задания разделит на страницы в зависимости от того, какой способ распределения заданий вы выбрали. Подробнее читайте на странице Способы распределения заданий.

Порядок следования полей в файле значения не имеет. Можете делать так, как удобно.

Загрузить в пул задания с разными ответами через интерфейс невозможно. Можно только через API.

Если в настройках пула включена опция Сохранять порядок заданий, то разметка новых заданий начнется после того, как будут взяты в работу предыдущие. Если опция выключена, то нет и гарантии, что задания будут раздаваться последовательно.

Массив строк во входных данных записывается через запятую. Например: INPUT:types text1, text2, text3, text4

Все значения записываются в один столбец. Не забудьте экранировать кавычки.

Подробнее об экранировании кавычек для формата JSON можно узнать в документации.

Нет, если вы загрузите в пул файл с несуществующими заголовками, система выдаст ошибку загрузки. Все обязательные INPUT поля, используемые в спецификации должны быть в файле с заданиями. Лишних полей и столбцов быть не должно.

Если вы не хотите показывать какие-то данные исполнителям, но они вам нужны в файле, создайте для них необязательные скрытые входные поля в проекте.

Текст в поле GOLDEN должен в точности совпадать с эталоном.

Обычно, если копировать ссылку из браузера на определенный сайт, они будут иметь одинаковый формат. Другое дело, если ссылка была обрезана или набрана на клавиатуре.

Проверьте ссылки, которые используете. Решить задачу с унификацией ссылок можно несколькими способами:

• Добавить требования к формату ссылок в инструкцию и подсказки в обучении.

• Обрезать полученные ссылки в js с помощью regexp и записать результат в новое выходное поле, а после сравнить полученное значение с эталоном.

Настройки умного смешивания указываются для файла — не для пула.

При первой загрузке файла указанные настройки будут применяться для всех файлов, загруженных в дальнейшем в этот пул.

Task — это отдельное задание. Task suite — страница с заданиями. Исполнитель получает оплату за страницу заданий.

Ошибки в заголовках столбцов

Если заголовки столбцов некорректны, файл будет полностью отклонен. В остальных случаях указано количество заданий с ошибками обработки.

Таблица ошибок обработки

"parsing_error_of": "https://tlk.s3.yandex.net/wsdm2020/photos/2d5f63a3184919ce7e3e7068cf93da4b.jpg\t\t", "exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 1, sourceList size = 3)"

"exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 4, sourceList size = 6)"

"code": "VALUE_REQUIRED", "message": "Value must be present and not equal to null"

"code": "INVALID_URL_SYNTAX", "message": "Value must be in valid url format"

"exception_msg": "unexpected end of file while reading quoted column beginning on line 2 and ending on line 4"

Одно и то же задание может попасть на разные страницы, если:

• Существует динамическое перекрытие (incremental relabeling, IRL). Например на странице было 5 заданий, по 4-м из них ответы согласовались так, что общий ответ зачелся как верный. Пятое задание будет замешано в другой набор, поскольку оно не попало в финальный ответ и его необходимо «дооценить».

• У разных заданий существует разное перекрытие. Те задания, у которых перекрытие указано больше, будут дополнительно показываться в наборах с другими оставшимися заданиями в пуле.

• Если правило контроля качества меняет перекрытие у задания, то оно окажется в другом наборе.

Если вы передаете тексты во входные данные, то достаточно загрузить в пул 2 разных задания: в одном из них в поле INPUT: <имя входного поля> вы передадите текст № 1, в другом — текст № 2.

Если текст в самом шаблоне задания, в блоке HTML, то нужно клонировать проект. Чтобы исполнитель мог сделать только одно задание в вашем проекте, используйте правило Выполненные задания. Можно назначить навык или заблокировать исполнителя, после того, как он отправит один ответ.

Обучающие и контрольные вопросы будут иметь спецификацию проекта. Но вы можете сделать отдельный проект и разместить в нем инструкцию, опросник, приложить примеры видео. А потом по ответам назначить навык. По этому навыку вы будете допускать исполнителей к основному проекту.

В пуле отображается общее число исполнителей, которые выполнили там хотя бы одну страницу заданий. Тренировочный навык может со временем теряться из-за настройки повторного прохождения. Она позволяет заново пройти обучение по истечении указанного срока, если исполнитель так и не приступил к заданиям в привязанных пулах или сделал слишком большой перерыв в выполнении заданий (например, из-за блокировки). Поэтому в тренировочном навыке отображаются те исполнители, которые либо недавно завершили обучение, либо регулярно выполняют ваше задание и не дают навыку исчезнуть.

Экзаменационным мы называем пул, в котором содержатся только контрольные задания. Обычно он делается небольшим и служит для проверки того, как исполнители научились выполнять задание после чтения инструкции и прохождения обучения.

В отличие от пула для основной разметки, ответы на все задания вам уже известны. Стоимость можно установить нулевой. По результатам ответов на контрольные задания вы можете назначить исполнителям навык и далее указать его в основном пуле в качестве фильтра. Например, ≥ 80 или ≠ Отсутствует. Составление экзамена не обязательно, в простых заданиях достаточно тренировки. Но многие заказчики используют также и экзамен.

За количество дней, в течение которых сохраняется тренировочный навык, отвечает параметр Повторное прохождение.

Навык будет удален через количество дней, указанное в поле Повторное прохождение, если исполнитель:

• Получил значение навыка ниже значения в поле Уровень прохождения.

• Не выполнил ни одного задания, к которому привязано обучение, в течение этого срока.

С истекшим навыком вашим исполнителям нужно проходить обучение заново.

В файле задания оставьте пустыми контрольные значения для необязательных выходных данных.

1. Перейдите в карточку исполнителя.
2. Выберите вкладку Профиль.
3. Найдите в списке нужный навык и скачайте историю его изменений.

В обучающем пуле задания имеют бесконечное перекрытие. Пока открыт пул, к которому оно привязано, и запущено само обучение, задания из него будут видны исполнителям. Подробнее об обучающих пулах.

Текст в поле GOLDEN должен в точности совпадать с эталоном.

Обычно, если копировать ссылку из браузера на определенный сайт, они будут иметь одинаковый формат. Другое дело, если ссылка была обрезана или набрана на клавиатуре.

Проверьте ссылки, которые используете. Решить задачу с унификацией ссылок можно несколькими способами:

• Добавить требования к формату ссылок в инструкцию и подсказки в обучении.

• Обрезать полученные ссылки в js с помощью regexp и записать результат в новое выходное поле, а после сравнить полученное значение с эталоном.

Умное смешивание задается при загрузке заданий в пул. После создания пула нажмите Загрузить данные и выберите способ распределения заданий Умное смешивание. При этом вы можете расположить задания в любом порядке и загрузить их отдельными файлами или одним файлом.

Через интерфейс пул можно закрыть вручную в любое время, но задать определенное количество прошедших обучающий пул и затем закрыть его автоматически не получится.

Обучение помогает исполнителям тренироваться выполнять задание и разобраться с инструкцией.

На основе его результатов заказчик может отобрать в основной пул тех исполнителей, которые справились достаточно хорошо.

Однако, одно лишь прохождение обучающего пула не гарантирует, что тот или иной исполнитель станет в дальнейшем качественно выполнять основные задания. Вероятно, исполнители, которые прошли обучение с высоким уровнем точности, могли обменяться друг с другом правильными ответами.

Помимо обучения нужно добавлять в основные пулы правила контроля качества и контрольные задания. Это позволит контролировать качество исполнителя на всем протяжении его работы над заданием.

Если же задание предполагает ответы в свободной форме или получение файлов с данными, используйте Отложенную приемку, чтобы выплачивать вознаграждение после проверки.

Это техническая особенность обучающих пулов. В них задания загружаются только таким образом. Если вы хотите использовать в обучении способ Указать вручную, создайте основной пул, укажите тип пула Тренировка и установите нулевую стоимость.

Первый пул сделайте на базе обучающего пула. А второй — на базе основного и укажите тип пула Экзамен. Если в нем будут только контрольные и/или обучающие задания, такой пул может иметь нулевую стоимость.

В экзаменационном пуле вы можете назначить навык, который будет определять результат экзамена и служить допуском в основной пул. Например: Если количество ответов ≥ 10 , то установить навык из поля <экзаменационный навык> % правильных ответов.

В требованиях к исполнителям экзаменационного пула укажите: <экзаменационный навык> <80 или = отсутствует>.

Установите в основном пуле фильтр: <экзаменационный навык> >=80 и <основной навык> >=70 или = отсутствует>. Значения навыка вы сможете подобрать в зависимости от того, насколько хорошо исполнители справляются с вашим заданием.

Создайте основной пул с типом Тренировка. Добавьте только обучающие задания. Назначьте навык правилом Контрольные задания. Чтобы допустить к основным заданиям исполнителей с любым уровнем навыка, установите в основном пуле фильтр: <навык> >= 0 или <навык> ≠ 0.

Но мы не советуем допускать к основным заданиям тех, кто не справился с обучением.

Если установлено неполное прохождение и указано количество страниц, которое нужно пройти, то для прохождения обучения не нужно проходить обучение целиком. Если такие настройки не выставлены, то для получения тренировочного навыка нужно пройти все задания в обучающем пуле.

Создать реабилитацию можно также, как и экзамен. В параметрах пула выберите тип Реабилитация. В фильтрах реабилитационного пула укажите верхнее и нижнее значение <основного навыка> исполнителей, которым он будет доступен.

Например, если в основную разметку попадают исполнители с навыком 70 и выше, то в реабилитационный пул можно отправить тех, чей навык между 69 и 40.

Чтобы получилось «окно», нужно указать навык дважды с верхним и нижним значением. Например: <основной навык > <70 и <основной навык > >=40. Советуем не делать экзамен и реабилитацию слишком длинными — исполнители не любят выполнять бесплатные задания. Достаточно 10–20 заданий в зависимости от их сложности.

Цель обучения — отбор исполнителей для основного задания, поэтому обучение должно быть связано с основным пулом.

Исполнитель проходит обучение, чтобы получить доступ к оплачиваемым заданиям. Если обучение необязательное, то, скорее всего, будет мало желающих его проходить.

Вы можете реализовать необязательное обучение на основе пула с обучающими заданиями. Для этого внесите изменения в настройках пула:

1. Отключите опцию Использовать описание проекта.
2. В поле Публичное описание укажите, что это необязательный обучающий набор заданий.
3. Выберите тип Тренировка.

В этом случае обучение будет отображаться в списке заданий отдельно от других пулов.

В обучающем пуле отложенная приемка невозможна.

Но вы можете создать обучающий пул с типом Тренировка на базе обычного пула и в нем выставить отложенную приемку.

Создать такое обучение невозможно, потому что для того, чтобы ответ засчитался верным, он должен в точности совпасть с эталоном.

Для проектов со свободным вводом или файлами-вложениями можно сделать отборочное задание с отложенной приемкой. Тех, кто хорошо справится, можно будет пропустить по навыку в основной пул.

Необходимо в блоке Результат проверки в поле Учитывать последних заданий указать количество последних ответов исполнителя.

Например, требуется создать экзамен размером в три задания по одному заданию на страницу. Если исполнитель выполняет два из трех правильно, то получит навык.

Если задание с отложенной приемкой, то чтобы настроить правило по такой логике, необходимо указать 3 в параметре количество проверенных ответов. На скриншоте в первом случае навык получат все исполнители, которые выполнили 3 страницы заданий и ответы которых проверены, а во втором — только те, у которых приняты 2 или 3 задания.

Чтобы ответ на контрольное или обучающее задание был засчитан как верный, он должен полностью совпасть с эталоном.

Для этого текст нужно нормализовать с помощью JavaScript:

1. Удалить пробелы, знаки препинания, специальные символы и заглавные буквы.
2. Записать результат в отдельное выходное поле. Такой обработанный ответ можно уже сравнивать с контрольным.

Другой вариант отбора исполнителей для проекта такого типа — отложенная приемка.

Для обучающих заданий необходимо:

• Правильные ответы пометить в колонке GOLDEN:result.

• Заполнить колонку HINT:text, куда записывается подсказка в случае выбора неверного варианта ответа.

Если вы изменили время на выполнение задания, то его значение применится к тем заданиям, которые еще не взяты исполнителями в работу. Тоже самое касается и случая, когда вы закрываете пул. У исполнителя, у которого задание активно, остается возможность его доделать.

Если вы загрузили в пул задания с помощью умного смешивания, можно остановить пул и разметить задания — отредактировать ответы, подсказки или удалить задания.

Если вы загружали их другим способом, нужно клонировать пул и загрузить туда файл с обновленными заданиями.

Все задания после загрузки попадают в один список, поэтому один файл удалить не получится.

• Если пул не запускался, удалите все задания. Для этого в блоке Задания пула нажмите кнопку Удалить. Далее загрузите в пул только один файл.

• Если пул запускался, удалите задания по одному через режим разметки.

В способе вычисления. В обоих агрегациях уверенность означает то же самое.

Модель агрегации Dawid-Skene анализирует ответы исполнителей и создает матрицу ошибок каждого исполнителя. Так вычисляется статистическая значимость исполнителя для каждого ответа. Подробнее о модели.

Метод не гарантирует, что для агрегации результата будут использоваться исходные ответы исполнителей. Алгоритм учитывает параметры качества исполнителей и закономерности в ответах. Соответственно, он может выдать результат, которого нет в ответах исполнителей на это задание.

На странице пула есть кнопка К списку операций.

Невозможно агрегировать поля проекта, которые не имеют допустимых значений. Необходимо указывать возможные значения для всех полей всех типов.

Необходимо использовать «умное смешивание».

Да. Настройте оповещения в аккаунте через Подробнее о настройке оповещений.

При загрузке строк в файле двойные кавычки обозначают область, внутри которой можно использовать спецсимволы: табы или переносы строк. Яндекс Задания заключает все, что находится между кавычками в одну строку и получается одно задание. Чтобы использовать кавычки внутри такой области, нужно их экранировать еще одной кавычкой. Подробнее здесь.

Если исполнитель написал и стер информацию, то будет null, иначе — undefined.

Можно только принять или отклонить это задание.

Можно закрывать доступ исполнителей к пулу по слишком быстрым ответам, по регулярному несовпадению с мнением большинства или если исполнитель делает много ошибок в контрольных заданиях. Задания, выполненные такими исполнителями, можно выдать другим исполнителям.

Нет, в самом задании ничего исправить нельзя. Но это можно сделать вручную при обработке файла с результатами.

Просто начислите исполнителю бонус без изменения статуса задания. Изменить статус задания в пуле в этой ситуации уже невозможно.

Примите задание и скорректируйте инструкцию. Иначе вы нарушаете Требования к заданиям, согласно которым нужно четко прописывать требования к выполнению задания и ожидаемым от исполнителя результатам.

Нет. Например, на странице 10 заданий стоимостью 10 ₽, а исполнитель сделал только 2 из них неправильно.

Вы не можете принять правильные ответы и заплатить ему часть стоимости - 8 ₽. Страницы с ответами принимаются либо отклоняются только целиком.

Добавьте уведомление в описание проекта (например: «Внимание! В инструкции произошли изменения») и напишите сообщение всем исполнителям, которые выполняли ваши задания. Для этого:

• Назначьте им скрытый навык или воспользуйтесь уже имеющимся навыком по пулу.

• Перейдите в Сообщения, нажмите Написать → Группе → Добавить фильтр → Выбрать свой навык → <название навыка>.

• Если вы создали новый навык, то укажите то значение, которое присвоили выбранной группе, например 1. Если вы используете существующий навык, то укажите минимально допустимое значение.

Рейтинг проекта — это средняя оценка по всем категориям. Обращайте особое внимание на категории, по которым вы набрали наименьшее количество баллов.

Возможно, ваши задания показались сложными исполнителям. Попробуйте упростить их.

Сократите инструкцию и перепишите более простым языком, добавьте картинки и примеры.

Сделайте интерфейс более удобным и интуитивно понятным, не заставляйте исполнителя совершать дополнительные ненужные действия, используйте горячие клавиши.

Задания в пулах по умолчанию доступны для веб-версии Яндекс Заданий и мобильного приложения. Если ваше задание не подходит для мобильных устройств, возможно вы забыли добавить фильтр Клиент.

Регулярно отвечайте на сообщения исполнителей. Постарайтесь обеспечить максимально быструю обратную связь. Своевременно исправляйте ошибки и уведомляйте исполнителей об изменениях с помощью рассылок.

Если вы не понимаете, в чем проблема, запустите мини-опросник и поинтересуйтесь у исполнителей, выполнявших ваши задания, что именно им нравится и не нравится.

Процент рассчитывается исходя из количества страниц, с учетом перекрытия. Если в пуле используется умное смешивание с контрольными заданиями, то максимальное значение прогресс-бара и текущий процент выполнения будут рассчитаны приблизительно.

Они возвращаются в пул, пока не будет набрано полное перекрытие.

«Качество обучения» относится только к обучающим пулам, которые привязываются к основным, а контрольные и обучающие задания, которые залиты в основные пулы, учитываются в показателе «Качество контрольных».

Когда скачиваете файл с результатами, поставьте галочки Время старта и Время отправки. В файле будут точные дата и время, когда исполнитель взял страницу заданий на выполнение и отправил ее в формате UTC.

Полностью удалить пул невозможно, но можно переместить в архив. Система не удаляет пулы автоматически.

Если в пуле нет активности в течение месяца, он архивируется. Его нельзя запустить, но можно клонировать или скачать размеченные данные.

Неактивные пулы через месяц попадают в архив. Чтобы их увидеть, на вкладке Пулы выберите Архивные.

Чтобы узнать дату архивации, получите список операций с типом POOL.ARCHIVE. В ответе будет номер пула и дата архивации. Получить способ отправки пула в архив через API невозможно.

Если между активностью в пуле и его архивацией прошло меньше месяца, можно предположить, что пул отправили в архив вручную, а если месяц — автоматически.

Просто начислите исполнителю бонус без изменения статуса задания. Изменить статус задания в пуле в этой ситуации уже невозможно.

Если ваш адрес в самом Санкт-Петербурге, введите Санкт-Петербург в поле Регион, затем введите улицу, номер дома и индекс. Остальные поля заполнять не нужно.

Если ваш адрес в самой Москве, введите Москва в поле Регион, затем введите улицу, номер дома и индекс. Подробнее о подключении к биллингу.

Если все равно не получается напишите полный адрес с индексом, который вы пытаетесь ввести, по форме обратной связи. Подскажем, как правильно заполнить поля.

Если вы оплачиваете банковской картой, средства обычно поступают на ваш счет в Яндекс Заданиях в течение нескольких минут. Если ваши средства не отображаются в счете, напишите нам — разберемся. Укажите логин заказчика и номер счета, а также отметьте тему Пополнение счета.

Пополнить счет в Яндекс Заданиях можно с банковской карты или банковским переводом. На странице Профиль нажмите на кнопку Подключиться к биллингу, заполните форму, появится кнопка Пополнить счет. Подробнее по шагам.

Получить закрывающие документы и акты

Пополнить счёт в Яндекс Заданиях можно только в рублях.

Установить цену за страницу заданий можно на странице редактирования пула. Минимальная цена для обычных пулов составляет 0,5 ₽.

Общее правило формирования цены: чем больше времени нужно на выполнение, тем выше цена.

Если задание простое, например, на оценку релевантности товара исполнитель потратит несколько секунд, то при 10 заданиях (товарах) на странице устанавливайте стоимость 1 ₽‒2 ₽.

Если вы зарегистрируетесь в Яндекс Заданиях как исполнитель, то сможете проанализировать предложения других заказчиков.

Определите цену страницы, умножьте на перекрытие (например, в задании по классификации это обычно 3–5) и учтите НДС 20%. Попробуйте положить на счет первые 1000 ₽, а затем пополняйте его с учетом выполнения.

Вы можете выдавать бонусы после выполнения и описать условие получения повышенного вознаграждения в инструкции к заданию. Возможности изменять цену за страницу заданий динамически по результатам выполнения не предусмотрено.

Отслеживайте списание денег на бонусы в профиле → вкладка Затраты.

Нет, цена за страницу заданий общая для всех заданий в пуле. Вы можете создать несколько пулов с разными ценами или изменять цену в зависимости от навыка исполнителя с помощью Динамического ценообразования. Добросовестным исполнителям можно выплачивать бонусы.

Акты сверки формируются на основе:

• Счета на оплату и акта выполненных работ
• Данных банковских выписок, поступивших из системы Клиент-банк

Чтобы заказать акт сверки:

1. Перейдите на страницу Акты сверки.

2. В выпадающих списках выберите:

   • Организацию, с которой вы работали
   • Номер и срок действия договора (опционально)
   • Плательщика
   • Период акта сверки

   Обратите внимание, что вы можете выбрать только закрытый период — месяц целиком.

3. Нажмите Ввести почту. Если ранее вы выбрали плательщика, в поле уже будет указан его адрес. Если вы хотите изменить его, введите новый адрес и нажмите ОК.

4. Нажмите Заказать.

Акты сверки формируются в течение нескольких часов. Заказанные акты придут на указанную почту и будут доступны для скачивания на странице Акты сверки.

Подробнее о заказе акта сверки вы можете узнать в разделе Заказать акты сверки справки Яндекс Баланса.

Также можно заказать закрывающие документы по форме обратной связи.

Закрывающие документы приходят на то юридическое лицо, которое указано в плательщике счета.

По умолчанию это или последний созданный плательщик, или последний использованный плательщик. Если надо его поменять или посмотреть, то можно:

1. Нажать Оплатить счет с помощью PayPal, банковского перевода.

2. После перенаправления в Баланс на странице Баланса посмотреть плательщика и выбрать оплату картой.

Вы можете скачать акты выполненных работ в личном кабинете Яндекс Баланса и подписать их.

Также вы можете запросить оригиналы документов в личном кабинете. В этом случае вам доставят оригиналы, и вы сможете подписать их.

Информация об исполнителях, которые участвовали в ваших заданиях, доступна на странице  Исполнители. Чтобы посмотреть информацию об исполнителе, выберите его идентификатор. Заказчику доступны следующие данные профиля исполнителя: страна и город, возраст, образование, знание языков. Во вкладке Метаинформация можно узнать версию браузера и операционной системы, тип User-agent, регион, определенный по IP, и другие параметры исполнителя. Чтобы отобрать исполнителей для пула по данным профиля, устройству, геопозиции и другим параметрам, используйте фильтры.

Исполнители сами указывают информацию в профиле при регистрации. Мы не требуем документов, удостоверяющих личность, при регистрации в Яндекс Заданиях. Если профиль кажется нам подозрительным, мы просим его владельца уточнить данные.

Нет, идентификатор исполнителя доступен только заказчику.

Заказчику недоступна полная информация о каждом конкретном исполнителе. Например, заказчик не видит дату рождения, пол, фамилию и имя. При этом фильтры по дате рождения и полу в настройках пула ему доступны, поскольку они позволяют отобрать группу исполнителей, не получая информации о каждом в отдельности. Это уменьшает риск деанонимизации пользователей.

В пуле отображается общее число исполнителей, которые выполнили там хотя бы одну страницу заданий. Тренировочный навык может со временем теряться из-за настройки повторного прохождения. Она позволяет заново выполнить тренировку по истечении указанного срока, если исполнитель так и не приступил к заданиям в привязанных пулах или сделал слишком большой перерыв в выполнении заданий (например, из-за блокировки). Поэтому в тренировочном навыке отображаются те исполнители, которые либо недавно завершили обучение, либо регулярно выполняют ваше задание и не дают навыку исчезнуть.

Вы можете повысить базовую стоимость задания для исполнителей с более высоким навыком. Для этого настройте Динамическое ценообразование. Если вы хотите повысить мотивацию исполнителей за качественное выполнение заданий, независимо от их навыка, используйте бонусы. Опишите в инструкции задания, сколько бонусов и в каких случаях получат исполнители.

Отслеживайте списание денег на бонусы в профиле → вкладка Затраты.

Можно закрывать доступ исполнителей к пулу по слишком быстрым ответам, по регулярному несовпадению с мнением большинства или если исполнитель делает много ошибок в контрольных заданиях. Задания, выполненные такими исполнителями, можно выдать другим исполнителям.

Нет, после отправки задания исполнитель уже не может внести в него изменения. Неверно выполненные задания можно добавить в новый пул.

Нет, в самом задании ничего исправить нельзя. Но это можно сделать вручную при обработке файла с результатами.

Исполнитель не будет заблокирован, пока не будет известно мнение большинства. Поэтому мы рекомендуем проводить обучение или экзамен для новых исполнителей. Тогда для выполнения заданий можно будет отобрать тех, кто успешно прошел обучение.

Если исполнителю уже начислена оплата за задания, отменить ее не получится.

Обучение помогает исполнителям изучить инструкцию задания и потренироваться в его выполнении. По результатам обучения заказчик может отобрать исполнителей, которые справились достаточно хорошо, в основной пул. Однако, успешное прохождение обучающего пула не гарантирует, что исполнитель в дальнейшем будет качественно выполнять задания. Исполнители, которые прошли обучение с высоким уровнем точности, не соответствующим их ответам в основном задании, могли обменяться друг с другом правильными ответами.

Помимо обучения, в основных пулах нужно настроить правила контроля качества. Это позволит контролировать качество работы исполнителя на протяжении выполнения им задания. Если задание предполагает ответы в свободной форме или отправку файлов с данными, используйте отложенную приемку, чтобы выплачивать вознаграждение после проверки.

В результатах отображаются ответы всех исполнителей, в том числе и заблокированных. Чтобы исключить их ответы из результатов, выберите опцию Не учитывать ответы заблокированных исполнителей. Будут убраны ответы исполнителей, заблокированных на момент выгрузки результатов, а не на момент разметки пула.

Автоматически отклонить ответы заблокированного исполнителя нельзя.

Но вы можете это сделать самостоятельно. Для этого при скачивании результатов выберите опцию Не учитывать ответы заблокированных пользователей — из результатов удалятся ответы заблокированных в момент выгрузки исполнителей. Также вы можете отправить все ответы заблокированных исполнителей на повторное выполнение другим исполнителям — для этого используйте Повторное выполнение заданий после блокировки исполнителя.

К сожалению, такой исполнитель нарушил требования пользовательского соглашения и больше не сможет выполнять задания. Вы можете найти новых исполнителей или настроить фильтры так, чтобы они лучше соответствовали проекту.

Задание по классификации текстов можно представить как текст и радиобаттоны. Либо текст и чекбоксы, если тематик несколько.

Рекомендуем взять за основу пресет Анализ тональности и модерация контента.

Также вы можете создать свой собственный интерфейс. Все доступные инструменты описаны в документации.

Вы можете посмотреть, как реализован пресет Расшифровка аудиозаписей — выходным полем которого является строка. В пресете Распознавание текста с изображения (OCR) можно посмотреть, как описать текстовые входные поля. Обратите внимание на то, что если впоследствии вы захотите использовать агрегацию по методу Дэвида — Скина, то необходимо указать допустимые значения.

Такое задание можно сделать на основе пресета по классификации. Покажите картинку с товаром и задайте вопрос: подходит ли товар к запросу? Для ответов добавьте два радиобаттона: «да» и «нет».

Сгенерируйте скриншоты страниц и вручную разметьте на них области, используя пресет Распознавание объектов и выделение областей.

Если в вашем задании много объектов разного типа для выделения, то его стоит декомпозировать. Например, в одном проекте предложить исполнителям выделить только цифры, во втором — дверные проемы и окна, в третьем — стены, в четвертом — сантехнику.

Чем проще получится задание, тем оно будет дешевле, и тем качественнее будет итоговый результат. Устанавливайте стоимость разметки одного класса объектов на фото примерно 1 ₽.

Используйте пресет Распознавание объектов и выделение областей. Через редактор из этого пресета можно добавить выпадающий список для маркировки выделенного объекта. Посмотрите как это сделать в описании редактора (вкладка Выпадающий список).

Для замыкания используйте горячую клавишу C.

Вы также можете воспользоваться библиотекой, чтобы настроить горячие клавиши под свои задачи.

Задачу с выделением областей на изображении с помощью Яндекс Заданий рекомендуем решать в трех проектах:

1. Сортировка изображений, на которых есть объект.

   1. Создайте задание, используя пресет Классификация изображений.

   2. Отсортируйте изображения, на которых есть искомый объект.

   3. Покажите изображение исполнителю и задайте вопрос: есть объект на картинке? Ответ — Да/Нет.

2. Выделение объекта на изображениях.

   1. Выделите объект на изображениях, которые отобрали в предыдущем проекте. Такой проект у вас уже есть. Задание запускается с отложенной приемкой.

   2. Используйте правила контроля качества: быстрые ответы, отложенная приемка, дооценка после приемки. Описание правил и примеры.

3. Проверка выделения объектов.

   1. Создайте задание, используя шаблон по выделению областей.

   2. Скройте редактор и задайте вопрос: объект выделен верно? Ответ — Да/Нет.

   3. Во входных данных передайте картинки и координаты размеченных областей из предыдущего задания.

   Запустив полученный пул с перекрытием 3–5 или с динамическим перекрытием, вы сможете агрегировать результаты, а затем загрузить данные для проверки в проект 2.

   Чтобы не допускать к проверке тех исполнителей, которые работали над вторым проектом, назначайте им навык. Используйте этот навык в качестве фильтра в пулах третьего проекта.

Для краудсорсинга такое задание лучше декомпозировать. Чем проще задание, тем оно будет дешевле и качественнее итоговый результат. Стоимость разметки одного класса объектов на фото может составить примерно 1 ₽.

Возьмите за основу пресет Распознавание объектов и выделение областей. Пошаговое руководство по созданию проекта такого типа вы найдете на этой странице.

Редактор, который используется в пресете, позволяет добавлять выпадающий список для маркировки выделенного объекта. Посмотрите как это сделать в описании редактора (вкладка Выпадающий список).

Координаты относительно самого изображения.

В стандартном пресете для выделения областей использовать контрольные задания не получится. Для того, чтобы ответ засчитался как верный, выделенный исполнителем объект должен в точности совпасть с эталоном. А это практически невозможно. Поэтому в файле с заданиями оставьте поле GOLDEN пустым или просто удалите все столбцы, кроме INPUT.

Использование обучения и основного пула с типом Тренировка в проекте по выделению областей на картинке не принесет результата, так как для правильного ответа необходимо, чтобы выделение исполнителя полностью совпало с эталоном. А это практически невозможно.

Поэтому такие задания обычно запускаются с отложенной приемкой: исполнитель дает ответ, а затем после проверки, задание отклоняется или принимается.

Для предварительного отбора исполнителей подойдет так называемое «экзаменационное задание». Проверяйте задания и выставляйте навык по проценту принятых ответов. Для этого добавьте в пул правило «Результаты проверки». Чтобы к разметке основного пула приступили только хорошие исполнители, поставьте в нем фильтр по навыку.

Чтобы при нажатии на кнопку загрузки картинки запускалась камера, а не галерея, укажите в компоненте Кнопка для загрузки картинки camera=true.

В мобильных приложениях исполнители могут прикреплять фотографии из дефолтной галереи (iOS) или через Google photo (Android). Чтобы ограничить возможность добавления картинок из сети, укажите в компоненте requiredCoordinates=true. В этом случае система не позволит воспользоваться картинками без геотегов.

Подробнее о настройке компонента для загрузки картинки .

1. Используйте пресет Пустой шаблон.

2. Для создания интерфейса воспользуйтесь готовым шаблоном, где уже настроена валидация, горячие клавиши и внешний вид задания.

3. В файле с заданиями укажите ссылки на изображения, которые будут попарно сравниваться:

   • Картинка 1 и Картинка 2.

   • Картинка 1 и Картинка 3.

   • Картинка 2 и Картинка 3.

4. Обработайте результаты.

Также вы можете изменить проект так, чтобы исполнитель видел сразу 3 картинки и выбирал одну из них.

1. Создать проект из пустого пресета.

2. Напишите свой вопрос в блоке HTML.

3. Если ответ должен быть развернутый, то добавьте нужное количество компонентов для ввода текста.

4. Если ответ должен быть коротким, то добавьте нужное количество компонентов для ввода строки.

5. Для каждого из компонентов придумайте свое название (name) и создайте соответствующее количество выходных полей с типом строка с таким же названием. В них будут записываться ответы.

6. Сделайте все выходные поля обязательными.

7. Входное поле сделайте техническим. Оно будет использоваться только для создания файла с заданиями.

8. Придумайте название входному полю и укажите для него тип строка, как это сделано в пошаговом руководстве по созданию опроса.

В опросе имеется техническое входное поле. В него можно передать любую информацию — она не будет видна исполнителям.

Загрузите одно задание и в перекрытии укажите количество человек, которое хотите опросить.