Опросы

Напишите нам, если не нашли ответ в Справке. Вы можете приложить скриншоты или видео, чтобы ускорить помощь:

Написать в чат  Написать в Telegram

Примечание

Сначала запустите проект в песочнице. Так вы сможете избежать ошибок и потраченных средств, если окажется, что ваше задание не работает.

В этом туториале вы узнаете, как создать опрос и запустить его в Яндекс Заданиях. Мы будем использовать пресет, который специально разработан для этого типа разметки данных.

Опрос — это вид сбора данных, включающий несколько типов закрытых и открытых вопросов.

Пример готового задания

Перед началом

Создайте проект

Мы рекомендуем использовать пресет проекта, чтобы упростить настройку и получить хорошие результаты.

  1. Нажмите Создать проект на странице Проекты.

    Скриншот

  2. Выберите пресет Опрос потребителей.

  3. Нажмите Использовать решение.

  4. В разделе Общая информация заполните поля:

    • Название для исполнителей — название, которое будет отображаться в списке заданий для исполнителей.

    • Описание для исполнителей — краткое описание, которое будет отображаться в списке заданий для исполнителей.

    Скриншот

  5. В разделе Интерфейс задания настройте внешний вид задания.

    Примечание

    В этом туториале для создания интерфейса задания используется конструктор шаблонов, но вы можете использовать редактор HTML/JS/CSS для той же цели.

    Скопируйте код из примера и вставьте его в редактор Конфигурация вашего проекта. В этом примере уже настроена валидация и внешний вид задания. Исполнитель не сможет отправить задание, пока не ответит на каждый из вопросов.

    Подробнее читайте в Справке конструктора шаблонов:

  6. В редакторе интерфейса внесите изменения в соответствии со своим проектом.

  7. Чтобы определить, какие данные вы будете передавать исполнителю и получать в ответ, необходимо создать поля входных и выходных данных.

    Чтобы увидеть поля входных и выходных данных, нажмите Показать спецификации.

    Входные и выходные данные соответствуют интерфейсу задачи, настроенному в конструкторе шаблонов. Убедитесь, что все входные и выходные поля настроены правильно.

    Подробнее читайте в разделе Создание спецификации.

    В данном проекте:

    • Поле входных данных — строка input для загрузки опроса. Это поле не используется в интерфейсе. Оно нужно только для запуска проекта и может содержать любой текст (например, название опроса).

    • Поля выходных данных:

      • place — строка, в которую будет записан ответ исполнителя на вопрос «Где вы обычно завтракаете?»;
      • food — строка, в которую будет записан ответ исполнителя на вопрос «Что вы чаще всего едите на завтрак?»;
      • drink — строка, в которую будет записан ответ исполнителя на вопрос «Что вы пьете на завтрак (помимо воды)?».

    Входные данные

    {
      "input": {
        "type": "string",
        "required": false
      }
    }
    

    Выходные данные

    {
      "place": {
        "type": "string",
        "allowed_values": [
          "Home",
          "university",
          "work",
          "cafe"
        ],
        "required": true
      },
      "food": {
        "type": "string",
        "allowed_values": [
          "kasha",
          "egg",
          "sandwich",
          "curd",
          "other"
        ],
        "required": true
      },
      "drink": {
        "type": "string",
        "allowed_values": [
          "coffee",
          "milk",
          "juice",
          "other"
        ],
        "required": true
      }
    }
    
  8. В редакторе Инструкция для исполнителей введите инструкцию, которую увидят исполнители, когда начнут выполнять ваше задание. Вы можете добавлять в инструкцию текст, таблицы и изображения.

    Вы можете подготовить инструкцию в формате HTML и вставить ее в редактор. Чтобы переключиться в режим HTML, нажмите <>.

    Совет

    При написании инструкции помните, что исполнители заранее ничего не знают о ваших заданиях. Убедитесь, что инструкция понятна, но не слишком многословна.

  9. Нажмите кнопку Сохранить справа вверху.

Подробнее о настройке проекта читайте в разделе Создание проекта.

Добавьте пул заданий

Пул — это набор оплачиваемых заданий, которые одновременно выдаются исполнителям.

  1. Нажмите Создать новый пул на странице проекта.

    Скриншот

  2. Заполните поле Название пула. Название пула будет видно только вам на странице проекта.

  3. При необходимости отключите опцию Использовать описание проекта и заполните поле Публичное описание. В этом случае в списке заданий для исполнителей будет отображаться описание пула вместо описания проекта.

    1. Нажмите + Приватный комментарий, чтобы добавить описание, которое будет видно только вам на странице проекта.

  4. В блоке Аудитория добавьте фильтры для отбора исполнителей:

    1. Чтобы ваше задание было доступно только исполнителям, владеющим русским языком, установите язык и страну по номеру телефона.

      Скриншот

    2. Задания в пулах по умолчанию будут доступны для веб-версии Яндекс Заданий и мобильного приложения. Если вы хотите изменить настройки по умолчанию и ограничить видимость задачи для любой из версий, добавьте фильтр Клиент и выберите нужное значение: Веб-версия Яндекс Заданий или Мобильные Яндекс Задания.

    3. Отключите опцию В моих заданиях может содержаться шокирующий или порнографический контент, если ваш пул их не содержит.

    4. С помощью настройки Соотношение скорости и качества вы можете установить количество исполнителей, которые увидят ваши задания. Переместите ползунок вправо, чтобы заблокировать доступ к заданиям для исполнителей с недостаточно высоким рейтингом.

  5. В блоке Цена установите цену за страницу заданий и перекрытие.

    1. В поле Цена за страницу заданий, ₽ установите цену за страницу заданий.

      Обратите внимание на индикатор Интерес исполнителей к цене. Он показывает, насколько цена за страницу заданий соответствует ожиданиям исполнителей. Если интерес невелик, вы можете повысить цену, чтобы привлечь больше исполнителей. Если интерес высокий, вы можете снизить цену, чтобы сэкономить деньги.

      Как определить справедливую цену

      Общее правило формирования цены — чем больше времени исполнитель тратит на выполнение, тем выше цена.

      Вы можете зарегистрироваться в Яндекс Заданиях как исполнитель и узнать, сколько платят другие заказчики за задания.

      Вы также можете настроить динамическое ценообразование.

    2. Задайте перекрытие в поле Перекрытие — количество исполнителей, которые должны выполнить задание. Для начала установите небольшое количество, например, 100. Если вы видите, что этого недостаточно для выборки, увеличьте перекрытие.

  6. Нажмите Показать расширенные настройки и укажите Время на страницу заданий, с в разделе Дополнительные настройки.

    Указанного времени должно быть достаточно, в том числе для чтения инструкции и загрузки задания. Например, 600 секунд.

  7. Нажмите кнопку Создать пул.

Настройте контроль качества

Блоки контроля качества позволяют отсеивать недобросовестных исполнителей. Контроль качества можно настраивать как в проекте, так и в пуле.

  1. Перейдите к редактированию пула (кнопка в верхнем правом углу страницы) и в блоке Контроль качества нажмите Добавить правило контроля качества.

    Вы можете скопировать настройки контроля качества из другого пула. Для этого в разделе Аудитория нажмите Скопировать настройки другого пула.

    Откройте страницу проекта, перейдите на вкладку Контроль качества и нажмите кнопку Настроить контроль качества. Далее нажмите + Добавить блок контроля качества.

    Правила будут действовать во всех пулах проекта, и изменить их настройку в одном из пулов будет невозможно.

    Ограничение

    При клонировании проекта настройки контроля качества не переносятся.

  2. Добавьте блок Быстрые ответы и укажите параметры правила.

    Скриншот

    Если исполнитель выполнит страницу заданий быстрее чем за 10 секунд, он будет заблокирован и не сможет больше выполнять ваши задания.

  3. Добавьте блок Повторное выполнение заданий после блокировки исполнителя и укажите параметры правила.

    Скриншот

    Это означает, что если исполнитель заблокирован за быстрые ответы, в результате чего его ответы не учтены, задание этого исполнителя будет повторно отправлено на выполнение другому исполнителю.

    Для опросов нужно добавлять оба правила, поскольку для таких заданий они эффективны только в паре. Часто в опросе одна страница с заданиями. Это правило дополняет быстрые ответы так, чтобы в итоге получить необходимое количество ответов, а не просто заблокировать тех, кто слишком быстро отвечает.

    Внимание

    Использование правила Повторное выполнение заданий после блокировки исполнителя может привести к увеличению расходов на выполнение проекта.

Загрузите задания

  1. Нажмите кнопку Загрузить данные на странице пула. В открывшемся окне вы можете скачать шаблон файла с заданиями.

  2. Добавьте в файл входные данные. Для этого типа проекта файл с заданиями должен иметь один параметр INPUT:input. Этот параметр не используется в интерфейсе. Он нужен только для запуска проекта и может содержать любой текст (например, название опроса).

    Пример
    INPUT:input
    Завтрак
    
  3. Прикрепите файл с заданиями.

  4. Нажмите кнопку Продолжить.

  5. Выберите Указать вручную и установите значение 1 в поле Кол-во заданий на странице.

  6. Нажмите кнопку Разделить задания на страницы.

  7. Нажмите кнопку Предпросмотр, чтобы убедиться, что ваши задания отображаются правильно.

Запустите пул

  1. Убедитесь, что вы пополнили свой счет.

  2. Нажмите кнопку Запустить разметку. Пул станет доступным для исполнителей.

  3. Отслеживайте статистику на страницах пула и проекта по мере выполнения заданий.

Получите результаты

  1. Запустите агрегацию результатов, когда пул будет полностью выполнен. Для этого около кнопки Скачать результаты нажмите → Агрегация результатов по методу Дэвида — Скина.

  2. Отслеживайте ход агрегации. Для этого нажмите Скачать результаты → Операции. По завершении нажмите кнопку Скачать.

    Вы получите TSV-файл с результатами разметки:

    • INPUT — данные, которые вы загрузили для разметки.

    • OUTPUT — результат разметки (категория, выбранная исполнителями).

    • CONFIDENCE — значимость ответа в соответствии с моделью Дэвида — Скина.

Решение проблем

Ошибки при загрузке заданий в пул
Как посмотреть лог обработки

Чтобы посмотреть лог обработки, нажмите Подробнее об ошибках загрузки. Лог обработки записан в формате JSON. Объекты внутри result соответствуют номеру строки загружаемого файла. Строки, обработанные с ошибкой, имеют статус "success": false.

Совет

Работать с большим логом удобнее, если скопировать его в текстовый редактор.

Ошибки в заголовках столбцов

Если заголовки столбцов некорректны, файл будет полностью отклонен. В остальных случаях указано количество заданий с ошибками обработки.

Таблица ошибок обработки

"parsing_error_of": "https://tlk.s3.yandex.net/wsdm2020/photos/2d5f63a3184919ce7e3e7068cf93da4b.jpg\t\t", "exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 1, sourceList size = 3)"

Описание

Как исправить

Лишние знаки табуляции. Если в загружаемом файле после данных или ссылки стоит количество разделителей столбцов \t больше, чем задано число столбцов во входных данных, то появится сообщение об ошибке.

Например, когда во входных определен 1 столбец, а в файле после ссылки прописано еще два знака табуляции \t\t, то получится 3 столбца, 2 из которых лишние.

Удалите лишние разделители столбцов, в приведенном выше примере ошибки — оба знака (\t\t).

"exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 4, sourceList size = 6)"

Описание

Как исправить

Не совпадает количество полей в заголовке и в строке.

Проверьте, что:

  • указано верное количество знаков табуляции в структуре файла;
  • строковые значения, содержащие знак табуляции, заключены в кавычки" ".
"code": "VALUE_REQUIRED", "message": "Value must be present and not equal to null"

Описание

Как исправить

Не указано значение обязательного поля входных данных.

Проверьте, что заполнены все столбцы с обязательными полями входных данных.

"code": "INVALID_URL_SYNTAX", "message": "Value must be in valid url format"

Описание

Как исправить

Данные в поле с типом «ссылка» («url») некорректны.

Проверьте, что все ссылки начинаются с префикса http://, https:// или www.

"exception_msg": "unexpected end of file while reading quoted column beginning on line 2 and ending on line 4"

Описание

Как исправить

В строке стоит непарная кавычка.

Проверьте, что все кавычки экранированы.

Как определить время на выполнение задания?

Попробуйте выполнить задания сами, попросите своих друзей и коллег. Найдите среднее время выполнения и добавьте к нему 50%.

Как создать простой опрос без вариантов, в котором исполнитель сам должен написать свой вариант ответа?
  1. Создать проект из пустого пресета.

  2. Напишите свой вопрос в блоке HTML.

  3. Если ответ должен быть развернутый, то добавьте нужное количество компонентов для ввода текста.

  4. Если ответ должен быть коротким, то добавьте нужное количество компонентов для ввода строки.

  5. Для каждого из компонентов придумайте свое название (name) и создайте соответствующее количество выходных полей с типом строка с таким же названием. В них будут записываться ответы.

  6. Сделайте все выходные поля обязательными.

  7. Входное поле сделайте техническим. Оно будет использоваться только для создания файла с заданиями.

  8. Придумайте название входному полю и укажите для него тип строка, как это сделано в пошаговом руководстве по созданию опроса.

Как сделать опрос из одного вопроса с помощью готового пресета под опросы?

В опросе имеется техническое входное поле. В него можно передать любую информацию — она не будет видна исполнителям.

Загрузите одно задание и в перекрытии укажите количество человек, которое хотите опросить.

Написать в службу поддержки

Определенная цель для разметки. Например, модерация комментариев, классификация изображений, транскрипция аудиозаписей или еще что-то.

Подробнее

Формат входных и выходных данных, описываемых в поле Спецификации блока Интерфейс задания при настройке проекта.

Подробнее

Внешний вид задания для исполнителя и логика обработки ответов. Чаще всего настраивается с помощью конструктора шаблонов.

Правило контроля качества, которое ограничивает доступ к заданиям исполнителям, которые отвечают слишком быстро.

Подробнее

Инструкция к заданию, которую видит исполнитель при выборе и выполнении задания. От четкости и полноты инструкции зависит качество ответов, которые вы получите, и рейтинг проекта. Хорошая инструкция поможет исполнителям правильно выполнить задание.

Файл, содержащий данные, которые нужно разметить. Заказчики используют эти файлы для загрузки заданий. В Яндекс Заданиях поддерживаются файлы в формате TSV.

Группа из нескольких заданий, ответы на которые должен отправить исполнитель за один раз.

Подробнее

Преднастроенный проект, содержащий описание, инструкцию, предопределенные поля входных и выходных данных и интерфейс задания, которые можно редактировать.

Tab-separated values — текстовый формат файла, в котором данные разделены знаком табуляции, а строки — знаком перевода строки.

Вопрос или задача, которое требует ответа от исполнителя в Яндекс Заданиях.

Подробнее

Добавление правильных ответов и подсказок в задания, а также изменение типов заданий.

Подробнее

Количество исполнителей, которые должны выполнить каждое задание пула. Перекрытие используется для того, чтобы убедиться, что результатам можно доверять.