Проект 4. Какой из найденных объектов больше похож на исходный?

Напишите нам, если не нашли ответ в Справке. Вы можете приложить скриншоты или видео, чтобы ускорить помощь:

Написать в чат  Написать в Telegram

В этом проекте исполнители будут сравнивать найденную обувь с исходным изображением, чтобы определить, какой из вариантов более похож.

Перед началом

• Убедитесь, что вы зарегистрированы в качестве заказчика.

• Пополните свой счет на странице Профиль. Если вы не уверены в том, какой бюджет потребуется, вы можете рассчитать это позже в процессе работы над проектом.

Создайте проект

Мы рекомендуем использовать пресет проекта, чтобы упростить настройку и получить хорошие результаты.

1. Нажмите Создать проект на странице Проекты.

   Скриншот

   

2. Выберите пресет Поиск фотографий товаров в разделе Обогащение данных.

3. Нажмите Использовать решение.

4. В разделе Общая информация заполните поля:

   • Название для исполнителей — название, которое будет отображаться в списке заданий для исполнителей. Например, вы можете указать такое название: Какая обувь больше похожа на исходную?.

   • Описание для исполнителей — краткое описание, которое будет отображаться в списке заданий для исполнителей. Например, вы можете указать такое описание: Определите, какая пара обуви больше похожа на исходную..

   Скриншот

   

5. В разделе Интерфейс задания настройте внешний вид задания.

   Примечание

   В этом туториале для создания интерфейса задания используется конструктор шаблонов, но вы можете использовать редактор HTML/JS/CSS для той же цели.

   Для этого проекта воспользуйтесь готовым шаблоном, где уже настроен внешний вид задания, валидация и горячие клавиши. Исполнитель не сможет отправить задание, если:

   • не перейдет по ссылкам в интернет-магазин;
   • не выберет вариант ответа.

   Подробнее о настройке интерфейса читайте в Справке конструктора шаблонов.

6. Чтобы определить, какие данные вы будете передавать исполнителю и получать в ответ, необходимо создать поля входных и выходных данных.

   Чтобы увидеть поля входных и выходных данных, нажмите Показать спецификации.

   Входные и выходные данные соответствуют интерфейсу задачи, настроенному в конструкторе шаблонов. Убедитесь, что все входные и выходные поля настроены правильно.

   Подробнее читайте в разделе Создание спецификации.

   В этом проекте:

   • Поля входных данных:

     • image — ссылка для загрузки изображения исходного товара;
     • first_link — ссылка на первый товар в интернет-магазине;
     • second_link — ссылка на второй товар в интернет-магазине.

   • Поле выходных данных: result — строка, в которую будет записан ответ исполнителя.

   Графический режим

   JSON

   

   Входные поля

   {
     "image": {
       "type": "url",
       "hidden": false,
       "required": true
     },
     "first_link": {
       "type": "url",
       "hidden": false,
       "required": true
     },
     "second_link": {
       "type": "url",
       "hidden": false,
       "required": true
     }
   }
   

   Выходные поля

   {
     "result": {
       "type": "string",
       "hidden": false,
       "required": true
     }
   }
   

7. В редакторе Инструкция для исполнителей введите инструкцию, которую увидят исполнители, когда начнут выполнять ваше задание. Вы можете добавлять в инструкцию текст, таблицы и изображения.

   Вы можете подготовить инструкцию в формате HTML и вставить ее в редактор. Чтобы переключиться в режим HTML, нажмите <>.

   Совет

   При написании инструкции помните, что исполнители заранее ничего не знают о ваших заданиях. Убедитесь, что инструкция понятна, но не слишком многословна.

8. Нажмите кнопку Сохранить справа вверху.

Подробнее о настройке проекта читайте в разделе Создание проекта.

Добавьте пул заданий

Пул — это набор оплачиваемых заданий, которые одновременно выдаются исполнителям.

1. Нажмите Создать новый пул на странице проекта.

   Скриншот

   

2. Заполните поле Название пула. Название пула будет видно только вам на странице проекта.

3. При необходимости отключите опцию Использовать описание проекта и заполните поле Публичное описание. В этом случае в списке заданий для исполнителей будет отображаться описание пула вместо описания проекта.

   1. Нажмите + Приватный комментарий, чтобы добавить описание, которое будет видно только вам на странице проекта.

4. В блоке Аудитория добавьте фильтры для отбора исполнителей:

   1. Чтобы ваше задание было доступно только исполнителям, владеющим русским языком, установите язык и страну по номеру телефона.

      Скриншот

      

   2. Задания в пулах по умолчанию будут доступны для веб-версии Яндекс Заданий и мобильного приложения. Если вы хотите изменить настройки по умолчанию и ограничить видимость задачи для любой из версий, добавьте фильтр Клиент и выберите нужное значение: Веб-версия Яндекс Заданий или Мобильные Яндекс Задания.

   3. Отключите опцию В моих заданиях может содержаться шокирующий или порнографический контент, если ваш пул их не содержит.

   4. С помощью настройки Соотношение скорости и качества вы можете установить количество исполнителей, которые увидят ваши задания. Переместите ползунок вправо, чтобы заблокировать доступ к заданиям для исполнителей с недостаточно высоким рейтингом.

5. В блоке Цена установите цену за страницу заданий и перекрытие.

   1. В поле Цена за страницу заданий, ₽ установите цену за страницу заданий.

      Обратите внимание на индикатор Интерес исполнителей к цене. Он показывает, насколько цена за страницу заданий соответствует ожиданиям исполнителей. Если интерес невелик, вы можете повысить цену, чтобы привлечь больше исполнителей. Если интерес высокий, вы можете снизить цену, чтобы сэкономить деньги.

      Как определить справедливую цену

      Общее правило формирования цены — чем больше времени исполнитель тратит на выполнение, тем выше цена.

      Вы можете зарегистрироваться в Яндекс Заданиях как исполнитель и узнать, сколько платят другие заказчики за задания.

      Вы также можете настроить динамическое ценообразование.

   2. Задайте перекрытие в поле Перекрытие. Для этого проекта достаточно перекрытия, равного 3.

      Вы также можете настроить динамическое перекрытие.

6. Нажмите Показать расширенные настройки и укажите Время на страницу заданий, с в разделе Дополнительные настройки.

   Указанного времени должно быть достаточно, в том числе для чтения инструкции и загрузки задания. Например, 600 секунд.

7. Нажмите кнопку Создать пул.

Настройте контроль качества

Блоки контроля качества позволяют отсеивать недобросовестных исполнителей. Вы можете настраивать контроль качества как в проекте, так и в пуле.

1. Пул

   Проект

   Перейдите к редактированию пула (кнопка в верхнем правом углу страницы) и в блоке Контроль качества нажмите Добавить правило контроля качества.

   Вы можете скопировать настройки контроля качества из другого пула. Для этого в разделе Аудитория нажмите Скопировать настройки другого пула.

   Откройте страницу проекта, перейдите на вкладку Контроль качества и нажмите кнопку Настроить контроль качества. Далее нажмите + Добавить блок контроля качества.

   Правила будут действовать во всех пулах проекта, и изменить их настройку в одном из пулов будет невозможно.

   Ограничение

   При клонировании проекта настройки контроля качества не переносятся.

2. Чтобы отсеять исполнителей, которые слишком быстро отвечают, добавьте правило контроля Добавить правило контроля качества → Быстрые ответы.

   Значение параметра Минимальное время на страницу зависит от количества заданий на этой странице. Для выполнения одного задания в этом проекте достаточно 2–4 секунды. Значит, на страницу с 10-ю заданиями может хватить 20–30 секунд.

   Один раз можно ошибиться неумышленно, а вот после 2–3 подобных случаев вы можете заблокировать исполнителя на какое-то время.

   Скриншот

   

   Если исполнитель выполнит две страницы заданий быстрее чем за 20 секунд, ему будет ограничен доступ к пулу и он не сможет выполнять ваши задания 10 дней.

   Внимание

   Ответы заблокированных исполнителей будут учтены, если не отклонить их вручную при помощи отложенной приемки. Чтобы отправить задания этих исполнителей на повторную разметку, настройте правило Повторное выполнение заданий после блокировки.

3. Добавьте блок Мнение большинства. Это правило устанавливает в качестве верного ответа самый популярный.

   С помощью него вы можете отсеивать исполнителей, дающих неправильные ответы. Вы можете заблокировать исполнителя на 1 день, если он правильно ответил менее чем на 60% заданий. Если в значении параметра Считать большинством указано 2, это означает, что два совпавших ответа считаются правильными.

Загрузите задания

1. Скачайте файл с результатами из второго проекта.

2. Внесите изменения в файл.

   Совет

   Вы можете внести изменения в файл вручную с помощью редактора текста или сделать это автоматически, например, с помощью Python или Jupyter Lab.

   1. Столбец INPUT:image оставьте без изменений.

   2. Добавьте два столбца: INPUT:first_link и INPUT:second_link.

   3. Заполните значения в столбцах INPUT:left_link и INPUT:second_link для каждого исходного изображения. Значения для этих столбцов возьмите из поля OUTPUT:found_link.

      Пример

      INPUT:image INPUT:first_link INPUT:second_link
      https://tlk.s3.yandex.net/dataset/041adb571f4342e7a42e47712f492101.jpg https://example-store.com/11 https://example-store.com/12
      https://tlk.s3.yandex.net/dataset/048e5760fc5a46faa434922b2447a527.jpg https://example-store.com/21 https://example-store.com/22
      https://tlk.s3.yandex.net/dataset/05334365c060421ab25264166bbb4fd1.jpg https://example-store.com/31 https://example-store.com/32
      

3. Сохраните файл.

4. Нажмите кнопку Загрузить данные на странице пула.

5. Прикрепите файл с заданиями.

6. Нажмите кнопку Продолжить.

7. Выберите способ распределения заданий по страницам Указать вручную и укажите 1 в поле Заданий на странице.

8. Нажмите кнопку Разделить задания на страницы.

9. Нажмите кнопку Предпросмотр, чтобы убедиться, что ваши задания отображаются правильно.

Запустите пул

1. Убедитесь, что вы пополнили свой счет.

2. Нажмите кнопку Запустить разметку. Пул станет доступным для исполнителей.

   

3. Отслеживайте статистику на страницах пула и проекта по мере выполнения заданий.

Получите результаты

1. Запустите агрегацию результатов, когда пул будет полностью выполнен. Для этого около кнопки Скачать результаты нажмите → Агрегация результатов по методу Дэвида — Скина.

2. Отслеживайте ход агрегации. Для этого нажмите Скачать результаты → Операции. По завершении нажмите кнопку Скачать.

   Вы получите TSV-файл с результатами разметки:

   • INPUT — данные, которые вы загрузили для разметки.

   • OUTPUT — ответы исполнителей.

   • CONFIDENCE — значимость ответа в соответствии с моделью Дэвида — Скина.

3. Попробуйте использовать модель Брэдли-Терри для полученных результатов.

Что дальше

• Прочитайте подробнее про декомпозицию заданий.

Решение проблем

"parsing_error_of": "https://tlk.s3.yandex.net/wsdm2020/photos/2d5f63a3184919ce7e3e7068cf93da4b.jpg\t\t", "exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 1, sourceList size = 3)"

"exception_msg": "the nameMapping array and the sourceList should be the same size (nameMapping length = 4, sourceList size = 6)"

"code": "VALUE_REQUIRED", "message": "Value must be present and not equal to null"

"code": "INVALID_URL_SYNTAX", "message": "Value must be in valid url format"

"exception_msg": "unexpected end of file while reading quoted column beginning on line 2 and ending on line 4"

Написать в службу поддержки