Аналитик-разработчик офлайн-метрик качества международного Поиска

Перед нами стоит амбициозная задача — вырастить качество Поиска на международных рынках. Для этого нам нужно построить офлайн-метрики и собрать качественные датасеты для обучения поисковых моделей. Мы ищем сильных аналитиков, которые помогут нам выстроить работу с международным Краудом, собрать качественные оценки от асессоров, выработать критерии приёмки новой метрики и улучшить качество Поиска для миллионов пользователей.

Почему у нас классно

Мы выходим в новую страну и ориентированы прежде всего на результат в продакшн.
Ваша работа непосредственно повлияет на то, каким будет Поиск в международке через полгода.
Мы даём возможность развивать как технические, так и коммуникационные и менеджерские навыки.
Мы делаем уникальные краудсорсные проекты — по сложности, масштабу и архитектуре.
У нас слаженная команда аналитиков-разработчиков и ML-инженеров качества Поиска, постоянно общаемся по задачам и обмениваемся опытом.

Какие задачи вас ждут

Формализация требований к качеству Поиска
Какие веб-страницы релевантны запросу пользователя? Какому контенту можно доверять? Эти сложные и плохо формализованные вопросы необходимо преобразовать в набор правил и принципов, по которым можно будет оценить любой сайт в интернете. Мы неплохо справились с этой задачей в рунете, теперь нужно проделать то же самое для веб-страниц на незнакомых для нас языках.

Создание сложных проектов в Крауде
Для массового сбора разметки мы собираем иерархические проекты из нескольких уровней разметчиков. Для каждой группы исполнителей — свой метод обучения и требования к качеству. Нужно эффективно обучать тысячи исполнителей, отобрать самых способных, а затем контролировать качество их работы. Одна из центральных задач здесь — научиться собирать ground truth оценки в условиях, когда мы не знаем локального контекста и не всегда понимаем содержание документов.

Подбор и приёмка метрики
На основе асессорских оценок мы собираем наши офлайн-метрики — способ замера качества Поиска и таргет для обучения моделей. Приёмка метрики на иностранном потоке запросов — сложная и творческая задача, которую нам предстоит решить.

Мы ждём, что вы

Любите быть въедливым и до мелочей разбираться в том, как и почему должен работать продукт
Пишете на Python и SQL
Знаете математическую статистику и теорию вероятностей
Умеете общаться в команде, ясно излагать свои мысли, понимать и убеждать коллег
Самостоятельны и готовы браться за новые задачи, для которых нет готового решения

Будет плюсом, если вы

Работали с Толокой или другими краудсорс-платформами
Писали инструкции и самостоятельно запускали проекты по разметке данных

Что мы предлагаем

Здоровье

Рост и развитие

Спорт

И ещё

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также:

психотерапия в офисе или онлайн-сервисах;
лазерная коррекция зрения через год работы;
ведение беременности и роды — через два года.

Страховка для родственников по системе 80/20

Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

А также:

оплата участия в профильных конференциях;
скидка 50% на изучение иностранных языков.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей.

Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также:

бесплатные онлайн-тренировки с FITMOST;
скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.

Спортивный клуб Яндекса

В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях.

Вы сможете присоединиться к существующим командам или собрать свою.

Гибкий график

У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде.

Жилищные займы

Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.