Дата-инженер платформы данных в Crowd

Yandex Crowd помогает решать бизнес-задачи продуктов и B2B-клиентов Яндекса и масштабировать процессы с помощью краудсорсинга и ML-технологий. Мы строим и развиваем ИТ-платформу для 30 000+ специалистов, которые собирают офлайн-данные, обучают алгоритмы и помогают ИИ стать ещё полезнее для людей. Работаем с Поиском, YandexGPT, Такси, Маркетом, Алисой и другими ключевыми сервисами компании.

Команде платформы данных Крауда меньше года. Мы наполняем данными и развиваем хранилище данных (DWH), ETL-процессы и каталог с описанием метаданных таблиц, метрик, сущностей и т. д.

Нашей платформой пользуются как руководители, которым нужна отчётность для принятия решений, так и продакт-менеджеры, продуктовые аналитики Crowd и других бизнес-юнитов. ML-инженеры с помощью наших данных обучают модели, в том числе для развития YandexGPT. Мы ищем дата-инженера для развития дата-платформы.

Наш стек: YTsaurus, ClickHouse и собственный фреймворк для разработки ETL-процессов.

Какие задачи вас ждут

Работа с хранилищем
Интегрировать в хранилище новые системы-источники, проектировать структуры хранения данных.

Работа с данными
Разрабатывать надежные и быстрые пайплайны обработки данных. Покрывать данные тестами и настраивать мониторинги процессов. Развивать фреймворк поставки данных.

Коммуникация
Совместно с командой аналитиков погружаться в предметную область продуктов. Взаимодействовать с бизнесом для понимания того, как процессы DWH ему помогают.

Мы ждём, что вы

  • Знаете SQL на уровне оптимизации запросов
  • Уверенно знаете Python на уровне написания собственного фреймворка
  • Понимаете принципы проектирования DWH: слои, модели хранения данных, процессы ETL

Будет плюсом, если вы

  • Работали с Apache Hadoop и Apache Spark
  • Работали с ClickНouse, понимаете отличия и преимущества различных движков таблиц
  • Умеете работать в командной строке unix-систем Linux и macOS

Что мы предлагаем

Расширенная медицинская страховка начинает работать с первого месяца в Яндексе. В неё входят стоматология, ежегодные чекапы, неотложная помощь за рубежом, лечение критических заболеваний, в том числе онкологии, и страхование от несчастных случаев.

А также:
  • психотерапия в офисе или онлайн-сервисах;
  • лазерная коррекция зрения через год работы;
  • ведение беременности и роды — через два года.
Страховка для родственников по системе 80/20

Мы оплачиваем 80% стоимости ДМС для детей и супругов, вы — остальные 20%.

В Яндексе есть всё, чтобы постоянно развиваться и учиться новому: внутренняя образовательная платформа, менторство и программы для начинающих и опытных руководителей.

А также:
  • оплата участия в профильных конференциях;
  • скидка 50% на изучение иностранных языков.

Кроме того, в Яндексе есть внутренние проекты, где наши сотрудники делятся экспертизой, обсуждают сложные темы и разбирают кейсы своих проектов.

Во всех крупных офисах Яндекса есть спортзалы со всем необходимым: тренажёрами, спортивным инвентарём, душевыми, шкафчиками для одежды и вещей.

Можете заниматься самостоятельно, а можете с корпоративным тренером.

А также:
  • бесплатные онлайн-тренировки с FITMOST;
  • скидки в фитнес-клубах, бассейнах, студиях йоги, скалодромах и других местах.
Спортивный клуб Яндекса

В Яндексе есть спортивный клуб и много спортивных команд. У них есть свои лидеры, чаты, программы тренировок. А ещё они регулярно участвуют в забегах, триатлонах, «Гонке героев», футбольных и других соревнованиях.

Вы сможете присоединиться к существующим командам или собрать свою.

Гибкий график

У нас нет фиксированного времени начала и конца рабочего дня — работайте так, как удобно вам и вашей команде.

Гибридный формат

Если для ваших задач не нужно быть в офисе каждый день, можно приходить 2–3 раза в неделю.

Всё для детей

Страхование, детские дни в офисе, подарки на рождение детей и чекапы при планировании беременности.

Жилищные займы

Льготная ставка на покупку жилья и улучшение жилищных условий — в зависимости от стажа, позиции и результатов ревью. Действует для сотрудников, работающих в российских офисах Яндекса.

Спасибо за отклик!

Мы свяжемся с вами в течение недели.

Fri Feb 09 2024 12:47:58 GMT+0300 (Moscow Standard Time)