Data engineer в Yandex Cloud

Команда подготовки и качества аналитических данных Yandex Cloud ищет дата-инженера. Мы обрабатываем данные в batch- и realtime-контурах и предоставляем необходимую информацию различным сервисам и командам аналитиков. От нашей работы зависит качество продуктовых и бизнес-решений, эффективность команды продаж и маркетинга.

Вместе с командой вам предстоит перестраивать архитектуру ключевых контуров подготовки данных. На систему постоянно возрастает нагрузка и появляются новые бизнес-требования. Вы окажетесь в атмосфере стартапа Yandex Cloud, будете строить систему, которая отвечает высоким требованиям к качеству и стабильности данных, используя возможности развитой инфраструктуры Яндекса.

Стек: Spark, Greenplum, ClickHouse, YT (in-house Big Data Hadoop + Hive + HBase), Python. Используем как яндексовые разработки, так и популярный в индустрии стек.

• проектировать и разрабатывать DWH, ETL-процессы;
• создавать инфраструктуру для контроля качества и стабильности данных;
• помогать выстраивать смежные процессы, которые влияют на качество наших данных.

• участвовали в построении пайплайнов больших данных (ETL, DWH) и умеете решать архитектурные вопросы в области обработки данных;
• умеете выстраивать процессы валидации данных;
• имеете опыт промышленной разработки на Python или Go;
• знаете SQL.

• сильная команда, с которой можно расти;
• сложные задачи для сервисов с миллионами пользователей;
• возможность влиять на процесс и результат;
• зарплата на уровне рынка и выше;
• премии каждые полгода для всех, кто успешно прошел ревью;
• ипотечные программы: под 3% на 10 лет или без процентов на 3 года;
• компенсация питания;
• расширенная программа ДМС, оплата 80% стоимости ДМС для супругов и детей;
• спортзал, тренажерный зал, йога в офисе;
• гибкий график и возможность удаленной работы;
• программа релокации для иногородних сотрудников.