Старший аналитик и разработчик метрик

Яндекс постоянно работает над улучшением своих сервисов. Один из ключевых моментов в этом процессе — убедиться, что планируемое нововведение действительно будет полезно пользователям. Для этого есть много разных инструментов, в том числе AB-эксперименты, в которых две группы пользователей видят разные версии Яндекса. Для их успешного проведения нужно создавать новые метрики и повышать чувствительность уже существующих.

====Вам предстоит:

• анализировать поведение пользователей в эксперименте;
• использовать данные из разных источников для увеличения чувствительности метрик;
• измерять чувствительность и достоверность новых версий метрик;
• следить за тем, чтобы ваши метрики корректно интегрировались во внутреннюю систему измерений.

====Необходимо:

• понимать, что такое статистические тесты;
• знать границы применимости таких тестов и легко распознавать ситуации, когда предположения не оправдываются;
• уметь считать среднее и дисперсию случайных величин в нестандартных процессах, когда нельзя предполагать независимость величин друг от друга;
• программировать на C++ и Python или хотя бы на одном из них;
• без проблем читать связанные с работой статьи на английском языке;
• иметь опыт работы в разработке или аналитике не менее трёх лет;
• уметь вести несколько проектов одновременно и самостоятельно расставлять верные приоритеты;
• уметь спокойно и аргументированно отстаивать свою точку зрения и выслушивать чужую.

====Плюсом будет:

• опыт работы с пакетами статистических программ — например, с R или MATLAB;
• опыт работы с MapReduce или аналогами;
• опыт применения машинного обучения;
• опыт управления командой.