Big Data Engineer

Чем предстоит заниматься:

• Разрабатывать и развивать платформу данных электронной коммерции нового поколения;
• Проектировать и реализовывать ETL-пайплайны в Airflow для Spark, Streaming, Hive, Trino;
• Оптимизировать существующие пайплайны и Spark-джобы: следить за нагрузкой на кластер, ресурсами и производительностью;
• Взаимодействовать с аналитиками и ML-инженерами, оптимизировать SQL-запросы, развивать культуру осознанной работы с данными;
• Развивать Action Storage — слой событий кликстрима, используемый в аналитике и моделях;
• Анализировать и внедрять новые инструменты для эффективной работы с данными.

Мы ожидаем:

• Опыт работы со стеком Hadoop (YARN, HDFS, Hive);
• Уверенные навыки в Spark;
• Опыт разработки на Python;
• Отличное понимание SQL и принципов работы с СУБД;
• Инженерный подход, интерес к системам данных и внимание к деталям.

Будет плюсом:

• Опыт с Docker;
• Знакомство с Kafka, Iceberg.

Мы предлагаем:

• ДМС со стоматологией, телемедициной и программой поддержки ментального здоровья;
• Страхование жизни;
• Ежемесячные промокоды на Lamoda: два по 25%, два по 15% и в день рождения — 40%;
• Программа привилегий и скидок от BestBenefits;
• До 15 дней больничного в год оплачиваем в размере 100% от действующего оклада;
• Бесплатные юридические консультации;
• Дополнительные выходные в случае важных событий;
• Яркие мероприятия и много неформального общения.

Развитие для каждого:

• Опытный наставник для каждого новичка;
• Обучение и участие во внешних конференциях;
• Помогаем развивать личный бренд, выступать на конференциях и писать статьи;
• Performance Review дважды в год, чтобы развиваться системно;
• Проводим митапы и demo-дни для обмена знаниями;
• Погружаем в fashion и каждый сезон знакомим с модными трендами.