Data Engineer (Apache Spark)

Описание

Локация: Москва, офисный формат работы на месте работодателя
Зарплата: до 424 400 ₽ в месяц до вычета налогов
Компания
СБЕР — крупная финансовая организация с корпоративными программами развития, страхования и пенсионными решениями.
Что делать

Проектировать решения на основе спецификаций в подходе Spec-driven.
Разрабатывать ETL/ELT-процессы.
Настраивать оркестрацию и мониторинг процессов обработки данных.
Оказывать аналитическую поддержку и участвовать в проектировании витрин данных.
Поддерживать документацию и взаимодействовать со стейкхолдерами.

Требования

От 4 лет опыта в ролях Data Engineer, DWH-разработчика или системного аналитика данных.
Продвинутый SQL: оконные функции, CTE, EXPLAIN и оптимизация запросов.
Уверенное владение Apache Spark и промышленная разработка на Scala.
Опыт работы с HDFS, Hive Metastore, YARN и форматами Parquet/ORC.
Практический опыт с Airflow, Luigi или аналогичными оркестраторами.
Владение Git, включая GitFlow, код-ревью и разрешение конфликтов.

Хорошо, если есть

Опыт проектирования витрин данных с нуля под продуктовые метрики.
Python, Pandas или PySpark для вспомогательных скриптов, тестирования и анализа.
Начальные знания и интерес к Machine Learning и Data Analysis.

Культура и преимущества

Полная занятость и офисный формат работы.
Ежегодный пересмотр зарплаты и годовая премия.
Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
Расширенный ДМС, льготное страхование семьи и корпоративная пенсионная программа.
Льготные финансовые условия, подписка Прайм и вознаграждение за рекомендации.