Ведущий инженер данных / Senior Data engineer (Iceberg)

Описание

М.ТЕХ - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ М.ВИДЕО-ЭЛЬДОРАДО разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России .

МЫ В ПОИСКЕ ВЕДУЩЕГО ИНЖЕНЕРА ДАННЫХ

Мы относимся к платформе данных кластера Коммерция, извлекаем и доставляем данные, делаем дашборды, создаем DataLake.

Стек команды: PostgreSQL, Greenplum, Clickhouse, Spark, Python, SQL, Airflow, Iceberg, Kafka, Trino, Superset, Tableau, SAP BW/ERP, Docker, Ci/Cd.

ТЕБЕ ПРЕДСТОИТ:

• поддержка и создание интеграций и витрин в рамках хранилища данных;
• построение ETL-процессов;
• подключение новых ист очников в хранилище данных по стандартизированному процессу;
• создание механизмов проверки качества данных;
• документирование результатов разработки;
• осуществление поддержки имеющихся процессов;
• разбор legacy и перенос на новые инструменты.

ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:

• знание концепций работы с git и CI/CD процессами;
• знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;
• знания принципов работы БД, построения ХД, опыт работы с Iceberg;
• опыт разработки ETL процессов;
• опыт работы с табличными форматами хранения.

ЧТО ТЫ ПОЛУЧИШЬ:

• Продукты, признанные на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющие амбициозные планы на развитие;
• Конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;
• Команду увлеченных профессионалов, которая открыта к поиску нового;
• Конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Москве на гибриде в Сколково, БЦ Орбион, но ты можешь работать удаленно в пределах РФ);
• ДМС со стоматологией.