Data Engineer

Описание

Чем предстоит заниматься Разрабатывать и поддерживать ETL/ELT-процессы полного цикла; Строить и оптимизировать хранилище данных и витрины; Следить за стабильностью и производительностью data-пайплайнов; Участвовать в проектировании data-моделей и архитектуры; Внедрять проверки качества данных и мониторинг; Документировать решения и улучшать процессы разработки. Мы ждём Опыт работы на позиции Data Engineer от 2 лет; Хорошее знание SQL, включая оптимизацию сложных и ресурсоёмких запросов, работа с оконными функциями; Опыт работы с ClickHouse, понимание особенностей колоночных БД; Опыт работы с Airflow: построение и сопровождение DAG-ов, анализ и устранение ошибок; Знание Python для data-задач: обработка данных, разработка коннекторов и утилит, написание тестов; Опыт разработки ETL/ELT-процессов и работы с большими объёмами данных; Опыт обеспечения качества данных: логирование, мониторинг, проверки, алерты, соблюдение SLA; Опыт работы с Git, участие в code review, понимание CI/CD и Merge/Pull Requests; Опыт работы с Docker. ## Будет плюсом Опыт работы с Sql Server, Firebird; Опыт работы со стриминговой обработкой данных; Знание подходов к моделированию данных Kimball / Data Vault; Опыт работы с GitLab CI; Использование LLM в своей работе. Условия Только гибридный график или офис ( удаленного формата нет). Уровень ЗП обсуждается с успешным кандидатом. Классные ежемесячные бонусы от нас: билеты в кино, посещение боулинга\бильярда, терм, колеса обозрения и детских парков!