Data Engineer (Fintech)

Описание

Локация: Гибридный офисКомпанияYandex — технологический гигант, создающий платежные продукты и сервисы для управления личными финансами в рамках направления Финтех.Что делатьРазрабатывать и поддерживать ETL-процессы для извлечения и обработки данных из различных источников.Оптимизировать и рефакторить сложную аналитическую логику, ориентируясь на работу с большими объемами данных.Проектировать структуру и закладывать основы современного аналитического хранилища (DWH).Обеспечивать стабильность, полноту и корректность данных, минимизируя количество сбоев.Взаимодействовать с аналитиками для перевода бизнес-требований в эффективные технические решения.ТребованияОпыт работы от 3 лет.Уверенное владение Python и глубокие знания SQL.Понимание устройства современных СУБД.Опыт работы с CI/CD, системами контроля версий, код-ревью и мониторингом.Навыки работы в Unix-подобных системах (Linux, macOS).Хорошо, если естьОпыт создания высоконагруженных ETL/ELT процессов (Hadoop, Hive, Spark).Опыт работы с потоковой обработкой данных (Kafka, Spark Streaming, Flink).Знакомство с аналитическими БД (ClickHouse, Greenplum, Vertica, Teradata).Владение инструментами анализа данных на Python (pandas, SciPy, Matplotlib, Jupyter).Опыт менторства стажеров или работы по Agile.Культура и преимуществаРабота в новом проекте без legacy-кода с возможностью влиять на архитектуру.Профессиональный рост как в инженерном плане, так и в бизнес-домене Финтеха.Гибридный формат работы.Использование современных инженерных практик и подходов в разработке.