Senior data-инженер
Описание
Дирекция мониторинга Agile в поисках системного аналитика с опытом работы в крупных проектах/продуктах (несколько команд разработки: front-end, back-end, DE и хранилище, BI и AdHoc-отчетность). Команда разрабатывает уникальный по масштабу и сложности проект, призванный изменить систему управления Банком, сделав её прозрачной за счёт data-driven подхода. Продукт внедрен и используется в периметре Sbergile – Agile dashboard (известный также как «черный» дэшборд). Ежемесячная аудитория дэшборда составляет 4500+ уникальных пользователей. Продукт активно развивается и дорабатывается новыми фичами на основе требований и пожеланий заказчиков. Наша система мониторинга ежедневно используется руководством Банка для принятия стратегических решений, а количество задач растёт изо дня в день. Вам предстоит: прорабатывать архитектуру хранилища данных, а также его интеграцию с внешними системами проектировать и разрабатывать витрины данных для целей аналитики и моделирования на тех. стеке: PostgreSQL, ClickHouse, SQL, Python, Kafka, Rest API, Qlik загружать, очищать и трансформировать большие объемы данных из различных источников мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин разрабатывать инструменты для автоматизации рутинных задач. Мы ожидаем: опыт работы в качестве Data Engineer / MLE от 3 лет знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов и анализ плана выполнения) опыт разработки ETL-процессов (партиционирование, секционирование, работа с временными рядами) уверенное владение Python для автоматизации опыт работы с Apache AirFlow, NiFi. Будет плюсом: опыт создания AI-агентов и использования их в работе опыт разработки и оптимизации ETL-процессов для ClickHouse. Мы предлагаем: гибридный формат работы (3-4 дня в офисе) годовой бонус и ежегодный пересмотр расширенный ДМС с первого дня + стоматологию и льготное страхование для семьи корпоративный университет Сбера, внутреннюю образовательную платформу, участие в IT-конференциях офис на Кутузовской с зонами отдыха и спортзалом льготную ипотеку в Сбере, корпоративную пенсионную программу, подписку СберПрайм с возможностью совместного использования на трёх близких, скидки от партнеров и сервисов группы компаний.