Data Quality Engineer

Описание

Обязанности: Мониторинг качества Feature Store - настройка проверок на платформе Evidently, сверка логики сбора фичей с продовым скорингом, выявление деградации и расхождений; Поддержка и развитие существующих проверок качества данных; Внедрение автоматических проверок на этапах загрузки (Soda Core); Настройка дашбордов в Grafana; Синхронизация наполнения OpenMetaData; Аудит пользовательских витрин: анализ использования, выявление неиспользуемых и ресурсоёмких объектов; Взаимодействие с аналитиками BI для корректного построения источников данных. Требования: Стек технологий :Python, SQL, Apache Airflow, Soda Core, Grafana, OpenMetaData, Git, Trino, Apache Iceberg, Evidently Опыт коммерческой разработки на Python от 1 года (именно для data-инженерии); Продвинутый SQL (оконные функции, CTE, объединения, подзапросы); Опыт написания DAG в Apache Airflow; Практический опыт внедрения проверок качества данных (Soda Core или аналоги); Понимание принципов Data Quality: уникальность, полнота, свежесть, согласованность, распределение; Знание принципов настройки мониторинга данных (Grafana); Знание каталогов метаданных (OpenMetaData или аналоги); Готовность взаимодействовать с BI-разработчиками (Qlik, Power BI). Условия: Официальное трудоустройство и стабильная заработная плата; Удаленный формат работы; Возможности профессионального и карьерного роста внутри банка; ДМС после испытательного срока.