Data Engineer

Описание

Приглашаем в стратегический проект импортозамещения и рефакторинга большинства банковских систем. В рамках проекта происходит отказ от Oracle и перерабатываются системы процессинга и учета большинства банковских продуктов (кредиты, карты, рассрочки, депозиты).

Команда DWH Core Migration: команда из 15 системных аналитиков и разработчиков ETL, где ценят инициативу, аналитический подход и качество работы.

Наша задача - обеспечить максимально бесшовную для конечных потребителей DWH миграцию данных в условиях постоянных изменений источников данных, их структуры и логики.

Требования:

• Умение работать с данными (SQL)
• Знание принципов построения DWH и стандартов архитектуры
• Знание архитектуры Greenplum, Hadoop и Clickhouse, умение оптимизировать запросы в этих системах
• Умение работать с ETL инструментами Apache Airflow, Apache NiFi, Apache Flink
• Аналитическое мышление
• Системный подход

Обязанности:

• Проектирование объектов DWH
• Разработка ETL процессов с использование инструментов платформы данных Т-Банка
• Оптимизация уже существующих ETL процессов
• Аудит и оптимизация процессов работы с данными в командах заказчиков
• Работа в программах/приложениях:TEDI, NIFI, Helicopter; Kafka, Hadoop, Greenplum