Технический лидер DWH
Описание
Мы ООО «Датаномика», собираем инженерные команды под задачи крупного бизнеса. 6+ лет на рынке, 160+ инженеров в штате, 45+ реализованных проектов в финсекторе, телекоме и ретейле. Развиваем шесть направлений экспертизы: высоконагруженные банковские системы, хранилища данных (DWH), генеративный ИИ, комплаенс-системы, кибербезопасность и импортозамещение софта. Аккредитованная ИТ-компания. Сейчас у нас открыта вакансия Тех.лида DWH на проект в крупный Российский банк. Технологический стек: SQL, Python, Apache Spark, Hadoop/S3/S3-like, Apache Airflow, Parquet/ORC. Знание Apache Iceberg, Apache Kafka будет плюсом Чем предстоит заниматься: Анализом и оценкой требований бизнеса (Управление данными / Data Governance); Анализом существующих и выстраиванием новых бизнес‑процессов; Созданием ETL‑прототипов витрин данных и доработкой существующих; Постановкой задач на разработчика; Проектированием решений, разработкой прототипов, тестированием разработанного функционала, написанием проектной документации (FSD, ER‑диаграммы, логической модели объектов, созданием и согласованием архитектурных Vision/OTAP, заполнением датакаталога); Проработкой WA при сбоях; Анализом и выработкой решений по поддержке отчётности при изменении внешних данных систем‑источников; Поддержкой разработанных решений в качестве 3‑й линии поддержки, ad‑hoc выгрузки; Разработкой тест‑кейсов и проведением внутреннего и интеграционного тестирования со смежными системами‑потребителями данных витрины, подготовкой синтетических данных для тестирования; Заключением SLA с системами‑поставщиками данных и заказчиком, созданием контролей качества данных, разбором инцидентов КД, проработкой мероприятий по минимизации инцидентов; Поддержкой актуальности проектных задач в Jira; Контролем за выполнением работ и приёмкой функционала от поставщиков; Участием в создании и развитии стандартов и продуктов работы аналитиков департамента; Наставничеством и ревью в рамках своего направления. Необходимые знания и навыки: Опыт работы с реляционными и нереляционными СУБД (предпочтительно GreenPlum, BDP/S3); Знание SQL — на уровне написания сложных запросов, знание оконных функций и теории проектирования реляционных БД, навыки чтения чужого многоярусного кода, опыт оптимизации кода; Знание ETL‑инструментов (Apache Airflow, Spark); Понимание работы Управляющего механизма и подписок на загрузки источников данных; Опыт сбора, анализа, декомпозиции и формализации бизнес‑требований заказчика; Опыт работы с интеграционными задачами Знание архитектурных стандартов и стандартов разработки Опыт участия в проектах по разработке и внедрению прикладных информационных систем Умение работать с большими объёмами данных Опыт работы в Atlassian JIRA и Confluence Понимание банковских продуктов и процессов, принципов Data Governance Опыт разбора расхождений ККД и инцидентов на данные Умение разобраться в любой lineage‑цепочке данных по слоям, а также переливки данных между системами Опыт работы с git или другой системой контроля версий Самостоятельность и проактивность, умение чётко планировать своё рабочее время, выполнять поставленные задачи в установленные сроки Навык по ведению переговоров, умение вести аргументированные диалоги с членами команды Анализ существующих и выстраивание новых бизнес‑процессов Мы предлагаем: Удаленный или гибридный формат работы; Работа в аккредитованной ИТ-компании; Проекты в крупнейших банках и корпорациях — реальная нагрузка и масштаб (mission-critical системы, высоконагруженная обработка данных); Регулярное обучение и профильные конференции за счёт компании, современное оборудование; Официальная «белая» зарплата, оформление с первого рабочего дня, полное соблюдение ТК РФ; Интересные амбициозные задачи с достижимым результатом