Lead Data Engineer / Data Domain Leader

Описание

Наш клиент, крупная международная FMCG-компания, находится в поиске Lead Data Engineer .

Основная задача:

Проектирование домена и разработка базы данных для Отдела Продаж на основе корпоративной платформы данных в хранилище S3.

Задачи:

• Исследовать бизнес-процессы Отдела Продаж для определения потребностей и целей по улучшению логических моделей данных, развития автоматизации и эффективности процессов

• Проектировать физические модели данных вместе с Архитектором домена данных

• Реализовывать стратегию развития хранилища данных через постановку задач и координацию работы Инженеров данных и Аналитиков данных в соответствии с корпоративными стандартами и с использованием компонентов Платформы данных (DataProc, AirFlow и др)

• Обеспечивать исполнение стандартов код-ревью в рамках согласованных процедур и процессов при поддержке Центрального Офиса Данных

• Обеспечивать интеграции новых источников данных и оптимизации существующих интеграций при поддержке Центрального Офиса Данных

• Обеспечивать внедрение и исполнение принципов управления данными в рамках домена данных Отдела Продаж (при координации от Data Governance Lead): каталог данных, качество данных, доступ к данным, требования безопасности во внедренных процессах обработки и хранения данных

• Организовывать ведение технической документации по разработке

• Быть в роли наставника для аналитиков данных и инженеров

• Изучать и привносить лучшие практики и отраслевые стандарты для улучшения процессов обработки данных, архитектуры хранилища данных, оптимизации рабочих процессов и повышения качества модели данных

Требования:

• От 2 лет опыт в проектировании и реализации комплексных решений по архитектуре данных (стек: Apache, PostgreSQL, S3)

• Глубокие знания в области построения КХД и непосредственный опыт их проектирования по разным методологиям, включая разработку ERD

• Продвинутые знания подходов обработки данных и обширный опыт работы с инструментами ETL, опыт использования разных источников данных и способов подключения к ним

• Опыт работы с облачными провайдерами данных (Azure, Yandex Cloud)

• Отличное знание SQL и Spark, уверенное владение Python

• Опыт работы с инструментами визуализации и многомерными кубами

• Высокая степень самостоятельности в работы со сложными проектами и задачами в условиях ограниченной определенности

• Аналитические способности и навыки анализа данных, работа с большим объемом информации

• Хорошие навыки письменной и устной коммуникации, умение объяснить сложную техническую информацию понятным языком для всех заинтересованных сторон

• Знание английского языка на уровне чтения технической документации

Будет плюсом:

• Базовый уровень владения DAX

• Опыт работы с Power BI

Условия:

• Официальное оформление (ИП, ГПХ)
• Удаленный формат работы (5/2 с 9:00 до 18:00 МСК)
• Конкурентная заработная плата (обсуждается индивидуально)
• ДМС