Data Engineer

Описание

Мы — группа аналитики и автоматизации контроля качества пунктов выдачиOzon. За последние несколько лет сеть ПВЗ кратно увеличилась, и перед нами стоит амбициозная задача — следить за тем, чтобы качество росло вместе с масштабом сети. Наше направление отвечаем за то, чтобы каждый пункт выдачи соответствовал высоким стандартам Ozon: автоматизируем процессы и регулярные проверки, следим за ключевыми метриками качества. Наша работа напрямую влияет на впечатление миллионов клиентов от сервиса, а также на тарификацию ПВЗ. Мы ищем инженера данных, который поможет развивать и автоматизировать процессы контроля качества ПВЗ: строить надёжные пайплайны, работать с потоками данных и интеграциями, превращать бизнес-задачи в масштабируемые технические решения. В этой роли предстоит: Проектировать и развивать ETL/ELT-пайплайны: от получения данных из внешних систем до их обработки, хранения и передачи в аналитические витрины. Работать с потоковой обработкой событий и очередями сообщений на базе Kafka. Разрабатывать API и интеграции с внутренними сервисами: REST и gRPC. Строить, поддерживать и оптимизировать DAG-пайплайны в Airflow. - Работать с PostgreSQL, ClickHouse и S3-совместимыми объектными хранилищами. Участвовать в проектировании архитектуры решений, декомпозиции задач и выборе технических подходов. Повышать надёжность сервисов: добавлять логирование, мониторинг, обработку ошибок, ретраи и алерты. Взаимодействовать с аналитиками, ML-инженерами, командами разработки и менеджерами проектов. Ключевые навыки: Python: ООП, async, multiprocessing/threading Airflow — построение и поддержка DAG-пайплайнов Базы данных и SQL — PostgreSQL, ClickHouse Kafka — стриминг и очереди событий API — REST (aiohttp/FastAPI) и gRPC S3 / объектное хранилище — работа с бакетами, хранение данных Будет плюсом: - ffmpeg - другие языки программирования ​Условия: Оформление по ТК РФ. Гибридный график работы (минимум 1 день офис): 5/2 с 9:00 или 10:00 до 18:00 или 19:00. Здоровье: ДМС со стоматологией, страхование от несчастных случаев, полис выезжающих за рубеж. Развитие: профессиональный и карьерный рост. Корпоративные программы: скидки и привилегии от компаний-партнёров для наших сотрудников. Социальная ответственность: материальная помощь, подарочные сертификаты при рождении ребенка. Питание: можно перекусить на оборудованных кухнях, в офисе расположены вендинговые аппараты здоровой еды. Достойный уровень заработной платы. Адрес: Пресненская наб.10, Блок С.