Data Engineer

Описание

АО РУССКИЙ ПРОДУКТ - крупный отечественный производитель бакалейной продукции. Успешно работает на рынке с 1996 года.

Наши бренды: Геркулес , Суперсуп , "Печем дома", "Традиция", и др.

Мы предоставляем возможности для профессионального развития, повышения квалификации и карьерного роста.

Наша цель сохранение и развитие лучших традиций отечественного пищевого производства!

О роли

Ищем Data Engineer, который возьмёт на себя архитектуру и инфраструктуру данных. Строим масштабируемую data-платформу, которая будет расти вместе с бизнесом. Выбор стека за вами. Нам важен результат и готовность использовать современные инструменты.

Работа в паре: вы отвечаете за архитектуру и пайплайны, коллега за ML/NLP алгоритмы (очистка данных, классификация, LLM-пайплайны). Вы говорите здесь нужен алгоритм с такими входами и выходами коллега делает. Нужен human-in-the-loop проектируем вместе.

Активно используем AI-инструменты в разработке (Claude Code и подобные) приветствуем такой же подход.

Данные:

• 1 ТБ сырых данных
• Источники: Excel, CSV, TXT, API, документы
• Разные форматы, разная структура, разная агрегация

Что нужно построить:

• Гибкую и расширяемую платформу данных
• Многослойную архитектуру хранения (raw очищенные витрины)
• ETL/ELT пайплайны с возможностью перезапуска и обновления исторических данных
• Справочники с сохранением истории изменений
• Интеграцию с внешними API и новыми источниками данных
• Human-in-the-loop процессы для валидации и контроля качества

Задачи:

• Проектирование архитектуры хранилища
• Разработка пайплайнов обработки данных
• Настройка оркестрации и мониторинга
• Создание витрин для аналитики
• Интеграция ML-компонентов в pipeline

Ожидания:

• Опыт Data Engineer от 2 лет
• Опыт построения ETL, а не только поддержки существующего
• SQL, Python
• Оркестраторы (Airflow, Dagster, Prefect любой)
• Моделирование данных, партиционирование
• Docker, Linux

Важно:

• Готовность выбирать современные инструменты (Polars, DuckDB, Dagster если видите смысл)
• Умение аргументировать архитектурные решения
• Интерес к экспериментам и новым подходам

• Работа в крупной российской производственной компании с известными брендами!
• Оформление в соответствии с ТК РФ;
• Официальная заработная плата;
• Полный социальный пакет, ДМС;
• Оплачиваемые отпуска (28 календарных дней) и больничные листы;
• Корпоративные мероприятия;
• Новогодние подарки детям сотрудников;
• График работы 5/2. Гибкое начало рабочего дня, офисный формат работы ;
• Креативная среда, позволяющая раскрыть лидерский потенциал и быть причастным к результатам бизнеса;
• Возможность карьерного развития, как внутри функции, так и в любом другом направлении компании;
• Возможность учиться у "сильных", успешных личностей-экспертов в своем деле.

Мы готовы предложить нашим сотрудникам не только интересные задачи и стремительный карьерный рост, но и приятные бонусы, которые скрасят трудовые будни:

• Экскурсии на производства;
• Гибкий график работы;
• Team building мероприятия;
• Кофе и снеки за счет компании;
• Личное участие в разработке новых продуктов.

Мы будем рады, если Вы присоединитесь к нашей успешной Команде!