Data Engineer

Описание

Мы развиваем платформу данных для подготовки датасетов «общих знаний» о внешнем мире. Эти данные напрямую используются в развитии ИИ: для обучения моделей, retrieval/search и других сценариях. Обязанности определять и развивать целевую архитектуру платформы данных и ключевых доменных моделей проектировать и реализовывать критичные пайплайны и хранилища, обеспечивая надёжность, производительность и масштабируемость вводить и поддерживать стандарты качества данных, схем, версионирования, мониторинга и алёртинга проводить архитектурные ревью, дизайн‑сессии, помогать команде в декомпозиции и решении сложных задач оптимизировать существующие решения: хранение, запросы, пайплайны, снижать стоимость и повышать SLA. Требования высокий уровень владения Python и SQL, опыт разработки высоконагруженных data‑систем и сервисов знание технологий ClickHouse (YTsaurus,Trino также будет плюсом) глубокое понимание архитектуры распределённых систем, потоковой обработки, репликации и консистентности данных опыт построения data platform: lakehouse/dwh, медальонная модель, витрины, семантический слой навыки оптимизации БД и запросов (планы выполнения, индексы, партиционирование, горизонтальное масштабирование) опыт проектирования end‑to‑end пайплайнов (ingestion, трансформации, BI), а также умение отслеживать состояние платформы на каждом из этапов SLA, мониторинг Условия стабильный оклад и премии по результатам работы, ежегодный пересмотр зарплаты комфортный современный офис гибридный формат работы: встречаемся очно в офисе 1 раз в неделю корпоративный спортзал и зоны отдыха уникальная система обучения Сбера для профессионального и карьерного развития программа адаптации и помощь руководителя на старте расширенный ДМС и льготное страхование семьи гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ бесплатная подписка СберПрайм, скидки на продукты компаний-партнеров вознаграждение за рекомендацию друзей в команду Сбера корпоративная пенсионная программа