Data Engineer

Описание

Обязанности:

• Поддержка и развитие аналитического контура, развернутого в Yandex облаке в т.ч.:

- мониторинг сервисов и инфраструктуры, контроль за выполнением SLA, решение возникающих проблем;

- управление GitLab (написание пайплайнов CI/CD);

- управление Airflow, MlFlow;

- управление интеграциями между облаком Яндекс и on-premise инфраструктурой банка

• Поддержка и развитие хранилища данных для команды DataScience, построенного на облачном хранилище (S3), с обработкой данных в Apache Spark (PySpark)
• Создание инструментария для команды в составе DS и DE.

Требования:

• Опыт написания кода на Python. Опыт работы с библиотеками для анализа данных (pandas, NumPy).
• Опыт написания запросов SQL.
• Опыт написания пайплайнов CI/CD.
• Базовые навыки работы с Linux.
• Понимание базовых принципов построения сетей.

Технологический стек:

• Yandex Cloud, Python, S3, Spark (PySpark), Airflow, GitLab.
• Опыт работы со следующим инструментарием будет плюсом: Kafka, Terraform, Delta Lake, MLFlow.

Мы предлагаем:

Официальную заработную плату дважды в месяц, полное соблюдение ТК РФ.

Удаленный формат работы .

ДМС, оплата детского сада. Наши сотрудники имеют возможность оформить льготные кредиты и ипотеку.

Увлекательную корпоративную жизнь: конкурсы, спортивные мероприятия, и многое другое.

Режим работы: пятидневную рабочую неделю с 08:30 до 17:30 (может корректироваться по согласованию с руководителем).