Data Engineer

Описание

Наша команда предоставляет для Банка ТОП-3 сервис обеспечения бизнес-процессов агрегированными и структурированными внешними данными . Разрабатываем дата-продукт внешнего профиля клиента, так же создаем решения под Hadoop+Scala+Spark, осваиваем разработку API на OpenShift+Postgres и участвуем в разработке ИИ решений.

Сейчас мы ищем коллегу на роль Data инженера для работы в опытной команде

Твои задачи:

• Разрабатывать ETL ПО: витрины данных (Scala + Spark), а также интеграционные потоки с использованием kafka, хранилища данных на Postge и API методов
• Находить возможности оптимизации, повышения скорости расчета, эффективности использования вычислительных ресурсов
• Повышать стабильности работы приложений, анализировать типовые ошибки и возможные риски, развивать систему логирования, её полноту и информативность для последующей промышленной эксплуатации, при необходимости участвовать в решении возникающих при эксплуатации инцидентов
• Развивать систему контроля качества, автотестов
• Работа в тандеме с аналитиком данных, который является носителем ТЗ на разработку
• Соблюдать стандарты разработки (Confluence)
• Оформлять релизную документацию паспорт релиза, чек-листы
• Решать задачи связанные с развитие ИИ агентов на этапе зарождения направления

Мы ждем от тебя:

• Опыт коммерческой разработки в финансовых / телеком компаниях от 1 года
• Навыки работы с SQL, Scala, Spark, Hadoop, Linux, Jenkins, Kafka, REST API, Kerberos, Docker, SonarQube
• Желательно опыт работы на банковских проектах
• Желательно опыт с PostgreSQL, GreenPlum, OpenShift / Kubernetes, Prompt-ehgineering

Что мы обеспечиваем:

• Официально оформление согласно ТК РФ с 1-го рабочего дня
• Работа в гибкой методологии разработки
• Возможность расширить свою экспертизу, используя современный стек технологий
• Сессия профессионального развития персонала дважды в год, результатом которой является план индивидуального развития каждого сотрудника
• Поездки на конференции и тренинги за счет компании, внутренние семинары, внутренние митапы, мы очень любим учиться новому
• Сообщества по интересам: Лига Спорта, Лига Интеллекта, Лига Шахмат, CyberЛига, ЛигаPerformance, Лига Добра, Лига Кошатников, а также возможность организовать свое сообщество и получить поддержку от компании
• Корпоративная культура со своими ценностями и традициями, в которой каждый человек чувствует себя частью команды
• Новая техника для комфортной работы