Дата инженер / Специалист по интеграции данных

Описание

Мы проектный институт, занимающийся разработкой комплексных технических решений. В нашей экосистеме работает множество внутренних веб-сервисов с уникальными продуктовыми базами данных. Наша цель создать централизованное, надёжное и эффективное хранилище данных для аналитики и принятия стратегических решений

Задачи, которые предстоит выполнять:

• Проектирование и реализация процессов сбора данных из распределённых веб-сервисов и БД в единое хранилище
• Разработка ETL/ELT-процессов с акцентом на эффективность и отказоустойчивость
• Интеграция разнородных источников данных (SQL, NoSQL, REST API и др.)
• Оптимизация производительности и мониторинг пайплайнов
• Обеспечение безопасности, резервирования и восстановления данных
• Автоматизация процессов, документирование решений
• Взаимодействие с командами сервисов для согласования форматов и требований

Ищем кандидата, который имеет:

• Опыт работы с ETL/ELT-инструментами (Apache Airflow, Spark, опционально: NiFi, Talend и т.д.)
• Глубокие знания SQL и опыт работы с реляционными/нереляционными БД
• Понимание принципов построения хранилищ данных (Data Warehouse, Data Lake) на Greenplum
• Навыки программирования на Python, Java
• Умение работать с API
• Опыт обеспечения надёжности систем: обработка ошибок, мониторинг (Zabbix, Graylog, Apache Superset, опционально: Prometheus, Grafana), тестирование
• Знание Linux, Docker, Kubernetes будет преимуществом

Мы предлагаем:

• Участие в проекте с высокой степенью ответственности и возможностью влиять на архитектуру
• Современный технологический стек и поддержку профессионального роста
• Оформление согласно ТК РФ (официальная заработная плата)
• ДМС, страхование жизни и выезда за рубеж, корпоративные скидки, кафетерий льгот (на выбор)
• Годовая премия по результатам работы
• Благодаря инновационному подходу к работе и использованию самых продвинутых технологий, компания получила статус аккредитованной ИТ-компании
• Здоровая рабочая атмосфера, комфортные условия труда (чай, кофе, фрукты, пинг-понг, кикер, занятия йогой в офисе, участие в спортивных мероприятиях)
• Пятидневная рабочая неделя, гибкое начало рабочего дня с 8.00 до 10.00

Мы команда единомышленников, активно внедряющая инновации и достижения мирового опыта в процесс проектирования. Работа у нас это стабильность и возможность профессионального развития и карьерного роста