Data Engineer
Описание
ООО "Вебпро" – ведущая российская ИТ-компания с десятилетним опытом. Автоматизируем сферу тарифного регулирования (теплоснабжение, электроэнергетика, водоснабжение). Создаем уникальные технологии, среди направлений - электронный обмен данными, инструменты анализа и прогнозирования данных, автоматизация процессов принятия решений на основе данных, системная интеграция.Наши разработки используются федеральными ведомствами, такими как ФАС России, Минстрой России, Минэнерго России и крупными корпорациями, включая ПАО «Русгидро», Группа компаний «Интер РАО», Госкорпорация «Росатом» и ООО «Газпром энерго». С нами работают более 92 000 активных пользователей, и их число постоянно растет. В портфеле более 450 успешно реализованных проекта, более 10 продуктов. ООО "Вебпро" входит в группу компаний "Ростелеком". Мы в поиске Data Engineer, готового обеспечить создание и развитие новой Федеральной государственной информационной системы «Объекты коммунальной инфраструктуры» как продукта федерального масштаба. В задачи на данной позиции будет входить:- Перенос исторических данных в новую систему и создание необходимых объектов в базе данных- Настройка и доработка скриптов автоматизации конвертации под новую архитектуру.- Верификация корректности переноса: контроль полноты миграции и устранение возникающих отклонений- Восстановление потерянных данных после миграционных процессов- Корректировка нарушений нормализации и исправление некорректных записей, возникающих при сбоях back-end- Тюнинг представлений, хранимых процедур и сложных запросов для повышения производительности- Создание и регулярное обновление документации по архитектуре и ключевым компонентам базы данных- Проектирование и внедрение процессов загрузки, выгрузки и выборки данных для различных модулей системы- Быстрая подготовка и выполнение нестандартных SQL-запросов по запросам внутренних команд Мы ожидаем от Вас:- Продвинутое владение SQL и умение оптимизировать сложные запросы- Знание PL/SQL и опыт написания/отладки хранимых процедур- Опыт работы с различными СУБД не менее 2 лет, включая ClickHouse- Практические навыки программирования на Python (1 год и более)- Навыки работы с системами аналитики: Google Analytics, Яндекс Метрика.- Критическое мышление: умение формулировать правильные вопросы и находить на них ответы самостоятельно- Желание разбираться в архитектуре системы, диагностировать узкие места и дорабатывать компоненты, связанные с БД- Понимание принципов разработки ETL-процессов (например, Apache Airflow, NIFI) будет преимуществом- Системность, внимательность к деталям, самостоятельность, развитые коммуникативные навыки Будет плюсом:- Опыт работы с Arenadata (LuxMus, Streaming, Catalog), Debezium, Kafka- Опыт миграции решений с Oracle на PostgreSQL Мы предлагаем:- Гибридный или удаленный формат работы с 9.00 до 18.00 (или с 10.00 до 19.00)- Офис – Москва-Сити, Пресненская набережная, д.10, блок С- Оформление по ТК РФ в ИТ компании- Белая и конкурентоспособная зарплата- ДМС- Возможности профессионального роста и участия в стратегических задачах компании- Экспертный рост, понимание своей карьерной траектории в рамках единой команды