Инженер данных (Data Engineer)
Описание
Третье Мнение — разработчик IT-решений для системы здравоохранения. Мы создаём продукты на основе технологий искусственного интеллекта, которые помогают автоматизировать процессы в медицинских организациях, ускорять принятие врачебных решений и повышать качество и безопасность медицинской помощи. Сейчас мы ищем Инженера данных (Data Engineer), который будет заниматься развитием и поддержкой инфраструктуры обработки и хранения данных, обеспечивать их качество, доступность и эффективное использование в аналитических и продуктовых задачах компании. Чем предстоит заниматься: Разрабатывать, тестировать и поддерживать ETL/ELT-процессы для сбора, преобразования и загрузки данных из различных источников в корпоративное хранилище Проектировать и развивать архитектуру хранилища данных (DWH), оптимизировать схемы данных, выбирать форматы хранения и стратегии партиционирования Создавать и поддерживать витрины данных для аналитических и продуктовых команд Разрабатывать и поддерживать процессы обработки данных с использованием Apache Airflow Оптимизировать производительность SQL-запросов, контролировать использование ресурсов и эффективность хранения данных Реализовывать механизмы проверки качества и целостности данных, выявлять и устранять аномалии Настраивать мониторинг процессов обработки данных, оповещения о сбоях и механизмы автоматического восстановления Внедрять и поддерживать стратегии управления жизненным циклом данных Обеспечивать стабильную работу и доступность хранилища и витрин данных Поддерживать актуальность используемых библиотек и инструментов обработки данных в средах разработки, тестирования и эксплуатации Участвовать в проверке и оптимизации SQL-запросов совместно с аналитиками Документировать процессы обработки данных, их источники, преобразования и зависимости Взаимодействовать с командами разработки, аналитики и машинного обучения для решения задач, связанных с данными Будем рады видеть в новом коллеге следующее: Опыт работы инженером данных (Data Engineer) от 2 лет Уверенное владение Python и SQL, опыт их практического применения для обработки и преобразования данных Опыт проектирования, построения и развития хранилищ данных (DWH) Практический опыт работы с Apache Airflow: разработка, настройка и поддержка DAG Понимание принципов построения ETL/ELT-процессов и организации потоков данных Знание подходов к моделированию данных, оптимизации SQL-запросов и повышению производительности хранилищ Понимание принципов обеспечения качества, целостности и доступности данных Умение самостоятельно разбираться в сложных технических задачах и находить оптимальные решения Ответственность, внимательность к деталям и готовность взаимодействовать с другими техническими командами Будет плюсом: Опыт работы с большими объёмами данных и высоконагруженными системами Опыт настройки мониторинга и автоматизации процессов обработки данных Знакомство с инструментами контейнеризации и процессами CI/CD Опыт работы с данными для машинного обучения и аналитических систем Опыт работы в MedTech, HealthTech или с медицинскими данными Мы предлагаем: Работу в аккредитованной IT – компании, где налажена прямая связь с командой, руководителем и менеджментом компании в концепции полного доверия и максимальной прозрачности Официальное трудоустройство по ТК РФ и предоставление всех обязательных гарантий Конкурентный и полностью официальный уровень дохода Стандартный отпуск 28 календарных дней и дополнительно еще 3 календарных дня за ненормированный рабочий день Программу ДМС после прохождения испытательного срока в лучших клиниках, а также возможность подключить близких родственников к корпоративному страхованию на льготных условиях Удобную и современную технику для эффективной работы