Инженер по сопровождению Big Data-платформы
Описание
Юзтех – группа аккредитованных ИТ-компаний полного цикла разработки с многолетней экспертизой в передовых технологиях: DWH, BigData, AI/ML, Blockchain, BI, предиктивная аналитика, цифровые двойники производства и рисков. ГК Юзтех является технологическим партнером таких компаний, как Mail.ru, 2Gis, НЛМК, Еврохим, ГоИнвест, Альфа-Банк, Сбер, ВТБ, МКБ, Самолет, Х5 retail Group, Газпромнефть, Леруа Мерлен, Ситилинк, Ланит, IBS. Также, ГК разрабатывает собственные ИТ-продукты (Юзбас, Октопус, Тил Эйчар) и флагманские проекты, которыми пользуется 70% населения страны. Сфера: Система автоматизирует процессы расчёта и аллокации расходов по бизнес-блокам, продуктам, клиентским сегментам, каналам продаж и проектам, а также включает инструменты аналитической отчётности и дашборды. Ищем инженера, который будет отвечать за техническое сопровождение платформы, анализировать сбои в процессах обработки данных и локализовывать причины возникающих проблем. Задачи: Сопровождать и анализировать существующие процессы загрузки и обработки данных. Мониторить процессы загрузки, выявлять отклонения и аномалии. Локализовывать причины технических сбоев в компонентах платформы. Анализировать работу Spark, Hive и Impala, корректировать скрипты для диагностики проблемных кейсов. Читать Python-код и определять потенциальные причины ошибок. Работать с логами и собирать техническую информацию для анализа инцидентов. Разбирать обращения пользователей в рамках второй линии поддержки, в том числе вопросы, связанные с перегрузкой данных. Устанавливать доработки в продуктивный контур. Проверять техническую документацию. Взаимодействовать с техническим лидером, аналитиком и разработчиками команды. Мы ожидаем: Уверенное знание SQL: DML, DDL. Практический опыт работы со Spark, Hive и Impala. Хорошее понимание Spark и особенностей обработки данных в Big Data-среде. Умение анализировать и корректировать скрипты для локализации проблем и сбора технической информации. Опыт работы с Airflow, Kafka, S3 / MinIO, ClickHouse, PostgreSQL. Python — умение читать код, понимать его логику и локализовывать ошибки. Базовое владение Bash: поиск логов, анализ информации в них, выполнение простых команд. Опыт работы с Git, CI/CD, Jira, Confluence или аналогичными инструментами. Понимание форматов XML, JSON. Навыки системного анализа, необходимые для поиска причин сбоев и анализа работы системы. Опыт работы с React от 6–12 месяцев: достаточно понимать устройство приложения и уметь локализовывать сбои во frontend-части. Будет плюсом опыт работы с Power BI и аналитическими системами. Мы предлагаем: Карьерную и профессиональную возможность в стабильной, аккредитованной ИТ-компании; Расширенный полис ДМС со стоматологией, корпоративный психолог; Необходимую технику для комфортной работы; Обучение, сертификацию, клуб английского языка; Доступ к Корпоративной библиотеке и к Корпоративному университету; Внутрикорпоративные профильные коммьюнити; Заботу о детях сотрудников: корпоративные скидки, подарки, детские дни; Геймифицированную программу лояльности: поверь, ты будешь восторге от нашего корпоративного магазина; Корпоративную жизнь: мы много работаем и классно отдыхаем.