Инженер (Hadoop)

Описание

Обязанности:

• Участие в пуско-наладочных работах по продуктам компании (на базе Hadoop, Kafka, NiFi): установка, первичная настройка и тестирование;
• Проведение исследовательских работ (proof of concept), пилотных проектов, нагрузочных тестов на базе продуктов компании по требованиям заказчика и дополнительному описанию от Архитектора;
• Подготовка инструкций по функциональным возможностям продуктов компании по требованию заказчика;
• Выезд в ЦОД заказчика для проведения пуско-наладочных работ по требованию заказчика.

Мы ждем, что вы:

• Имеете опыт установок, эксплуатации, сопровождения, оптимизации и конфигурирования одной или нескольких систем: Hadoop, Kafka, NiFi, Airflow, Spark, Trino, Impala, Ranger;
• Имеете уверенное знание Linux - мы используем дистрибутивы RedHat/Centos и AltLinux;
• Имеете базовое знание одного из скриптовых языков программирования (Python или Bash);
• Имеете отличное понимание работы сетевых протоколов (модель OSI);
• Имеете опыт системного администрирования Linux-серверов.

Плюсом будет:

• Знание Ansible, git, Grafana;

• Опыт проектирования и реализации процессов CI/ CD;

• Знание принципов работы систем и алгоритмов аутентификации и авторизации на базе ActiveDirectory, LADP, Kerberos, FreeIPA и других;

• Опыт эксплуатации и сопровождения серверного оборудования;

• Опыт администрирования различных СУБД, выполнение бэкапов и ресторов;

• Опыт работы с Kubernetes;

• Опыт работы с интеграциями систем;

• Опыт работы в качестве дата-инженера.