Старший инженер инфраструктурных сервисов, Data Platform DBA

Описание

Привет! Это команда Data Platform DBA. Мы отвечаем за надёжность и производительность баз данных и платформы данных, на которых строятся ключевые сервисы компании. Сейчас сопровождаем три кластера Vertica — каждый объёмом около 3,5 ПБ на 128 физических серверах — и планомерно мигрируем на Trino, SQL-движок, который исполняет запросы поверх Hadoop. Мы обслуживаем восемь кластеров Trino по 25 физических серверов каждый. Наша цель — построить отказоустойчивую и масштабируемую платформу данных, развивать автоматизацию и снижать ручную работу инженеров. Кого мы ищем Мы ищем инженера, который готов вместе с нами развивать платформенную инфраструктуру и сопровождать высоконагруженные СУБД. Важно понимание работы с большими хранилищами данных, умение автоматизировать рутину и решать задачи производительности и надёжности. Наш стек Vertica, Trino, Hadoop, Hive Metastore, Apache Iceberg. Ansible, Python, Bash. GitLab CI/CD, Linux. Prometheus, Grafana. Вы будете Развивать, масштабировать и сопровождать решения на базе Trino и обвязку вокруг него. Поддерживать кластеры Vertica. Автоматизировать рутинные операции с помощью Ansible и Python. Проводить траблшутинг, разбирать инциденты и решать проблемы производительности. Интегрировать Trino с каталогами метаданных, оптимизировать коннекторы к источникам данных и слоям хранения. Нам важно Опыт администрирования любой из высоконагруженных СУБД: Vertica, Trino (Presto), PostgreSQL, ClickHouse, Greenplum. Понимание работы с масштабными данными. Хорошее знание Linux/Unix, опыт написания скриптов автоматизации на Python/Bash и работы с Ansible. Уверенное владение SQL, умение читать планы запросов для разбора проблем. Будет плюсом Опыт работы с Trino как администратора. Опыт траблшутинга и масштабирования Trino. Опыт тюнинга JVM и управления памятью. Опыт миграции с традиционных MPP-систем (Vertica, Greenplum) на стек Trino. Понимание внутреннего устройства координатора и воркеров Trino.