Go-разработчик в Технический департамент, Москва

Описание

Локация: Москва, комбинированный формат работы
Компания
VK развивает техническую инфраструктуру продуктов и единую платформу OneDWH для хранения и обработки данных компании.
Что делать

Развивать платформу DWH как продукт.
Создавать инструменты для поиска данных, заведения и сопровождения ETL.
Разрабатывать инструменты для аналитиков, работающих с данными в OneDWH.
Работать с графами зависимостей ETL-процессов: планировать выполнение, распределять задачи по кластерам и оптимизировать процессы.
Строить отказоустойчивые решения для критичных данных.

Требования

Опыт разработки сервисов на Go.
Уверенное владение PostgreSQL.
Опыт работы с Kafka.
Хорошее знание алгоритмов и структур данных, особенно графовых.
Уровень: senior.

Хорошо, если есть

Знакомство с Java, Python, Spark или YTsaurus.
Опыт в DWH, ETL или дата-инженерии.
Опыт работы с Airflow.
Опыт создания CI/CD-пайплайнов в GitLab или другой системе.
Готовность тесно работать с дата-инженерами и аналитиками.

Культура и преимущества

Команда развивает единое хранилище данных OneDWH для всей компании.
Данные размещаются в кластерах YTsaurus.
В работе используются Data Catalog, ETL-фреймворк и инструменты контроля качества данных.
Формат работы — комбинированный.