Data Engineer, Команда операционных прогнозов

Описание

Привет! Это команда операционных прогнозов. Мы занимаемся операционным прогнозированием в ритейле: в команде много разных направлений — прогноз спроса, прогноз курьеров, золотые полки, прогноз смен и другие проекты, которые напрямую влияют на управление запасами и логистику. Наш стек Python, Pyspark, PostgreSQL, Clickhouse, Kafka, Memcashed, Redis, Hadoop, Airflow Вы будете Писать алгоритмы обработки больших данных (несколько сотен миллионов строк в таблице). Исследовать и подготавливать данные. Оптимизировать текущие вычисления. Заниматься продуктивизацией алгоритмов и их сопровождением. Делать ревью кода и анализ инцидентов. Нам важно Наличие опыта в роли Data engineer от 2 лет. Высшее математическое или техническое образование. Уверенное владение Python, PySpark, SQL. Знание устройства Hadoop, HDFS, Hive. Опыт работы с системами контроля версий (Git). Будет плюсом Опыт работы с Go . Опыт работы с Airflow. Опыт работы с DBT.