Data Engineer
Описание
Aston — аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом. Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика. Заказчик - крупнейший коммерческий банк страны, лидер по объему активов и цифровому развитию. Активно продвигает мобильные сервисы, ценит скорость, гибкость и неформальный подход внутри команд. Многократно отмечен престижными наградами, в том числе «Bank of the Year in Russia 2019» (The Banker) и «Best Mortgage Bank in CEE» (Global Finance). Почему это будет интересно? возможность повышения квалификации на проекте одного из лидеров рынка; современный технический стек. Чем предстоит заниматься? интегрировать источники данных по голосовым и текстовым коммуникациям клиентов со специалистами обслуживания и поддержки; реализовать пакетные и потоковые сервисы обработки данных для оценки качества коммуникаций; эффективно взаимодействовать в составе команды со специалистами по анализу данных и специалистами по развитию инфраструктуры. Чего мы ждем от специалиста? опыт работы в роли Data Engineer от 4-х лет; опыт анализа данных; высокий уровень знаний языка программирования Python; опыт работы в среде JupyterLab/JupyterHub; опыт реализации промышленных отказоустойчивых сервисов на Python – сервисы пакетной загрузки и трансформации данных (ETL) на платформах Apache Airflow, Argo Workflows; веб-сервисы на основе библиотеки FastAPI; понимание принципов микросервисной архитектуры; понимание принципов распределенных вычислений и обработки данных; понимание принципов потоковой обработки данных; хорошие знания платформы Apache Spark – опыт использования библиотеки Pyspark; знание и опыт использования платформы потоковой обработки данных Apache Kafka; – чтение и запись потока данных Apache Kafka с помощью библиотек aiokafka, confluent-kafka, kafka-python, разработка потоковых приложений Apache Spark Structured Streaming; опыт асинхронного программного взаимодействия с веб-сервисами по REST API с использованием библиотек – aiohttp, httpx; отличные знания SQL – создание сложных запросов с использованием табличных выражений (CTE) и оконных функций; хорошие знания и опыт использования реляционных баз данных Oracle, PostgreSQL; понимание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных – parquet, orc; хорошие знания и опыт использования хранилищ больших данных – Hadoop/HDFS, S3, форматы таблиц Hive, Iceberg; проактивный подход к работе – способность и желание искать и предлагать методы и варианты решения задач; общий позитивный настрой и активная жизненная позиция; умение и желание работать в команде, делиться опытом с коллегами и учиться новым практикам; открытость в коммуникации трудностей, препятствующих решению задач. Что мы предлагаем? Хорошая зарплата: уровень обсуждается индивидуально, есть доплаты за менторство и профактивности. Развитие: долгосрочные проекты от российских заказчиков, возможность менять направления, прозрачная система Performance Review. Комфорт и свобода: релокейт между офисами, выбор формата работы (удалённо, офис, гибрид), адаптация для новых сотрудников. Обучение: доступ к корпоративному порталу, митапам, конференциям (и как гость, и как спикер). Социальный пакет: ДМС со стоматологией, частичная компенсация спорта, бесплатный английский, оплачиваемый отпуск и больничные. Корпоративная жизнь: тимбилдинги, детские праздники, внутренние мероприятия. Наши офисы: Москва (ул. Вильгельма Пика, 11, БЦ «Ботаника», 13 эт., оф. 1310), Санкт-Петербург (Владимирский проспект, д. 23, 8 этаж), Казань (Н. Ершова, 76/1), Самара (IT парк Монте Роза). Откликайтесь, если вы готовы расти и развиваться вместе с командой ASTON! Наш рекрутер свяжется с вами, чтобы обсудить детали.