Все вакансии России 0

Инженер AI-платформы (LLMOps / AI Platform Engineer),

з/п не указана
Kept (Кэпт)
Санкт-Петербург Постоянная занятость Удаленная работа

Описание

О команде Мы развиваем внутреннюю on-prem AI-платформу, которой пользуется вся компания: собственный inference на GPU, LLM-шлюз, RAG и AI-агенты в защищённом контуре. Приоритет — собственная инфраструктура там, где это критично. Помимо собственных моделей, платформа обеспечивает безопасное использование внешних моделей; при этом работа с моделями и AI-агентами выполняется в изолированной песочнице (sandbox), ограничивающей доступ к файлам, сети и данным. Эта роль — про развитие AI-платформы изнутри: установку и конфигурирование AI-сервисов, их развёртывание в Docker и Kubernetes, запуск новых моделей на нашем GPU-оборудовании и обеспечение их безопасности и производительности. Мы ищем инженера с сильным техническим бэкграундом в администрировании Linux, контейнеризации, автоматизации и информационной безопасности. Чем предстоит заниматься Установка, конфигурирование и развитие AI-платформ: веб-интерфейсы для моделей, LLM-шлюзы, оркестрация AI-workflow и агентов, облачные среды разработки (CDE), RAG-платформы Развёртывание и сопровождение сервисов: контейнеризация (Docker) и оркестрация (Kubernetes) Развёртывание и запуск новых моделей на сервисах инференса (vLLM и аналогичные) с учётом возможностей GPU, включая оптимизацию и quantization Безопасные конфигурации (hardening, secure by design) и безопасность платформы: RBAC, secrets management, network policies, изоляция моделей, защита от prompt injection Обеспечение изолированного и безопасного выполнения моделей и AI-агентов (sandbox) Автоматизация развёртывания и обновления, управление конфигурациями (IaC, CI/CD, GitOps) Мониторинг, диагностика и оптимизация производительности; контроль latency, throughput и стоимости инференса Оценка качества моделей (evals) и наблюдаемость (observability) Развитие и продвижение использования AI-технологий в компании Контроль лицензий open-weight моделей и требований compliance Взаимодействие с командами разработки и инфраструктуры, подготовка документации Обучение и консультирование сотрудников по работе с AI-инструментами Что для нас важно Высшее образование (техническое) Опыт работы в роли AI/ML Platform, MLOps или DevOps инженера от 3 лет Уверенное понимание принципов работы LLM, RAG и векторных баз данных Опыт развёртывания и эксплуатации сервисов: контейнеризация (Docker) и оркестрация (Kubernetes) Опыт развёртывания и эксплуатации моделей машинного обучения/LLM на серверных сервисах инференса (vLLM, SGLang, TGI) Опыт администрирования Linux Навыки работы с GPU (NVIDIA CUDA, VRAM, оптимизация инференса) Уверенное владение Python и скриптовыми языками для автоматизации Опыт построения CI/CD и управления конфигурациями (Ansible, Terraform, Helm) Понимание принципов информационной безопасности и разграничения доступа (RBAC, secrets management) Опыт production-эксплуатации: мониторинг, evals, контроль latency, throughput и стоимости Аналитические навыки и навыки поиска и устранения неисправностей Английский язык на уровне Intermediate и выше Будет плюсом Опыт работы с Open WebUI, LiteLLM, Langflow, RAGFlow, OpenHands и аналогичными Опыт администрирования Windows Server Опыт с локальными рантаймами инференса (Ollama, llama.cpp); Понимание MCP и agentic AI Опыт мониторинга (Prometheus, Grafana) и логирования Знание принципов fine-tuning и оценки качества моделей Хорошие коммуникативные и презентационные навыки Что мы предлагаем Прозрачный карьерный рост: индивидуальный карьерный трек, программы коучинга и менторинга Возможность внести свой вклад в изменения бизнеса и расширить профессиональную экспертизу Команда профессионалов, которые поддерживают друг друга и работают на результат Гибкие начало и конец рабочего дня, возможность работать из офиса или из дома Корпоративное обучение: более 50 тренингов, доступ к изучению иностранных языков и электронной библиотеке Забота о сотрудниках: ДМС со стоматологией с первого месяца работы и скидка на ДМС для родственников, 5 оплачиваемых дней в году по болезни без оформления больничного, корпоративный спорт и мероприятия, скидки партнеров, программа психологического здоровья, комфортный и стильный офис Конкурентная заработная плата, бонусы по итогам финансового года и годовой оценки сотрудника, премии за интенсивную работу и выдающиеся результаты Официальное трудоустройство

Откликнуться
Источник: hh · 2 дня назад

Похожие вакансии в городе Санкт-Петербург

Все вакансии в городе Санкт-Петербург →