RL - инженер

Описание

Автономные технологии компания, которая разрабатывает инновационные решения, направленные на улучшение и совершенствование робототехники и технологий машинного обучения с применением передовых технологий искусственного интеллекта (ИИ) и уникальных инженерных решений.

Чем предстоит заниматься:

• Разработкой и внедрением SOTA алгоритмов RL для высокоскоростного маневрирования и прохождения гоночных трасс;
• Решением проблемы Sim-to-Real Gap: внедрение Domain Randomization, работа с динамикой модели;
• Дизайн функции вознаграждения (Reward Engineering) для сложных маневров;
• Взаимодействием с инженерами по Computer Vision для интеграции RL-агента с системами компьютерного зрения;
• Оптимизацией инференса нейросетей для работы на встраиваемых системах.

Будет плюсом:

• Опыт работы с C++ (уровень интеграции моделей);
• Понимание классической теории управления и умение комбинировать её с нейросетями;
• Опыт работы с реальным робототехническим железом;
• Понимание аэродинамики мульти роторных систем.

Мы ожидаем:

• Опыт коммерческой или научной работы в области RL / Robotics от 2-х лет;
• Знание основ RL (MDP, уравнение Беллмана, Value-function и т.д.) и понимание алгоритмов PPO, SAC, TD3, опыт их модификации под конкретные задачи;
• Опыт работы с физическими симуляторами (Isaac Gym/Sim, PyBullet, AirSim, RealFlight);
• Навыки программирования на Python (продвинутый уровень).

Мы предлагаем:

• Работу в аккредитованной IT-компании и Трудоустройство в соответствии с ТК РФ;
• Систему наставничества и комфортную адаптацию в компании;
• Возможности для профессионального и карьерного роста