RL Разработчик
Институт ИИ МФТИ – ведущий институт по искусственному интеллекту в России. В состав Института входят сильнейшие ученые и ключевые лаборатории Физтеха по направлениям: оптимизация для ИИ, Робототехника, Генеративный ИИ, Компьютерное зрение и Математическое моделирование. Цель Института - создание прорывных научных исследований и прикладных разработок для ключевых отраслей экономики страны.
Немного о нас в цифрах:
1-е место среди технических вузов России в международных рейтинге THE и CWUR (2025);
1-е место в предметном рейтинге RAEX по направлению "Информационные технологии" (2025);
1-е место в рейтинге передовых инженерных школ (2025);
1-е место в рейтинге вузов России по качеству приёма (2024);
1-е место в рейтинге вузов по качеству подготовки специалистов в области искусственного интеллекта (2024).
Работа в МФТИ это:
– работа в лучшем техническом вузе страны в команде с выдающимися учеными мирового уровня, талантливыми и мотивированными студентами и высококвалифицированными специалистами;
– непрерывный профессиональный рост во время работы над амбициозными задачами и уникальными проектами на стыке образования, науки и индустрии, возможность внести свой вклад в развитие образования и науки в России.
Центр когнитивного моделирования Института ИИ МФТИ — одна из ведущих российских научно-инженерных групп в области робототехники, ИИ и когнитивных систем. Центр разрабатывает прикладные и исследовательские решения в сфере манипуляции, автономных робототехнических систем и управления сложными объектами. Результаты регулярно публикуются в ведущих журналах (Neurocomputing, RA-L, EAAI, IEEE Transactions on ITS и др.) и на международных конференциях (ICRA, IROS, CoRL, ICCV и т.д.).
ЦКМ ищет специалиста для проекта, связанного с автоматизацией манипуляционных операций в сложной и вариативной среде, включающих работу с множеством объектов различной формы и свойств.
Чем тебе предстоит заниматься:
– Разработка алгоритмов RL, в т.ч.:- проектирование, реализация и оптимизация алгоритмов обучения с подкреплением (PPO, SAC, TD3 и др.)- создание обучающих пайплайнов для online и offline RL: генерация траекторий, формирование и анализ Replay Buffer- разработка инструментов мониторинга экспериментов, анализа поведения политик и управления качеством данных.
– Работа с симуляцией (IsaacSim):- построение физически реалистичных симуляций объектов и манипуляторов, включая настройку параметров массы, трения, инерции, контактов- генерация обучающих данных с использованием домен-рандомизации и крупных наборов 3D-моделей.- разработка и интеграция кастомных симуляционных сред для RL-обучения.
– Работа с реальными роботами:- адаптация и отладка политик на реальном манипуляторе- дообучение моделей на реальных данных (Sim2Real adaptation)- анализ ошибок и повышение устойчивости поведения при переносе «симуляция-реальность».
– Интеграция управления:- реализация архитектуры «RL+классическое управление» (PID, MPC, LQR и др.)- интеграция компонентов в ROS-пайплайны и системные модули управления роботом.
– Инженерные задачи и разработка инструментов:- написание чистого, поддерживаемого кода (ООП, документация, тестирование)- участие в разработке архитектуры внутренних библиотек и инфраструктуры- оптимизация вычислительных пайплайнов, ускорение симуляционных циклов.
Чего мы ждём от тебя:
– Обязательное наличие оконченного высшего технического образования.
– Уверенное владение языком Python, желательный опыт промышленной разработки
– Опыт работы с фреймворком PyTorch
– Наличие практического опыта разработки алгоритмов RL (PPO, SAC, TD3 и др.)
– Опыт подготовки данных для Offline RL
– Базовые навыки компьютерного зрения в задачах управления и манипуляции (работа с RGB/RGB-D, выделение объектов, простые модели восприятия)
– Понимание кинематики и динамики манипуляторов
– Опыт разработки собственных сред или сценариев в симуляции.
Мы предлагаем:
– работа в ведущем техническом вузе страны, в городе Долгопрудный (рядом со станцией Новодачная МЦД-1 или 15 минут от метро Алтуфьево, Ховрино, Физтех);
– оформление в соответствии с ТК РФ;
– возможность бесплатного посещения бассейна и тренажерного зала;
– в соответствии с ТК РФ работники сферы образования обязаны предоставить справку о наличии (отсутствии) судимости и (или) факта уголовного преследования, срок изготовления которой может быть до 30 дней, просим заранее позаботиться о её получении.