Управляемая генерация интерактивных агентов для обучения робота-доставщика

1 декабря, 14:40, «Конгресс холл»

Средняя сложность
Доклад принят в программу конференции
Теория
Расширение кругозора
Алгоритмы и их сравнение
Теория
Расширение кругозора
Алгоритмы и их сравнение

Мнение Программного комитета о докладе

Как Motion Diffuser и SceneDiffuser++ помогают обучать робота-доставщика. Разберём генерацию редких городских сценариев с classifier-free guidance и LoRA без переобучения модели, проблемы closed-loop-генерации и оценку пользы сценариев для RL-обучения.

Целевая аудитория

ML-инженеры и исследователи, интересующиеся практическим применением генеративных моделей, обучением с подкреплением и симуляцией автономного транспорта. Доклад будет полезен тем, кто хочет использовать диффузионные модели не только для предсказания, но и для генерации управляемых интерактивных сценариев.

Тезисы

Робот-доставщик встречает пешеходов, которые могут неожиданно пересечь его путь, и автомобили, маневрирующие в тесных придомовых зонах. Расскажем, как с помощью диффузионных моделей создавать таких интерактивных агентов и управляемые сложные сценарии для RL-обучения. Расскажем, как использовать диффузионные модели для создания интерактивных пешеходов в RL-симуляции. С помощью classifier-free guidance и LoRA-адаптеров можно усиливать редкие типы поведения и управлять сложностью обучающих ситуаций. Обсудим интеграцию модели в closed loop, генерацию целевых сценариев и практические проблемы реалистичности и устойчивости.

Спикеры

Илья Гуков
8 лет в IT, работал в телекоме и автономном транспорте. Увлекаюсь садоводством

Другие доклады секции