Статья посвящена новой системе Cosmos-H-Dreams — генеративному симулятору хирургических операций в реальном времени.
Современные хирургические роботы всё чаще используют модели типа Vision-Language-Action (VLA), однако их обучение и тестирование сталкиваются с проблемами:
- реальные хирургические установки очень дорогие;
- проведение экспериментов занимает много времени;
- ошибки могут повредить инструменты или биологические ткани;
- классические физические симуляторы плохо моделируют: мягкие ткани, швы, иглы, кровь и дым, блики на влажных поверхностях, сложные взаимодействия инструментов.
Вместо ручного программирования физики NVIDIA предлагает использовать world models — модели мира, которые сами изучают динамику хирургических сцен по видео и телеметрии роботов. Модель начинает "мечтать" (dream) о будущем кадр за кадром, сразу после каждого нового действия робота. Непрерывно генерируется следующее видео состояния операционного поля.
Cosmos-H-Dreams предназначен для обучения хирургов, обучения роботизированных политик, тестирования новых алгоритмов управления, генерации синтетических данных, оценки VLA-моделей, безопасного исследования редких ситуаций.
Симулятор может работать как под управлением человека, так и полностью автономного робота.
Хотя работа посвящена хирургической робототехнике, её подход гораздо шире. Эта идея может применяться и в других областях Physical AI: автономном вождении, промышленной робототехнике, дронах и гуманоидных роботах.
| # | Наименование новости | Тональность | Информативность | Дата публикации |
|---|---|---|---|---|
| 1 | Для робота-хирурга сделали тренировочный мир, который генерируется на лету. Без ... | 0 | 9.38 | 28-07-2026 |
| 2 | NVIDIA Cosmos-H-Dreams: Bringing Real-Time Generative Simulation to Surgical Robotics | 0 | 9.05 | 28-07-2026 |
| 3 | Если вы делаете робота или автономную машину, которая должна работать ... | 2 | 7 | 12-07-2026 |
| 4 | 🔁 vc.ru Роботы получили локальный мозг. NVIDIA открыли Cosmos 3 ... | 0 | 12.93 | 22-07-2026 |
| 5 | Роботы смогут думать без облака: NVIDIA Cosmos 3 Edge NVIDIA ... | 5 | 7 | 21-07-2026 |
| 6 | Introducing Cosmos 3 Edge | 5 | 7 | 21-07-2026 |
| 7 | ℹ [club62032126|NVIDIA АВТОМАТИЗИРОВАЛА ДООБУЧЕНИЕ COSMOS 3 С ПОМОЩЬЮ ИИ-АГЕНТА] В ... | 5 | 7 | 16-07-2026 |
| 8 | NVIDIA выпустила новую мультимодальную модель Cosmos 3 Edge для локального ... | 2 | 7 | 21-07-2026 |
| 9 | NVIDIA открыла веса Cosmos 3 Edge — компактной модели мира ... | 0 | 10.19 | 22-07-2026 |
| 10 | NVIDIA ПРЕДСТАВИЛА COSMOS 3 EDGE: ОТКРЫТАЯ МОДЕЛЬ МИРА ДЛЯ ЛОКАЛЬНОГО ... | 0 | 7 | 21-07-2026 |