NVIDIA открыла Cosmos3-H-Dreams — модель, которая в реальном времени создаёт видео хирургической операции по командам управления инструментами робота
Материал подготовлен Sintelligent с помощью ИИ. Опубликовано в SI: . Обновлено: .
У роботов-хирургов появляется виртуальная тренировочная площадка, но для настоящих операций она пока не годится.
По блогу NVIDIA, модель названа первым генеративным симулятором хирургии в реальном времени, обученным на клинических записях холецистэктомии (удаления желчного пузыря) и позволяющим управлять инструментами: она показывает деформацию тканей и перекрытия при перемещении, вращении и смыкании инструментов. Обучение шло на видео и кинематике робота CMR Surgical Versius и наборе Open-H-Embodiment; основа — Cosmos3-H-Embodied-Nano на 16 млрд параметров, видео 832×480 при 10 Гц, работает на одной видеокарте RTX PRO 6000. Код и веса опубликованы 20 октября. Авторы подчёркивают, что это исследовательский симулятор, а не проверенная система для лечения пациентов.
Источники 1