モデル
NVIDIA Cosmos3-H-Dreamsを公開
原題: NVIDIA Cosmos3-H-Dreams: Bringing Clinical Surgery to Life Through Generative Simulation
手術器具の操作に応じて映像を生成
NVIDIAは2026年10月20日、手術ロボット向け生成シミュレーターCosmos3-H-Dreamsを公開しました。
初期画像と器具の操作を入力し、操作に応じた手術場面の動画を連続生成します。
基盤には160億パラメータのCosmos3-H-Embodied-Nanoを使用しています。
左右の器具の姿勢、グリッパー、エネルギー操作など28次元の制御入力を扱います。
4ステップ版と2ステップ版の2つのチェックポイントを公開し、画質と推論コストを選べます。
FlashDreamsとFadeMemを使い、長い生成履歴を扱うストリーミング推論に対応します。
NVIDIAは単一のRTX PRO 6000 GPUで対話的に動作すると説明しています。
チェックポイント、実行コード、教師モデルの微調整と蒸留手順を公開しています。
公開コードはApache 2.0で、Linux、Python 3.12、CUDA対応GPUを前提とします。
これは研究用シミュレーターであり、患者の診療に使える検証済み医療システムではありません。