NVIDIAは11月5日（現地時間）、ワールドモデル開発プラットフォーム「NVIDIA Cosmos」において、Cosmos 3モデルファミリーの新たなオープンウェイトのチェックポイント4種を公開した。
用途は、インタラクティブなワールドシミュレーションと、マルチセンサー・マルチビューの運転シーン生成。いずれもCosmos 3 Nanoをポストトレーニングしたもので、学習可能なパラメータ数は160億。ライセンスはOpenMDW1.1で、その条件の下で商用・非商用の利用が可能だ。
「Cosmos3-Nano-Transfer-Auto」は、天候や照明、時間帯を変えたマルチビューの運転データを生成する。魚眼を含む最大11のカメラビューの同期映像生成と、RGBとLiDARの同時生成に対応する。「Cosmos3-Nano-Sim-Auto」はTransfer-Autoを因果的に蒸留したストリーミング版で、同期したカメラ映像とLiDARの観測を少ないデノイジングステップで逐次生成する。
「Cosmos3-Nano-Sim-Transfer」は、物理シミュレーターの深度やセグメンテーションなどの空間制御とテキストプロンプトから、フォトリアリスティックな映像を生成する。「Cosmos3-Nano-Sim-Bimanual」はロボットやカメラのアクションから映像を予測するモデルで、YAMとAgiBotの双腕ロボットのシミュレーションに対応する。
あわせて、独自データで各モデルを適応させるための4段階のポストトレーニングレシピも提供される。
- 関連リンク
この記事は参考になりましたか？
- この記事の著者
-
CodeZine編集部（コードジンヘンシュウブ）
CodeZineは、株式会社翔泳社が運営する開発者のための情報メディアです。日々の開発に取り組むエンジニアやテクノロジーを学びたい方に向けて、プログラミングやAI活用、開発ツール、エンジニアの学びとキャリアに関する記事をお届けしています。
※プロフィールは、執筆時点、または直近の記事の寄稿時点での内容です
この記事は参考になりましたか？
この記事をシェア
