ニュース

「NVIDIA XR AI」パブリックベータ版の提供開始

ARグラスやXRデバイス向けマルチモーダルAIエージェントを構築可能に

 NVIDIAは、「NVIDIA XR AI」パブリックベータ版の提供を開始した。これにより、開発者はARグラスやXRデバイス向けのマルチモーダルAIエージェントを構築するためのフレームワークを利用できるようになった。

 NVIDIA XR AIは、開発者がエージェント型アプリケーションを構築するのに役立つ開発者ライブラリのひとつ。ARグラスやXRデバイスからの入力をAIモデル、企業データ、ツール、高速コンピューティングと連携させることで、NVIDIA XR AIはエージェントを実現できる。

 開発者がエンタープライズXRアプリケーション向けのスキルやツールを構築または連携させるための基盤となり、マルチモーダル知覚、エンタープライズ検索、推論モデル、エージェントオーケストレーションの統合をより簡単に行なうことができる。これらの機能を組み合わせることで、ARおよびXR体験において、空間認識能力を備えたマルチモーダルAIエージェントをより容易に構築できる。

 主要機能は以下の通り。

・ARおよびXRデバイスから、ビデオ、オーディオ、深度、姿勢、センサーデータなどの現実世界のデータを取り込む。
・エージェントを、NVIDIA MetropolisやビジュアルAIおよびNVIDIA Metropolis for video search and summarization (VSS)、エンタープライズ知識検索、NVIDIA NeMo Retrieverなどの専門ツールやサービスにつなげる。
・NVIDIA Nemotron推論モデル、NVIDIA Cosmos Reason、その他の互換性のある基盤モデルなど、幅広いAIモデルのエコシステムをサポート。
・エージェントオーケストレーションと高速ランタイムサービスを統合することで、開発者がプロトタイプから本番環境へスムーズに移行できるよう支援する。

 同技術はすでに自動車設計や手術、研究室などで使用されている。