デンバー—SIGGRAPH —2024年7月29日 — NVIDIA は本日、ユニバーサルな 3D データ交換フレームワークの採用をロボティクス、工業デザイン、エンジニアリングに拡大させ、開発者が AI の次の進化に向けて高精度の仮想世界を構築する能力を加速させるUniversal Scene Description (OpenUSD) の大幅な機能向上を発表しました。
NVIDIA Omniverse™ プラットフォーム上に構築された新しい OpenUSD ベースの生成 AI と NVIDIA アクセラレーテッド開発フレームワークにより、より多くの業界が工業デザインやエンジニアリング プロジェクトの可視化、および環境のシミュレーションのためのアプリケーションを開発して、次の波の物理的 AI とロボットを構築できるようになります。
新しいサービスには、ユーザーのクエリに回答する OpenUSD 言語を生成し、OpenUSD Python コードを生成し、3D オブジェクトにマテリアルを適用し、3D 空間と物理を理解してデジタル ツインの開発を加速するための AI モデル用の NVIDIA NIM™ マイクロサービスが含まれています。さらに、ロボティクスや産業シミュレーション データ形式への新しい USD コネクタと開発者ツールにより、ユーザーは大規模で完全に NVIDIA RTX™ レイトレーシングされたデータセットを Apple Vision Pro にストリーミングできるようになります。
NVIDIA の Omniverse およびシミュレーション テクノロジ担当 バイス プレジデントであるレヴ レバレディアン (Rev Lebaredian) は次のように語りました。「重工業向けの生成 AI ブームが到来しています。最近まで、デジタル ワールドは主にクリエイティブ業界で使用されていました。現在、NVIDIA NIM マイクロサービスが OpenUSD にもたらす機能強化とアクセシビリティにより、あらゆる種類の業界が物理ベースの仮想世界とデジタル ツインを構築してイノベーションを推進し、AI の次の波であるロボティクスに備えることができるようになりました」
NVIDIA NIM で USD に生成 AI が登場
NVIDIA が開発した世界初の OpenUSD 開発向けの生成 AI モデルは、NVIDIA NIM マイクロサービスとして提供されます。このモデルにより、開発者は生成 AI コパイロットとエージェントを USD ワークフローに組み込むことができ、3D ワールドの可能性を広げ、製造、自動車、ロボティクスなどの新しい産業分野での USD の採用を加速します。
プレビューで利用できるマイクロサービスは次のとおりです。
- USD Code NIM — OpenUSD に関する一般的な質問に答え、テキスト プロンプトに基づいて OpenUSD-Python コードを自動的に生成。このコードは、Pixar の usdview などの OpenUSD 表示アプリや NVIDIA Omniverse Kit ベースのアプリケーションに入力し、対応する 3D データを可視化可能。
- USD Search NIM — 開発者は、自然言語または画像入力を使用して、OpenUSD、3D、および画像データの膨大なライブラリを検索可能。
- USD Validate NIM — アップロードされたファイルを OpenUSD リリース バージョンとの互換性をチェックし、NVIDIA Omniverse Cloud API またはアプリケーション プログラミング インターフェイスを利用して、完全に RTX レンダリングされたパストレース画像を生成。
近日中に利用可能になる、新しく発表された NIM マイクロサービスは次のとおりです。
- USD Layout NIM — 空間インテリジェンスに基づく一連のテキストプロンプトから OpenUSD ベースのシーンを組み立てることが可能。
- USD SmartMaterial NIM — CAD (コンピューター支援設計) オブジェクトにリアルなマテリアルを予測し、適用。
- fVDB Mesh Generation NIM — ポイントクラウド データから、Omniverse Cloud API によってレンダリングされた OpenUSD ベースのメッシュを生成。
- fVDB Physics Super-Res NIM — フレームまたはフレーム シーケンスに対して AI 超解像を適用し、OpenUSD ベースの高解像度物理シミュレーションを生成。
- fVDB NeRF-XL NIM — Omniverse Cloud API を使用して、OpenUSD で大規模なニューラル ラディアンス フィールド (NeRF) を生成。
世界中に 170 以上の工場を持つ製造業のグローバル リーダーである Foxconn は、すでに NVIDIA のコンピューティング プラットフォームの恩恵を受けており、NIM マイクロサービスと Omniverse を使用して、開発中の工場のデジタル ツインを作成しています。
Foxconn のチーフ デジタル オフィサーであり、スマート マニュファクチャリング プラットフォームの責任者である Zhe Shi 博士は、次のように述べています。「デジタル ツインは、産業製造と自律マシンの次の波を加速するのに役立ちます。NVIDIA Omniverse と新しい NIMマイクロサービスは、デジタル ツインを開発する能力を民主化し、私たちのチームが物理ベースの仮想工場をこれまで以上に迅速に構築できるようにします」
マーケティングおよびコミュニケーション サービスで世界をリードする企業である WPP は、USD Search および USD Code NIM マイクロサービスの早期導入企業であり、NVIDIA Omniverse 上に構築された生成 AI 対応のコンテンツ作成パイプラインにこれらを実装して、The Coca-Cola Company などの顧客に対応しています。
WPP の最高技術責任者である Stephan Pretourius 氏は次のように語りました。「このイノベーションの素晴らしさは、それが当社の仕事のやり方と互換性があり、オープン スタンダードを利用している点です。これにより、将来の作業が加速するだけでなく、OpenUSD などの標準に対するこれまでのすべての投資の有用性をさらに強化し、拡張することができます。NVIDIA NIM マイクロサービスを NVIDIA Omniverse と併用することで、The Coca-Cola Company などの企業と革新的な新しい制作ツールを前例のないスピードで立ち上げることができました」
USD コネクタがより多くの業界に生成 AIをもたらす
ロボティクス データ形式と Apple Vision Pro へのストリーミング用の一連の新しい USD コネクタにより、OpenUSD の相互運用性と高度なオーサリングのポータルがより多くの業界に開かれます。
NVIDIA と、産業オートメーションとソフトウェアの世界的リーダーである Siemens は、OpenUSD を使用してより多くの産業ワークロードを促進するためにコラボレーションを拡大しています。Siemens は、OpenUSD パイプラインを Simcenter シミュレーション テクノロジ ポートフォリオと統合し、エビデンスに基づいた意思決定と主要な関係者間のコラボレーションをサポートします。
この統合により、複雑なシミュレーション データを忠実度の高いリアルタイムのフォトリアルな可視化が可能になり、実際の動作環境における製品のパフォーマンスに関するより深い洞察が得られます。この作業は、Omniverse を Teamcenter Product Lifecycle Management ポートフォリオに組み込むという Siemens の取り組みに基づいています。
NVIDIA は、Unified Robotics Description Format から OpenUSD へのコネクタもリリースしました。これにより、ロボット開発者は、設計、シミュレーション、強化学習などのアプリケーション間でロボット データをシームレスに取り込むことができます。
OpenUSD エコシステムの拡張をさらに進めるために、NVIDIA は、開発者に独自の堅牢な OpenUSD データ コネクタ構築を可能にする、OpenUSD Exchange ソフトウェア開発キットを発表しました。
Omniverse プラットフォーム上に構築されたアプリケーションから、NVIDIA Graphics Delivery Network を介して Apple Vision Pro に大規模な OpenUSD シーンをストリーミングするための新しい開発者ツールと API が 早期アクセスで利用可能になりました。
Pixar の最高技術責任者で Alliance for OpenUSD (AOUSD) の会長である Steve May 氏は次のように語りました。「OpenUSD は、3D コンテンツの作成方法と操作方法に革命をもたらしています。NVIDIA が構築した OpenUSD 向けの新しいサービスと API により、USD の成長と採用が加速し、新しいユーザーや業界が私たちのエコシステムにより簡単に参加できるようになると期待しています」
OpenUSD エコシステムの勢い
昨年、NVIDIA は Pixar、Adobe、Apple、Autodesk とともに AOUSD を共同設立しました。AOUSD を通じて、NVIDIA とその他の協力者は新しい OpenUSD リリース、OpenUSD コア仕様の進捗状況、および新しいメンバーを発表しました。
提供方法
USD Search、USD Code、USD Validate NIM は、NVIDIA API カタログでプレビューをご利用いただけます。OpenUSD から URDF へのコネクタは、NVIDIA Isaac Sim で利用可能です。
開発者は、OpenUSD ワークフローに生成 AI を統合する上で新しい Omniverse 開発者ツール とリファレンス ワークフローを使用し、OpenUSD で生成 AI 対応の合成データ パイプラインを構築できます。
生成 AI とアクセラレーテッド コンピューティングの最新情報について詳しくは、8 月 1 日までデンバーで開催される主要なコンピューター グラフィックス カンファレンスである SIGGRAPH で、NVIDIA の創業者/CEO であるジェンスン フアン (Jensen Huang) の対談をご覧ください。