NVIDIA at SIGGRAPH 2024

00 日

00 時

00 分

00 秒

NVIDIA at SIGGRAPH

NVIDIA 執行長黃仁勳的爐邊對談

NVIDIA Founder and CEO, Jensen Huang and WIRED Senior Writer, Lauren Goode

NVIDIA 執行長黃仁勳與《連線》資深作家 Lauren Goode

觀看加速運算和生成式 AI 如何改變製造業等各產業的討論。

立即觀看

NVIDIA Founder and CEO, Jensen Huang and Meta Founder and CEO, Mark Zuckerberg

NVIDIA 執行長黃仁勳與 Mark Zukerberg

觀看關於基礎研究如何實現人工智慧突破，以及生成式人工智慧和開源軟體如何幫助開發者和創作者的討論。

立即觀看

深入瞭解在 SIGGRAPH 的發表

瀏覽爐邊對討中討論的所有發表，以了解人工智慧、圖學和其他研究領域的最新動態。

閱讀部落格

精選講座

在此處報名，使用代碼 NV14327 獲得 NVIDIA 免費展場通行證。

NVIDIA OpenUSD 繪圖運算技術研究：最新精彩成果

歡迎參加台灣時間 7 月 30 日 (二) 晚上 10:30 的演講，瞭解 NVIDIA 研究人員的最新進展。內容涵蓋 fVDB、Kaolin、Slang、Edify 和機器人等研究進展。

立即報名

即時精彩直播！

即時精彩直播！邀請參與者展示尖端的即時技術演示。歡迎與 NVIDIA 研究團隊一同瞭解他們展示的文字轉通用場景描述 (USD)，此方法只需幾個提示即可打造完整的 3D 場景。

立即報名

OpenUSD 開發人員交流會

歡迎於 8 月 1 日 (四) 上午 7:00 至 9:00 (台灣時間) 參加 NVIDIA 的 OpenUSD 開發人員交流會，與其他開發人員和業界領袖相互交流，不只建立穩固關係，更透過來回經驗分享來啟發更多想法。

立即報名

AOUSD 和 ASWF 通用場景描述工作小組

瞭解 OpenUSD 聯盟 (AOUSD) 和 Academy Software Foundation (ASWF) 如何因應社群需求和 OpenUSD 的標準開發，以及如何與 OpenUSD 社群交流。

取得更多資訊

Get Notified for More Details CTA > Use Existing Form

在 SIGGRAPH 取得 NVIDIA 認證

台灣時間 8 月 1 日 (四) 晚上 11:00 至 8 月 2 日 (五) 上午 5:00，與會者將有機會在 SIGGRAPH 展示人工智慧專業知識，獲得 NVIDIA 技術認證。把握機會證明自己的技術能力，在同儕中脫穎而出。歡迎報名 SIGGRAPH，並註冊參加我們的現場監考認證考試。

立即報名

NVIDIA Inception Startups Innovation Zone

NVIDIA Inception 新創公司創新專區

探索新創公司和我們的 Inception 合作夥伴如何運用 NVIDIA 人工智慧和運算技術，在電腦繪圖、視覺化等領域創新發展。歡迎到展場的創新專區進一步瞭解展示內容。

查看展場詳細資訊

時程表

7 月 28 日 (日)
7 月 29 日 (一)
7 月 30 日 (二)
7 月 31 日 (三)
8 月 1 日 (四)

8:00–9:30 a.m. MT	Generative AI for Graphics, Vision and 3D Birds of a Feather \| Room 708-710
9:00 a.m.–12:15 p.m. MT	Warp: Differentiable Spatial Computing for Python Course \| Mile High 1A
9:45–10:07 a.m. MT	Studying Esports Competition: Piloting Methodology for User Studies During Tournaments Talk \| Mile High 2A
10:07–10:29 a.m. MT	On Smoothly Varying Frame Timing in First-Person Gaming Talk \| Mile High 2A
3:45–5:15 p.m. MT	Virtual Human Design: Exploring the Opportunities and Challenges of GenAI - Part 1 Course \| Four Seasons 1

9:00–10:00 a.m. MT	OpenVDB Birds of a Feather \| Hyatt Regency, Capitol Ballroom 1
9:00–9:20 a.m. MT	Diffusion Texture Painting Technical Paper \| Mile High 2A
10:45–12:15 p.m. MT	Virtual Human Design: Exploring the Opportunities and Challenges of GenAI - Part 2 Course \| Bluebird 3A
10:55–11:05 a.m. MT	Walkin’ Robin: Walk on Stars With Robin Boundary Conditions Course \| Bluebird 3A
11:30–11:45 a.m. MT	A Differential Monte Carlo Solver for the Poisson Equation Technical Paper \| Mile High 4
12:00–1:00 p.m. MT	Alliance for OpenUSD + Academy Software Foundation USD Working Group Birds of a Feather \| Hyatt Regency, Capitol Ballroom 1
1:00–2:00 p.m. MT	Seamless Rendering Interchange in OpenUSD Birds of a Feather \| Hyatt Regency, Capitol Ballroom 1
2:00–2:10 p.m. MT	Training-free Consistent Text-to-image Generation Technical Paper \| Mile High 1
2:20–2:30 p.m. MT	Path-space Differentiable Rendering of Implicit Surfaces Technical Paper \| Mile High 4
2:30–3:30 p.m. MT	NVIDIA CEO Fireside Chat: AI and Graphics for the New Computing Revolution Fireside Chat \| Bluebird Ballroom
3:30–4:30 p.m. MT	Khronos Fast Forward Birds of a Feather \| Room 708-710
4:00–5:00 p.m. MT	AI and The Next Computing Platforms with Jensen Huang and Mark Zuckerberg Fireside Chat \| Bluebird Ballroom

OpenUSD 日

探索由業界領導者主持的 OpenUSD 日演講，或查看 NVIDIA 參與的合作夥伴講座。

8:30–9:20 a.m. MT	NVIDIA Research Presents AI and the Next Frontier of Graphics OpenUSD Day \| Room 607
9:30–10:20 a.m. MT	Advancing OpenUSD for the Era of Industrial Digitalization and Physical AI OpenUSD Day \| Room 607
10:30-10:50 a.m. MT	Scaling Avatars to Billions: Leveraging OpenUSD for Dynamic Character Assembly and Personalization OpenUSD Day \| Room 607
11:00–11:20 a.m. MT	Bringing RTX to OpenUSD: Ultra-Realistic Spatial Experiences From the Cloud OpenUSD Day \| Room 607
12:30-12:50 p.m. MT	Narrowing the Gap Between Simulation and Reality With OpenUSD OpenUSD Day \| Room 607
11:30 a.m.–2:30 p.m. MT	Metaverse Standards Forum: The Road to an Open Metaverse Birds of a Feather \| Room 708-710
1:00–1:50 p.m. MT	Beyond Hollywood: Expanding 3D Skills Into New Frontiers in AI and Digital Twins OpenUSD Day \| Room 607
2:00–2:20 p.m. MT	Accelerating Autonomous Vehicle Development With OpenUSD Virtual Worlds OpenUSD Day \| Room 607
2:00–2:10 p.m. MT	HAISOR: Human-Aware Indoor Scene Optimization via Deep Reinforcement Learning Technical Paper \| Mile High 1
2:10–2:20 p.m. MT	Fluid Control With Laplacian Eigenfunctions Technical Paper \| Mile High 4
2:30–3:20 p.m. MT	Robotics, Generative AI, and OpenUSD: How WPP is Building the Future of Creativity OpenUSD Day \| Room 607
3:30–3:50 p.m. MT	Remastering Classic Games With OpenUSD OpenUSD Day \| Room 607
4:00–5:00 p.m. MT	Breathing Life Into Disney’s Robotic Characters With Deep Reinforcement Learning OpenUSD Day \| Room 607

生成式人工智慧日

探索由業界領導者主持的生成式人工智慧日演講，或查看 NVIDIA 參與的合作夥伴講座。

9:00–9:50 a.m. MT	Enhancing 3D Pipelines With Generative AI Generative AI Day \| Room 607
9:20–9:30 a.m. MT	Modeling Hair Strands With Roving Capsules Technical Paper \| Mile High 3C
10:00–11:00 a.m. MT	Exploring ANARI: Making the Future of 3D Rendering Available to Everyone Birds of a Feather \| Hyatt Regency, Capitol Ballroom 4
10:30–10:50 a.m. MT	Discover Cuebric’s Magical Generative AI Generative AI Day \| Room 607
11:05–11:15 a.m. MT	Decorrelating ReSTIR Samplers via MCMC Mutations Technical Paper \| Mile High 2
11:00–11:20 a.m. MT	Pioneering Source-Available Generative AI With Responsible Practices Generative AI Day \| Room 607
11:00 a.m.–12:00 p.m. MT	OpenXR: Transforming the Future of Cross-Platform XR Development Birds of a Feather \| Hyatt Regency, Capitol Ballroom 1+2
12:30–12:50 p.m. MT	Revolutionizing Visual Effects and Animation With Generative AI Generative AI Day \| Room 607
1:00–1:20 p.m. MT	Crafting the Future: Human Creativity as AI’s Building Blocks Generative AI Day \| Room 607
1:30–1:50 p.m. MT	Image Caption Generator: An Automated Tool for Captioning Image Dataset Generative AI Day \| Room 607
2:00–2:20 p.m. MT	Costa Crociere's Digital Tour Expert Revolutionizing Customer Experiences With AI Generative AI Day \| Room 607
2:00–2:40 p.m. MT	Real-Time Neural Appearance Models Technical Paper \| Mile High 3C
2:00–3:30 p.m. MT	A Free-space Diffraction BSDF Technical Paper \| Mile High 3C
2:10–2:20 p.m. MT	From Microfacets to Participating Media: A Unified Theory of Light Transport With Stochastic Geometry Technical Paper \| Mile High 3C
2:30–2:50 p.m. MT	The Key To Enterprise Success With Autonomous Digital Humans Generative AI Day \| Room 607
2:40–2:50 p.m. MT	4D-Rotor Gaussian Splatting: Towards Efficient Novel View Synthesis for Dynamic Scenes Technical Paper \| Mile High 1
3:00–3:20 p.m. MT	Animate and Interact: Real-Time 3D Creation With Replikant Generative AI Day \| Room 607
3:00–5:00 p.m. MT	What IS a Cinematic?! Birds of a Feather \| Room 706
3:00–6:00 p.m. MT	Vulkan, Forging Ahead Birds of a Feather \| Hyatt Regency, Capitol Ballroom 4
3:30–3:50 p.m. MT	LipDubAI: Unlocking the International Potential of Video Content Generative AI Day \| Room 607
4:15–4:25 p.m. MT	Simplicits: Mesh-free, Geometry-agnostic Elastic Simulation Technical Paper \| Mile High 4
4:00–5:00 p.m. MT	Revolutionizing Graphics and Interactive Techniques With Generative AI—Perspectives From the Leading Researchers Generative AI Day \| Room 607
5:00–5:30 p.m. MT	How Gradient Extended Llama 3’s Context Length to 1M on Crusoe Generative AI Day \| Room 607

8:00–8:45 a.m. MT	Frontiers in AI for Weather and Climate Prediction Frontiers \| Bluebird 3D
8:00–9:00 a.m. MT	Immersive Visualisation for Science, Research, Art and Metaverse Applications Birds of a Feather \| Room 708-710
9:00–9:10 a.m. MT	fVDB: A Deep-Learning Framework for Sparse, Large-Scale, and High-Performance Spatial Intelligence Technical Paper \| Mile High 2
9:00–9:30 a.m. MT	The Truth About Computing System Performance Benchmarks Birds of a Feather \| Hyatt Regency, Capitol Ballroom 1
9:10–9:20 a.m. MT	NeuralVDB: High-resolution Sparse Volume Representation Using Hierarchical Neural Networks Technical Paper \| Mile High 2A
10:45–10:55 a.m. MT	Motion-I2V: Consistent and Controllable Image-to-video Generation With Explicit Motion Modeling Technical Paper \| Mile High 1A
2:10–2:20 p.m. MT	Interactive Character Control With Auto-regressive Motion Diffusion Models Technical Paper \| Mile High 4
2:30–2:40 p.m. MT	SuperPADL: Scaling Language-Directed Physics-Based Control With Progressive Supervised Distillation Technical Paper \| Mile High 4
2:40–2:50 p.m. MT	Surface-filling Curve Flows via Implicit Medial Axes Technical Paper \| Mile High 2

SIGGRAPH 的 NVIDIA 實作訓練課程

完整會議與體驗的與會者皆可免費加入我們的實作實驗室，透過人工智慧、研究、OpenUSD 等方面的訓練來培養技能。

NVIDIA 主持的實驗室體驗由創新硬體領袖 MSI 贊助，支援您下一個人工智慧創意。

7 月 28 日 (日)
次日上午 3:30 至 7:30 (台灣時間)

探索能夠將現代繪圖工作流程最佳化的最新工具和技術。光線追蹤技術和神經繪圖運算經過多年發展，現在可在即時 3D 應用程式中實現路徑追蹤。參加下列其中一場或所有演講：

使用 NVIDIA Nsight 工具進行 GPU 效能分析

瞭解如何運用 NVIDIA Nsight Graphics 和 Nsight 系統，分析並將運用硬體加速光線追蹤的 3D 應用程式最佳化。

查看演講詳細資訊

使用 NVIDIA Nsight Graphics Shader Profiler 提升著色器效率

瞭解如何使用 NVIDIA Nsight Graphics 分析並將 HLSL 和 GLSL 中的光線追蹤著色器最佳化。

查看演講詳細資訊

使用 NVIDIA Nsight Graphics 著色器偵錯工具和 Nsight Aftermath 尋找並修正難以捉摸的錯誤

瞭解如何使用先進的 NVIDIA Nsight 工具，尋找並修正光線追蹤應用程式中的錯誤。

查看演講詳細資訊

使用 NVIDIA Nsight Graphics 光線追蹤檢查器修正錯誤並提升效能

瞭解如何使用 NVIDIA Nsight Graphics 光線追蹤檢查器改善光線追蹤應用程式。

查看演講詳細資訊

7 月 29 日 (一)
次日上午 00:00 至 1:30 (台灣時間)

追加演講：次日上午 2:30 至 4:00 (台灣時間)

探索零售業運用空間運算的未來。您有機會為 Apple Vision Pro (AVP) 打造應用程式，讓使用者能夠設定擬真 3D 零售素材。包括開發與設定應用程式，讓應用程式能與 Omniverse 套件 SDK 和 OpenUSD 所打造的產品設定器通訊。也會學習如何實作自訂 Swift UI，用來與虛擬產品即時互動。本次訓練結束時，參加者便能活用先進的技術，創造身臨其境的互動式零售體驗。

查看演講詳細資訊

7 月 29 日 (一)
晚上 11:00 至次日上午 1:00 (台灣時間)

基礎模型 (FM) 是經過預先訓練的人工智慧模型，對於各種自然語言處理工作具有巨大潛力，例如語言翻譯和情緒分析等。歡迎加入此訓練實驗室，一同探討基礎模型的基礎知識、意義、應用，以及人工智慧領域的最新發展。

瞭解基礎模型的演變過程、追蹤發展路線：從早期的感知器一路到目前對塑造人工智慧 (例如 ChatGPT) 的影響。
討論基礎模型在當今人工智慧局勢下的挑戰。
打造運用基礎模型的自訂人工智慧模型和應用程式。

查看演講詳細資訊

7 月 29 日 (一)
次日上午 2:00 至 4:00 (台灣時間)

想要將大型語言模型推向以資料為基礎的推理時，語意擷取已經是常用的協助工具。不過，當涉及到非文字的輸入內容時，原本的技術就開始失效。我們會處理多型態文件的接收和擷取，不會忽略非文字的資訊。

建立簡單的擷取擴增生成流程，讓語境更豐富。
考量運用影像進行推理的方法，協助採用大型語言模型 (LLM) 驅動的代理程式討論包含眾多影像的研究論文。

查看演講詳細資訊

7 月 30 日 (二)
晚上 11:00 至次日上午 1:00 (台灣時間)

隨著人工智慧的應用逐漸普及，各種領域的深度學習元件正迅速整合至一般使用者應用程式，而且新興的工作流程還能以驚人的速度，將多個看似不相交的模型或輸入類型彼此結合。

研究有助於以 MNIST 影像生成器到視覺引導語言模型製作任何內容的基元。
討論大型模型編排，並示範如何用於建置端對端多模態代理程式系統。

查看演講詳細資訊

7 月 30 日 (二)
次日上午 1:00 至 3:00 (台灣時間)

互動式聊天機器人在多種產業中越來越受歡迎，例如虛擬助理、客戶服務專員、銷售支援專員和其他應用方式。此實作訓練課程涵蓋數個重要主題，可協助使用者瞭解並實作自訂的數位人類。

探討強化聊天機器人，朝向互動式數位人類發展的主要優點。
詳細說明數位人類的關鍵要素。
打造並部署採用人工智慧技術的數位人類。

查看演講詳細資訊

7 月 30 日 (二)
次日上午 3:00 至 4:00 (台灣時間)

參加我們的實作坊，獲得 fVDB 概念的入門，以及 PyTorch 使用入門的互動式教學。fVDB 的作者將介紹 fVDB 支援的一些尖端研究，並讓您熟悉為自己的專案編寫程式碼時會看到的所有技術。

查看演講詳細資訊

7 月 30 日 (二)
次日上午 4:30 至 7:00 (台灣時間)

追加演講：
7 月 31 日 (三)
次日上午 3:30 至 5:00 (台灣時間)

歡迎隨時參加這場實作坊，瞭解由我們的通用場景描述 (USD) 程式碼 NIM 支援的 OpenUSD 相關基礎知識。無論是 OpenUSD 新手或是想加強技能，這些自我學習課程都非常有幫助。可在此學習到 OpenUSD 的基本概念、獲得 OpenUSD 相關的基本 Python 程式設計技能、透過實作練習和真實世界的範例獲得實作經驗，並在過程中使用通用場景描述 (USD) 程式碼取得解答和指引。

*可自行安排進度

查看演講詳細資訊

7 月 31 日 (三)
晚上 11:00 至次日上午 00:30 (台灣時間)

這是針對組合弧的課程，目標客群是想使用 OpenUSD 強大組合功能的開發人員和 3D 設計師，相藉此建立模組化、可擴充且高效率的 3D 場景。我們會介紹組合弧、層和層堆疊、參考和負載、變異集，以及偵錯和內省的基本概念。本課程結束時，您將會具備輕鬆建立和管理複雜 3D 場景的能力。

查看演講詳細資訊

7 月 31 日 (三)
次日上午 1:00 至 3:00 (台灣時間)

在本課程中，我們將介紹素材結構在實際運作環境和模型階層中的重要性，以及如何使用層堆疊來組織工作流程，在最佳化效能的同時也能簡化協作工作流程。只要使用 OpenUSD，就能建立可擴充的模組化高效能場景，促進改善任何產業的協作、內容重複使用和平行工作流程。包含製造業和數位孿生、生產和動畫，到零售和產品設計的所有領域。

查看演講詳細資訊

7 月 31 日 (三)
次日上午 5:30 至 7:00 (台灣時間)

加入我們的 OpenUSD 資料交換課程，瞭解如何充分利用 3D 工作流程和開發流程。本課程適合希望掌握在 OpenUSD 和其他資料格式之間交換資料，以最佳化現有 3D 工作流程的開發人員和 3D 藝術家。我們會複習概念資料對應的原則、使用 Python 建立 OpenUSD 轉換指令碼，以及進行素材驗證和測試。在本課程結束時，便能實作和管理 OpenUSD 和常用 DCC 工具之間的資料交換流程。

查看演講詳細資訊

7 月 31 日 (三)
次日上午 4:15 至 5:15 (台灣時間)

此實驗室將使用實作程式碼範例，介紹以 Simplicates 方法 (於本次 SIGGRAPH 發表) 為基礎的全新物理模擬模組，該模組可在任何 3D 表現形式上執行物理模擬。此實驗室尤其將展示如何設定 3D Gaussian Splat 重建的物理模擬及與其互動，並在 Jupyter Notebook 中用幾行程式碼將其視覺化。此外，我們也會帶領觀眾瞭解涵蓋 Kaolin 主要功能的程式碼範例，如使用 PBR 材質進行可微分渲染、匯入 PyTorch 的一致幾何圖形、自訂 3D 渲染函數的偵錯和檢查等。最後，我們將探討如何使用 Kaolin 函式庫 API，將 3D 人工智慧研究與 NVIDIA Omniverse 中的即時通用場景描述 (USD) 場景連結起來，並展示已發布的漫射材質繪製程式碼範例。

查看演講詳細資訊

8 月 1 日 (四)
晚上 11:00 至次日上午 1:00 (台灣時間)

研究有助於以 MNIST 影像生成器到視覺引導語言模型製作任何內容的基元。
討論大型模型編排，並示範如何用於建置端對端多模態代理程式系統。

查看演講詳細資訊

8 月 1 日 (四)
次日上午 2:00 至 4:00 (台灣時間)

探討強化聊天機器人，朝向互動式數位人類發展的主要優點。
詳細說明數位人類的關鍵要素。
打造並部署採用人工智慧技術的數位人類。

查看演講詳細資訊

NVIDIA Research 於 SIGGRAPH 中的發表

SuperPADL：使用漸進式監督蒸餾 (Progressive Supervised Distillation) 來調整語言導向的物理控制

論文演講

更穩定的非虎克體 (Neo-Hookean) 模擬：投影牛頓法 (Projected Newton) 的絕對特徵值過濾

論文演講

x
Area ReSTIR: Resampling for Real-Time Defocus and Anti-Aliasing
Walkin’ Robin: Walk on Stars With Robin Boundary Conditions
Decorrelating ReSTIR Samplers via MCMC Mutations
fVDB: A Deep Learning Framework for Sparse, Large-Scale, and High-Performance Spatial Intelligence
From Microfacets to Participating Media: A Unified Theory of Light Transport With Stochastic Geometry
A Free-Space Diffraction BSDF
NeuralVDB: High-Resolution Sparse Volume Representation Using Hierarchical Neural Networks
ConsiStory: Training-Free Consistent Text-to-Image Generation
Modeling Hair Strands With Roving Capsules
SuperPADL: Scaling Language-Directed Physics-Based Control With Progressive Supervised Distillation
A Differential Monte Carlo Solver for the Poisson Equation
Diffusion Texture Painting
Simplicits: Mesh-Free, Geometry-Agnostic, Elastic Simulation
Stabler Neo-Hookean Simulation: Absolute Eigenvalue Filtering for Projected Newton
Fluid Control With Laplacian Eigenfunctions
Real-Time Neural Appearance Models
Surface-Filling Curve Flows via Implicit Medial Axes
Interactive Character Control With Auto-Regressive Motion Diffusion Models
Flexible Motion In-Betweening With Diffusion Models
Flexible Motion In-Betweening With Diffusion Models
Flexible Motion In-Betweening With Diffusion Models
Flexible Motion In-Betweening With Diffusion Models
Flexible Motion In-Betweening With Diffusion Models