SIGGRAPH主題演講：NVIDIA首席執行官帶來生成式AI多項創新

在生成式AI繼續席卷日益數字化和互聯化的世界之際，NVIDIA創始人兼首席執行官黃仁勛重返全球知名的計算機圖形大會 SIGGRAPH舞臺。

“生成式AI時代和AI的iPhone時刻已經到來”，黃仁勛在SIGGRAPH現場向數千名觀眾發表了主題演講，并通過直播分享給全球觀眾。

黃仁勛發布了GH200 Grace Hopper 超級芯片平臺和一個名為NVIDIA AI Workbench的全新統一工作空間，以簡化NVIDIA AI平臺上模型的調節和部署。此外，他宣布將對NVIDIA Omniverse進行重大升級，加入對生成式AI和 OpenUSD的支持。

這些發布旨在將過去十年所有的創新結合在一起，其中包括人工智能、虛擬世界、加速、模擬、協作等創新與技術。

黃仁勛表示：“計算機圖形學和 AI 密不可分，圖形學需要 AI，AI 也需要圖形學?！彼忉屨f，AI 將在虛擬世界中學習技能，于此同時，AI 也可以用于創建虛擬世界。

AI和實時圖形的基礎

黃仁勛表示，“五年前在 SIGGRAPH 上，NVIDIA 將 AI 和實時光線追蹤引入 GPU ，從此顛覆了計算機圖形。不僅如此，在 NVIDIA 通過 AI 重塑計算機圖形的同時，也致力于為 AI 重塑 GPU?！?br />
這些努力換來的成果是越來越強大的系統。例如 NVIDIA HGX H100，它利用 8 個 GPU 和總共 1 萬億個晶體管來實現加速計算，超越基于CPU的系統 。

“這就是全球數據中心迅速轉向加速計算的原因，”黃仁勛告訴觀眾。 “買得越多，省得越多?！?br />
為了延續 AI 的發展勢頭，NVIDIA 打造了 Grace Hopper 超級芯片NVIDIA GH200，該芯片結合了 72 核 Grace CPU 和 Hopper GPU，并已于 5 月全面投產。

黃仁勛介紹說，已經投產的 NVIDIA GH200 將補充一個配備領先 HBM3e 內存的附加版本。

黃仁勛宣布推出新一代 GH200 Grace Hopper 超級芯片，它能夠連接多個 GPU，以實現卓越的性能和易于擴展的服務器設計。

專為處理世界上復雜的生成式工作負載而構建的新平臺，將提供多種配置，其中涵蓋大型語言模型、推薦系統和矢量數據庫等。

與當前一代產品相比，雙配置的內存容量增加了 3.5 倍，帶寬增加了 3 倍，包括一臺具有 144 個 Arm Neoverse 核心、8 petaflops 的 AI 性能和 282 GB 最新 HBM3e 內存技術的單服務器。

領先的系統制造商預計將在 2024 年第二季度交付基于該平臺的系統。

NVIDIA 創始人兼首席執行官黃仁勛在SIGGRAPH 主題演講的現場，座無虛席

NVIDIA AI Workbench加速自定義生成式AI的應用

為了加快全球企業對自定義生成式AI的應用，黃仁勛發布了NVIDIA AI Workbench。該平臺為開發者提供了一個統一、易用的工作空間，使他們能夠在個人電腦或工作站上快速創建、測試和微調生成式AI模型，然后將這些模型擴展到幾乎所有數據中心、公有云或 NVIDIA DGX Cloud。


AI Workbench 大大降低了企業AI項目的門檻。開發者通過在本地系統上運行的簡單界面，就可以使用自定義數據對來自 Hugging Face、GitHub 和 NGC 等常見資源庫的模型進行微調，然后在多個平臺上輕松共享。


雖然目前有成千上萬的預訓練模型可用，但使用許多現有的開源工具自定義這些模型依然十分困難且耗時。

黃仁勛表示：“為了使這種能力更加普及，我們必須使其能夠在幾乎任何地方運行?！?br />
借助AI Workbench，開發者只需點擊幾下就能自定義和運行生成式AI。開發者可以將所有必要的企業級模型、框架、SDK 和庫整合到一個統一的開發者工作空間中。

“有了 AI Workbench，任何人都可以做到這些?！秉S仁勛說道。

包括戴爾科技、慧與、惠普、 Lambda、聯想和超微在內的領先AI基礎架構提供商正在使用AI Workbench，在本地設備等開發者想要工作的任何地點提供企業級生成式AI功能。

黃仁勛還宣布NVIDIA將與初創企業Hugging Face一起為數百萬開發者提供生成式AI超級計算，幫助他們構建大型語言模型等高級AI應用。


開發者將能夠使用Hugging Face 平臺內的NVIDIA DGX Cloud AI 超級計算訓練和調整高級 AI 模型。

黃仁勛表示，“這將是一項全新的服務，將世界上頂尖的AI社區與頂尖的訓練和基礎設施連接起來?！?br />
在視頻展示中，黃仁勛演示了 AI Workbench 和 ChatUSD 如何將這一切結合在一起：用戶在 GeForce RTX 4090 筆記本電腦上啟動項目，隨著項目變得復雜，可以輕松地將項目擴展到工作站，亦或者是數據中心。

使用 Jupyter Notebook，用戶可以訓練模型使其生成 Toy Jensen 的太空圖片。因為模型從未見過Toy Jensen，如果此時模型提供的結果不理想，用戶可以使用 Toy Jensen 的八張圖像微調模型，然后再次訓練它以獲得更準確的結果。

最終，通過 AI Workbench，可以將新模型部署到企業應用程序中。

全新NVIDIA Enterprise 4.0 推進AI部署

為進一步加快生成式AI的應用，NVIDIA發布了企業軟件套件的最新版本 —— NVIDIA AI Enterprise 4.0。

NVIDIA AI Enterprise為企業提供采用生成式AI所需的工具，同時帶來了大規模企業部署所需的安全性和API穩定性。

Omniverse 的重大升級：加入對生成式AI和 OpenUSD的支持以實現工業數字化

黃仁勛發布了 NVIDIA Omniverse 的重要更新，這是一個 OpenUSD 原生開發平臺，用于跨工具構建、模擬和協作，為開發人員和企業提供新的基礎應用程序和服務，以利用 OpenUSD 框架和生成式 AI 優化和增強他們的 3D 流程和虛擬世界。


他還宣布了 NVIDIA 對 OpenUSD 的貢獻，OpenUSD 是用于描述、模擬和跨 3D 工具協作的框架和通用流通平臺。

Omniverse 平臺的更新包括 Omniverse Kit（用于開發原生 OpenUSD 應用和擴展程序的引擎）以及 NVIDIA Omniverse Audio2Face 基礎應用和空間計算功能的升級。

Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics 現已通過 OpenUSD 與 Omniverse 相連。

Adobe 和NVIDIA 宣布計劃將在Omniverse為用戶提供 Adobe Firefly（Adobe的創作生成式AI模型系列）的 API 接口，以擴大雙方在 Adobe Substance 3D、生成式AI和 OpenUSD項目方面的合作。


Omniverse 用戶現在可以構建與其他基于 OpenUSD 的空間計算平臺（例如 ARKit 和 RealityKit）兼容的內容、體驗和應用程序。

黃仁勛宣布將為開發者和企業提供種類廣泛的框架、資源和服務，以加快通用場景描述（即OpenUSD）的應用，包括地理空間數據模型、指標組裝和模擬就緒（或 SimReady）、OpenUSD 規格等。

黃仁勛還發布了四款NVIDIA打造的全新Omniverse Cloud API，使開發者能夠更加流暢地實施和部署OpenUSD流程和應用。
· ChatUSD：它是一個大語言模型 (LLM) 代理，可幫助開發人員和藝術家處理 OpenUSD 數據和場景，用于從文本生成 Python-USD 代碼腳本并回答USD知識問題。
· RunUSD：一個云API，通過檢查上傳文件與 OpenUSD 版本的兼容性，將 OpenUSD 文件轉換為全路徑追蹤渲染圖像，并使用 Omniverse Cloud 生成渲染圖像。
· DeepSearch： 一個LLM 代理，可在海量無標記資產數據庫中進行快速語義搜索。
· USD-GDN Publisher：一項一鍵式服務，使企業和軟件制造商能夠從基于 Omniverse 的應用程序（例如 USD Composer）向 Omniverse Cloud圖形交付網絡 (GDN) 發布高保真、基于 OpenUSD 的體驗，并實時流式傳輸到網絡瀏覽器和移動設備。

上周，NVIDIA 宣布與皮克斯、Adobe、蘋果和 Autodesk 共同創立 OpenUSD 聯盟。

強大的新型臺式電腦系統和服務器

黃仁勛表示NVIDIA和全球工作站廠商將發布性能強大的全新RTX工作站，為生成式AI和數字化時代的開發和內容創建提供更強大的算力。

來自BOXX、戴爾科技、惠普和聯想等廠商的這些系統配備NVIDIA RTX 6000 Ada GPU以及 NVIDIA AI Enterprise和NVIDIA Omniverse Enterprise軟件。

NVIDIA還發布了三款全新的桌面工作站基于Ada架構的GPU —— NVIDIA RTX 5000、RTX 4500和 RTX 4000，為全球專業人員提供最新的AI、圖形和實時渲染技術。

黃仁勛還詳細介紹了NVIDIA如何與全球數據中心系統廠商一起通過搭載全新NVIDIA OVX繼續大力推動生成式 AI 和工業數字化的發展。NVIDIA OVX 基于功能強大的通用數據中心處理器NVIDIA L40S GPU 打造而成。

這些性能強大的新系統將利用NVIDIA Omniverse平臺加速高計算密集度的復雜應用，包括AI訓練和推理、3D設計和可視化、視頻處理、工業數字化等。

NVIDIA研究帶來新的創新

NVIDIA研究人員將在SIGGRAPH的實時現場活動上展示一種生成式AI工作流程，幫助藝術家使用文本或圖像提示更快生成自定義紋理材質和進行更加精密的創作控制，從而快速創建并迭代 3D 場景的材質。

NVIDIA研究部門還演示了AI如何通過全新 3D 功能將視頻會議的質量提升到新的水平。此外，NVIDIA最近發表了一篇論文，闡述AI如何利用最少的捕捉設備支持3D視頻會議系統。

Maxine的生產版本現已在NVIDIA Enterprise中推出。專業人員和創作者即便使用普通的麥克風和網絡攝像頭，也能夠利用AI的強大功能創造出高質量的音頻和視頻效果。