6 月 3 日下午，NVIDIA 以 “AI 和內容創作” 為主題，舉辦了2023 U 設計周 Uwin 產業分論壇。NVIDIA 為在座逾 800 位聽眾分享了如何使用 NVIDIA AI 和 Omniverse 加速設計創作。無論是物理模擬引擎、AI，還是 XR、云原生技術，都能融入 Omniverse 的工作流，進而助力創意設計、廣告營銷、游戲、企業服務等各個領域，通過 Omniverse 平臺簡化創建數字世界的工作流。

NVIDIA 全球副總裁劉念寧通過視頻致辭，誠摯歡迎 U 設計周所有與會嘉賓和在線聽眾，并成功為 NVIDIA 分論壇揭開完美序幕。她指出，NVIDIA 作為一家全棧式 AI 計算平臺的賦能者，與行業各界合作伙伴建立了長期深入的合作關系。結合合作伙伴豐富優質的生態和技術實力，以及 NVIDIA 在人工智能、圖形圖像等技術領域的賦能平臺，從芯片、系統、數據中心到云服務，將 AI 引入各行各業，幫助企業在可持續發展，生成式 AI 以及數字轉型的大趨勢下乘風破浪、勇立潮頭。

每個時代的設計美學都具有獨特的風格，此時此刻，設計所插上的是 AI 的翅膀，NVIDIA 愿成為企業、開發者和創作者手中的畫筆，共繪時代最美的篇章。

——劉念寧

NVIDIA Omniverse 中國區業務負責人何展帶來「科技融合時代下的數字內容生產變革」的主題分享。他指出，歷經 PC、互聯網、移動互聯網時代，我們正處于人工智能計算的新紀元，新計算時代會加速內容生產和生成。

面對這個時代的發展機遇，NVIDIA 帶來的是 Omniverse 平臺。NVIDIA Omniverse 是一個啟用多 GPU 的開放式云原生平臺，由 NVIDIA RTX 技術提供動力以支持實時協作，是專為虛擬協作和實時逼真模擬而打造的易于擴展的開放式平臺。NVIDIA Omniverse 是連接世界上最大的工具生態系統，目前連接 220 個工具軟件，下載量超過 30 萬。

隨后，何展介紹了 NVIDIA 在計算機視覺、計算機圖形學、生成式 AI、工業數字孿生等領域的最新應用。比如，在計算機視覺層面，位于紐約的 AI 初創企業，同時也是奧斯卡最佳影片《瞬息全宇宙》的幕后制作公司 Runway，正使用 CV-CUDA 賦能其視頻編輯和圖像創建工具。在最新一代 NVIDIA GPU 的助力下，Runway 允許用戶只需簡單幾筆即可從視頻中移除一個對象，或僅使用一個輸入圖像就可以對視頻應用不同樣式的背景或者前景。過去使用傳統工具需要數小時才能完成的工作，現在只需要短短幾分鐘就可以實現專業廣播級的效果輸出。

而在生成式 AI 層面，生成式 AI 正在改變視覺內容的創建方式，但要充分發揮其潛力，企業需要大量版權許可的數據、AI 專家與 AI 計算平臺。NVIDIA 在 3 月 GTC 大會上推出了 NVIDIA Picasso 的 AI 云服務，專門用于幫助企業使用自身的專有數據，創建和部署生成式 AI 賦能的圖像、視頻與 3D 應用。企業可以將生成的素材導入編輯工具或 NVIDIA Omniverse，從而構建逼真的模擬世界元宇宙應用和數字孿生，同時簡化自定義生成式 AI 應用所需的訓練、優化和推理。

生成式 AI 將改變與顛覆包括影視、時尚、工業等多個行業的應用，從而帶來 “全民化” 的 2D 和 3D 內容創建。

——何展

生成式 AI 是近期最火爆的話題之一。生成式 AI 的應用，從文本、音頻到跨模態、策略生成等，在設計、內容創作、廣告營銷、游戲、企業服務等領域都陸續開始商業化應用。NVIDIA 資深解決方案架構師張瑋東以「生成式 AI 行業案例介紹」為題，介紹了目前行業中比較領先的生成式 AI 應用案例，以及 NVIDIA 的各項能力對生成式 AI 的相關領域所提供的支撐。

在硬件層面，NVIDIA 新一代 GPU 采用全新的 Ada Lovelace 架構，配備包括 CUDA 的核心——流式多處理器（Streaming Multiprocessor）相關模塊，用于加速 AI 訓練和推理的第四代張量核心（Tensor Core）、支持實時光線追蹤渲染的第三代光追核心（Ray Tracing Core），以及支持編解碼加速的視頻編解碼引擎 NVENC/NVDEC，提供出色的效率、專業圖形、AI 和計算性能。此外，NVIDIA 還提供基于新一代 RTX 技術的一系列專業視覺計算產品，如數據中心顯卡與工作站顯卡。目前，市場上超過 70 款熱門 DCC 軟件，如 Blender、Autodesk 等，均由 NVIDIA GPU 賦能的實時光線追蹤技術以及加速技術作為底層支持。

隨后，張瑋東分享了生成式 AI 在圖像生成、三維對象生成、文本和代碼生成、多模態生成、聲音與音樂生成、動作生成等多個領域的領先應用案例，比如借助 Stable Diffusion 用 AI 生成紋理和 PBR 材質交互編輯，借助 NVIDIA Instant NeRF（神經輻射場）將靜態 2D 圖像轉換為 3D 場景創建，為與會觀眾帶來震撼的視聽體驗。

關于生成式 AI 的發展機遇與挑戰，我希望留個懸念，讓大家去思考。期待各位在生成式 AI 發展的起點就深入進去，做得更好。

——張瑋東

隨后，NVIDIA 的特邀嘉賓、國際知名視覺設計藝術家、良勝數字聯合創始人張大勝，帶來「利用 NVIDIA Omniverse 打造數字世界」主題演講，分享了如何使用利用 NVIDIA Omniverse 打造數字世界的經驗。他表達了對于科技、設計的敬仰，以及對 Omniverse 的熱愛，稱之為 “讓設計進化的藥”，提供了無邊無界的創意空間。

良勝數字一直主打電影級的數字特效設計，致力于打造全球領先的數字創意設計公司，同時也是NVIDIA 初創加速計劃會員企業。目前，良勝數字的超寫實數字人設計部通過 NVIDIA Omniverse Audio2Face 提供 AI 動力支持，音頻生成面部表情動畫，解決臉部動捕難點。在良勝數字，從 Blender 到 Maya、從 iCLONE 到 Unreal Engine，各種復雜的 3D 工作流都通過 NVIDIA Omniverse 實現充分的互操作性，讓設計變得更高效、更美好。

人工智能和設計領域的交叉融合，是一個重要的趨勢。NVIDIA 及其領先的 Omniverse 平臺已成為我們在設計進程中不可或缺的工具，使得包括良勝數字在內的設計師可以更加高效、更具想象力地進行創作。希望更多的設計師能夠運用這一工具，提高效率，創新設計，推動整個設計行業的進步發展。

——張大勝

基于 NVIDIA 基于 CUDA 和 TensorRT 加速的 Stable Diffusion，和 Transformer 架構的 ChatGPT 等生成式 AI 工具，正在變革設計工作模式。NVIDIA 解決方案架構師曹徐偉，帶來了「從 NVIDIA Omniverse 3D 協同設計到 NVIDIA AI 工具創作運用」主題分享，探討如何將 Diffusion 模型生成的內容與 NVIDIA Omniverse 相結合，以及 ChatGPT 自主式編程如何輔助傳統的設計工作流。

AI 初學者如何開始第一步？曹徐偉通過 NVIDIA 賦能下整合多種技術的設計工作流示例，向與會聽眾分享了快速上手的實用經驗技巧。比如，通過 NVIDIA 一個內部開發模塊 NVSCAN，可以快速掃描人臉，生成點云；生成點云后，可以通過 MeshLab 工具掃描數字人；隨后使用 MetaHuman 框架，將臉型拓撲過去，與數字人的身體網格匹配；最終，通過 NVIDIA Omniverse Audio2Face 生成面部動畫。整個工作流非常適用于數字人初學者去使用。

面向生成式 AI 帶來的機會，不要有過多的焦慮。引用創始人黃仁勛的話，不要走，要用跑的。我們很愿意輔助大家，在這個賽道上找到自己的價值和方向。

——曹徐偉

最后，NVIDIA XR 業務拓展及開發者關系經理毛萃帶來以「四大支柱技術碰撞出的 XR 生態新范式」為題的分享。

無論是賦能用戶的協作設計，還是利用數字世界幫助觀眾在虛實之間切換、互動，都離不開擴展現實（XR）所創造的逼真、沉浸式環境。在演講中，毛萃先簡單介紹了 XR 的相關概念——XR 包括虛擬現實 VR、增強現實 AR、以及混合現實 MR。談到 XR 的發展歷史，最早可以追溯到 1838 年。在 1968 年，第一款頭戴虛擬現實設備 Sutherland 出現。2016 年前后，XR 開始走入大眾視野。伴隨著手機供應鏈的成熟、AI 技術的發展，以及計算機視覺技術的提升，XR 得到了飛躍式的發展。

隨后，毛萃介紹了構建 XR 生態新范式的四大核心支柱技術：串流技術、AI技術、協作、以及高保真。

串流技術

借助 NVIDIA CloudXR SDK，用戶可以通過 GPU 虛擬化軟件充分利用 NVIDIA RTX 服務器的強大功能，通過云端串流技術以及網絡傳輸，將制作好的 XR 內容傳輸到各種類型的 XR 設備上，打造精彩的增強現實和虛擬現實體驗。今年三月，NVIDIA 新發布了 CloudXR 4.0 版本，帶來了 CloudXR Server API、Unity 插件、通用手柄支持等新功能，允許開發者在應用程序和定制方案中集成 CloudXR 服務，而企業客戶則可通過 CloudXR 4.0 來提升 AR/VR 能力，為 XR 部署帶來更多靈活性和可擴展性。

協作與高保真

NVIDIA Omniverse XR 包含 AR 和 VR 兩部分。一方面，通過在應用商店可下載的 Omniverse Streaming Client 應用，渲染后的光追場景串流到平板或者手機，以 AR 呈現。另一方面，作為首個全畫幅、支持 VR 實時光線追蹤的應用，工程師、設計師和創作者能在 VR 環境中查看、導航、審查和注釋，控制燈光，操作 3D 物體等。NVIDIA Omniverse XR 不需要預處理或編譯，VR 內部物體可以被重新定位和重新縮放，照明也可實時調整。

AI 技術

如何擺脫手柄，讓解放雙手的 XR 體驗成為可能？從現場展示的 Project Mellon（甜瓜項目）上看到，NVIDIA 正通過使用自然語言語音指令創建 XR 體驗。Project Mellon 是一個輕量級的 Python 軟件包，能夠利用強大的語音 AI（NVIDIA Riva）和 LLMs（NVIDIA NeMo 服務），簡化沉浸式環境中的用戶交互。NVIDIA 在 GTC 2023 上宣布，Project Mellon 現已支持開發者進行測試。語音輸入會在對話框中以文字形式展現，對于操作人員來說，這意味著他不需要知道某個操作的實現需要如何操作界面，只需要通過自然語音來交互就可以。

生成式 AI 時代下 XR 的發展趨勢

自發布以來，成千上萬的開發者和內容創作者正在利用 NVIDIA Instant NeRF 構建令人驚嘆的 3D 視覺效果。近日，NVIDIA 為這個渲染工具增加了虛擬現實支持，即 Instant NeRF in VR。換句話說，用戶可以從靜態圖像渲染沉浸式場景，然后通過 VR 頭顯虛擬地進入環境，并在 3D 空間中自由移動。從現場視頻演示中可以看到，一個快速重建的 3D 環境演示，其渲染的場景細節已經非常驚艷，相信在不久的將來，將有更多商業的應用與拓展。

串流技術、AI、協作、高保真，這是 NVIDIA 定義的影響 XR 發展的四個核心技術，它們相互融合承托，為構建 XR 生態新范式奠定基礎。

——毛萃

U 設計周 X NVIDIA Omniverse 元宇宙設計大賽頒獎典禮也在現場舉辦，為此次專業論壇畫上了圓滿的句號。眾多優秀的創作者和開發者在大賽期間將 NVIDIA Omniverse 融入其創作和開發工作流，讓精彩創意落地。

6 月 1 日 – 4 日 U 設計周活動期間，NVIDIA 展區展示了涵蓋軟硬件、NVIDIA Research、行業產品和解決方案、客戶案例、NVIDIA 初創加速計劃（NVIDIA Inception）會員企業案例、互動演示七大版塊，集中展示了 NVIDIA 全棧式 AI 解決方案以及 AI 研究、行業應用、生態企業的前沿成果。