NVIDIA創辦人暨執行長黃仁勳,日前介紹多項將改變市值數兆美元產業的嶄新技術,將現實和虛擬世界的模擬內容用於從自動駕駛車、虛擬化身、機器人到建立地球氣候模型等多個領域。黃仁勳透過線上GTC主題演講,宣布推出NVIDIA新技術、多項重要消息、展示與計畫。
黃仁勳向外界展示集結NVIDIA各項技術所打造的NVIDIA Omniverse,這是一款用於3D工作流程的虛擬世界模擬和協作平台。他還以Omniverse Avatar展示用於客戶支援的Project Tokkio,以及用於進行視訊會議的Project Maxine。
黃仁勳表示,各位會看到一個始終存在的主題,也就是如何透過Omniverse來模擬倉庫、工廠、物理和生物系統、5G、邊緣、機器人、自動駕駛車,甚至是虛擬化身的數位孿生(Digital Twins)。NVIDIA將建立一個稱為E-2或Earth Two的數位孿生,藉以模擬和預測氣候變遷。
完整堆疊、資料中心規模且開放的平台
NVIDIA為300萬名開發人員建立150個加速函式庫,涵蓋繪圖、AI、科學到機器人等領域。NVIDIA亦在GTC大會推出65款全新和更新的軟體開發套件(SDK)。
黃仁勳在會中介紹網路平台NVIDIA Quantum-2,搭載BlueField 3 DPU並接受雲端原生超級運算。針對各企業與國家極為重視的網路安全問題,推出一款有著三大支柱的零信任框架來解決這項難題。BlueField DPU會區隔應用程式與基礎設施。NVIDIA DOCA 1.2是最新的BlueField SDK,支援下一代的分散式防火牆。假設入侵者已進入內部系統,NVIDIA Morpheus會運用加速運算和深度學習的能力,偵測入侵者行動。
NVIDIA Omniverse Avatar與Omniverse Replicator
NVIDIA宣布推出 Omniverse Avatar,以協助開發人員打造能看、能說、能就各種主題進行對話,並能理解自然語意的互動式角色。黃仁勳展示Omniverse Avatar的Project Maxine項目,如何將電腦視覺、Riva語音AI及虛擬化身動畫和繪圖,連接到一個即時對話式AI機器人Toy Jensen Omniverse Avatar上。
他還展示Project Tokkio項目,這是一個餐廳自助服務機的客服虛擬化身,其能夠看見並與兩個客人進行對話,進而理解他們的需求;Project Maxine能將影音功能,加入虛擬協作及內容創作應用程式。此外,新推出的Omniverse Replicator,可用於訓練深度神經網路的合成資料引擎,以幫助開發人員創造出訓練AI所需的大量資料。
AI模型與系統
黃仁勳介紹用於訓練大型語言模型的Nemo Megatron,其將會是史上最大的主流高效能運算(HPC)應用。此外,用於處理各種作業負載的Triton推論伺服器也推出升級版,現在可以對決策樹模型進行推論,並且為大型語言模型進行多GPU、多節點推論作業。
黃仁勳宣布推出NVIDIA Launchpad計畫,協助以NVIDIA AI技術為基礎的服務推廣到邊緣。該公司將與Equinix合作,預先安裝NVIDIA AI技術並整合至全球資料中心。
機器人
黃仁勳宣布,NVIDIA Isaac機器人平台和機器人作業系統(ROS)可進行整合,ROS是一套廣泛使用的機器人應用程式軟體庫和工具。Isaac Sim Replicator可以產生訓練機器人所需的合成資料,以協助進行這個過程。Replicator會模擬感測器、產生自動標記的資料,並且利用一個領域隨機化引擎,創造多元的訓練資料集。
自動駕駛車
NVIDIA DRIVE是NVIDIA 的自動駕駛車全堆疊開放平台,Hyperion 8則是NVIDIA完整軟硬體架構。其感測器套件包含12台攝影機、9個雷達、12個超音波和1個前置光達,並交由兩個NVIDIA Orin系統單晶片來處理感測器所傳送的資料。
NVIDIA現正運行Hyperion 8感測器、4D感知、基於深度學習的多感測器融合、特徵追蹤及新的規畫引擎。汽車內部也將進行革新。NVIDIA Maxine的技術將一改人們與車輛的互動方式。
Earth Two
黃仁勳最後宣布NVIDIA將建立Earth Two (E-2) 來模擬和預測氣候變遷。