11月9日下午4點，英偉達GTC 2021開始了。

還是那個廚房，那身皮衣，但老黃這回是AI生成的嗎？

我們確認過了，這次黃仁勛全程在線，沒有使用假身！

黃老板搖滾范的長發(fā)再次回歸短發(fā)。

不過這次雖然沒有假身，又多了一個老黃的Avatar。

剛剛，黃仁勛重磅發(fā)布了會對話的虛擬形象 Toy-Me。

黃仁勛表示，「你會看到這個虛擬形象是基于目前訓練的最大語言模型的語言處理打造，包括聲音也是用我自己的語音進行合成，還可以看到實時基于光線追蹤的精美圖像。」

這個 Toy-Me 有多厲害？

黃仁勛演示3個人分別讓虛擬形象回答關于氣候變化、天文學以及生物蛋白質等棘手的問題，這個可愛的小家伙回答行云流水。

先是Facebook改名，后是微軟把MR平臺Mesh融入到Teams中。

此次，英偉達還推出了自己的虛擬人，更加證明了全力布局「元宇宙」勢不可擋。

Omniverse Avatar發(fā)布，全力擁抱「元宇宙」

英偉達在GPU技術大會上正式發(fā)布了Omniverse Enterprise，這是一個模擬和協(xié)作平臺。按照英偉達的說法，該平臺“充當物理上精確的3D虛擬世界的結締組織”。Omniverse Enterprise利用英偉達芯片為企業(yè)客戶構建強大的計算系統(tǒng)，起售價為每年9000美元，通過戴爾和聯(lián)想集團等合作伙伴銷售。

英偉達首席執(zhí)行官黃仁勛在主題演講中表示，通過Omniverse，“我們現(xiàn)在擁有了創(chuàng)建新的3D世界或模擬我們的物理世界的技術。”

在英偉達發(fā)布的產品當中，其中就包括了用于生成交互式人工智能化身的技術平臺Omniverse Avatar。該平臺集合了英偉達在語音人工智能、計算機視覺、自然語言理解、推薦引擎和模擬技術方面的技術，為創(chuàng)建人工智能助手打開了大門，可以幫助處理數十億的日常客戶服務互動，帶來更大的商業(yè)機會和提高客戶滿意度。

“你們會看到一個不變的主題--如何使用Omniverse來模擬倉庫、廠房和工廠、物理和生物系統(tǒng)、5G邊緣、機器人、自動駕駛汽車，”黃仁勛說。

可以看出，英偉達在這次GTC大會上進一步堅定了「進軍元宇宙」的決心！

其中，人工智能阿凡達平臺（NVIDIA Omniverse Avatar）帶來了一些令人振奮功能。

正如前面所提到的，Omniverse Avatar是一款基于語音、計算機視覺、自然語言理解、推薦引擎和模擬方面的技術生成的交互式AI化身。

Avatar是具有光線跟蹤3D圖形的互動角色，可以看到、說話、就廣泛的主題進行交談，并理解自然對話的意圖。

Omniverse Avatar為創(chuàng)建人工智能助手打開了大門，這些助手幾乎可以為任何行業(yè)輕松定制。這些可以幫助處理數十億的日常客戶服務互動，包括餐廳訂單、銀行交易、進行個人預約和預訂等等。

比如這個餐廳客戶服務Avatar就可以同時和兩個顧客進行交談和理解。

黃仁勛表示：「Omniverse Avatar結合了英偉達的基礎圖形、模擬和人工智能技術，使一些有史以來最復雜的實時應用程序得以誕生。協(xié)作機器人和虛擬助手的使用案例令人難以置信，影響深遠。」

「全能」的阿凡達

Avatar的語音識別基于英偉達Riva，這是一個軟件開發(fā)工具包，可以識別多種語言的語音。Riva還被用來利用文本到語音功能生成類似人類的語音反應。

Avatar的自然語言理解是基于Megatron 530B大型語言模型，可以識別、理解和生成人類語言。

Megatron 530B預訓練模型在各種自然語言任務如：完形填空、閱讀理解、常識推理、自然語言推理、詞義消歧中紛紛實現(xiàn)SOTA。

除了可以回答問題、總結長而復雜的故事，還可以在沒有經過專門訓練的領域處理相應的問題。

Avatar的推薦引擎由NVIDIA Merlin提供，該框架允許企業(yè)建立能夠處理大量數據的深度學習推薦系統(tǒng)，以提出更智能的建議。

Avatar的感知能力由NVIDIA Metropolis提供，這是一個用于視頻分析的計算機視覺框架。

Avatar的頭像動畫由NVIDIA Video2Face和Audio2Face（二維和三維AI驅動的面部動畫和渲染技術）驅動。

Omniverse Avatar將這些技術組成一個應用程序，并使用NVIDIA統(tǒng)一計算框架進行實時處理。

對于Omniverse平臺功能更新共有4個：

Showroom是一個包含演示和示例應用程序，展示了Omniverse核心技術。

Farm一個系統(tǒng)層，用于協(xié)調跨多個系統(tǒng)、工作站、服務器和虛擬化批作業(yè)處理，可以用于批量渲染，AI合成數據生成或分布式計算。

Omniverse AR可以將將圖形串流到手機或者AR眼鏡。Omniverse VR是英偉達首款全幀交互式光線追蹤VR。

NVIDIA Quantum-2：將超算帶入云端

英偉達還推出了下一代 InfiniBand 網絡平臺Quantum-2，該平臺可提供云計算提供商和超級計算中心所需的極致性能、廣泛的可訪問性和強大的安全性。

作為有史以來最先進的端到端網絡平臺，NVIDIA Quantum-2是一個400Gbps InfiniBand網絡平臺，由NVIDIA Quantum-2交換機、ConnectX-7網絡適配器、BlueField-3數據處理單元（DPU）和所有支持新架構的軟件。

NVIDIA Quantum-2的推出，正值超級計算中心向越來越多地用戶開放之際，其中許多用戶來自這些計算中心之外。與此同時，全球的云服務提供商也開始為客戶提供更多的超算服務。

憑借400Gbps的高帶寬，NVIDIA Quantum-2 InfiniBand讓網絡速度加倍，網絡端口數量增加了3倍。性能提高了3倍，對數據中心結構交換機的需求減少了6倍，同時降低了數據中心功耗，數據中心占用的空間也減少了7%。

與上一代技術相比，NVIDIA Quantum-2 SHARPv3網絡計算技術為AI應用程序提供了32倍的加速引擎。

Quantum-2平臺的核心是新的Quantum-2 InfiniBand交換機。它搭載570億個晶體管，比擁有540億個晶體管的NVIDIA A100 GPU略大。

它具有64個400Gbps端口或128個200Gbps端口，并將在各種交換機系統(tǒng)中提供，多達 2,048個400Gbps端口或4,096個200Gbps 端口。交換能力是上一代Quantum-1的5倍以上。

在網絡速度、交換能力和可擴展性上，InfiniBand都非常適合構建下一代巨型HPC系統(tǒng)。

NeMo Megatron框架：發(fā)力大型語言模型開發(fā)

NVIDIA 今天還打開了開發(fā)和部署大型語言模型 (LLM) 的大門，推出了用于訓練具有數萬億個參數的語言模型的NVIDIA NeMo Megatron框架、可針對新領域和語言進行訓練的Megatron 530億參數的可定制大型語言模型，以及具有多 GPU、多節(jié)點分布式推理功能的NVIDIA Triton推理服務器。

這些工具提供了一個完備的企業(yè)級解決方案，簡化了大型語言模型的開發(fā)和部署。

NVIDIA NeMo Megatron以Megatron項目為基礎，Megatron是一個由英偉達研究人員領導的開源項目，旨在大規(guī)模研究大型轉換器語言模型的高效訓練。

該框架使用數據處理庫自動處理LLM復雜訓練，可以獲取、管理、組織和清理數據。它使用先進的數據、張量和管道并行化技術，使大型語言模型的訓練能夠高效地分布在數千個GPU上。

NVIDIA Triton推理服務器中的多GPU、多節(jié)點功能使LLM推理負載可以實時、跨多個GPU和節(jié)點進行擴展。

使用Triton推理服務器，Megatron 530B可以在兩個NVIDIA DGX系統(tǒng)上運行，將CPU服務器上的處理時間從一分鐘多縮短到0.5秒，從而實現(xiàn)在應用程序上快速、實時地部署大型語言模型。

Jetson AGX Orin：最小巧、最節(jié)能的「AI超算」

Jetson AGX Orin基于NVIDIA Ampere架構，保持與其前身 Jetson AGX Xavier的外形和引腳的兼容性，但處理能力擴大至6倍，每秒可提供200萬億次操作，它類似于支持GPU的服務器，但大小僅相當于人的手掌。

Jetson AGX Orin Arm Cortex-A78AE CPU，以及下一代深度學習和視覺加速器，搭載高速接口、更快的內存帶寬和多模式傳感器，具備處理多個并發(fā)AI應用管道的能力。

新的 Jetson 計算機可加速完整的 NVIDIA AI 軟件棧，使開發(fā)人員能夠部署最大、最復雜的模型，以解決自然語言理解、3D 感知、多傳感器融合等邊緣 AI 和機器人任務。

同時有消息稱，Drive Hyperion 8自動平臺現(xiàn)已準備投入生產車輛。

ONE MORE THING

GTC大會上，英偉達還宣布了2項新人工智能驅動軟件技術——Nvidia Drive Concierge 和 Drive Chauffeur。

Nvidia Drive Concierge 是一個AI助理，它結合了語音輔助、駕駛員監(jiān)控和自動停車技術。

然而，最酷的是它與 Nvidia Drive AV 自動駕駛技術的集成，提供按需代客泊車。

所以，當你說尋找停車位，它會為你自動停車。

Drive Concierge 可以執(zhí)行從簡單到復雜的自然語音命令，比如打電話預訂，并且根據每個乘客的聲音進行個性化設置，為每個乘客提供自己的虛擬助手。

來源：新智元、騰訊科技

參考資料：

https://www.nvidia.cn/gtc-global/keynote/

往期精彩文章

臺積電已向美國提交兩份機密文件，三星拒絕提供庫存及客戶信息

華為出售X86服務器業(yè)務，河南投資集團或已介入

傳ASML DUV光刻機交付受阻，中芯國際后續(xù)擴產計劃將受影響

讓手機也能有桌面級游戲體驗，業(yè)界首款RTLS 4級光線追蹤GPU來了！

5nm/2個X1超大核/20核G78/edgeTPU！谷歌Tensor處理器詳解：三星成幕后大贏家！

IGBT6.0年底推出！比亞迪半導體：明年國內新能源汽車銷量將突破600萬輛

聞泰科技拿到Macbook訂單是假消息？相關知情人士：純屬“野雞機構”的臆測！

終端節(jié)點已突破2.8億個！LoRa將拿下50%的LPWAN物聯(lián)網市場？

美國要求臺積電等晶圓廠上交的究竟有哪些機密資料？

張忠謀：英特爾CEO基辛格是個人才，但美國半導體本地制造不會成功！

占據90%光刻機市場！狂奔中的ASML，依然看不到任何對手

行業(yè)交流、合作請加微信：icsmart01
芯智訊官方交流群：221807116

NVIDIA發(fā)布交互式人工智能化身技術平臺Avatar，全面擁抱元宇宙