
芯東西(公眾號:aichip001)
作者 | ?ZeR0
編輯 | ?漠影
芯東西5月19日報道,今日,英偉達創始人兼CEO黃仁勛發表臺北國際電腦展COMPUTEX 2025開幕演講,公布了英偉達制造過的“最大產品之一”——中國臺灣新辦公大樓NVIDIA Constellation,設(she)在臺北的北投(tou)士林。
英偉達還宣布(bu)與鴻海、中(zhong)國臺(tai)(tai)灣科技委(wei)員(yuan)會、臺(tai)(tai)積(ji)電聯合打造AI基礎設施,為中(zhong)國臺(tai)(tai)灣AI生態(tai)系統提供(gong)支持。
英偉(wei)達(da)與富士(shi)康(kang)鴻海(hai)科(ke)技集團合作打造一臺巨(ju)型AI超級(ji)計算(suan)機(ji),將(jiang)采用英偉(wei)達(da)GB300 NVL72機(ji)架(jia)式解決方案,搭載10000張英偉(wei)達(da)Blackwell GPU。
臺灣科(ke)技委員(yuan)會將利用AI超算,為(wei)中國臺灣科(ke)技生(sheng)態系統提供AI云計(ji)算資源。臺積電(dian)研(yan)究人員(yuan)計(ji)劃(hua)利用該(gai)系統推進其研(yan)發,性能(neng)比上一代系統將提高幾(ji)個數(shu)量(liang)級。
大(da)型AI基礎設(she)施建設(she),是(shi)今日演(yan)講的重頭戲。
黃(huang)仁勛(xun)穿著(zhu)標志性的黑皮衣(yi),一路小跑上臺,說(shuo)今(jin)天他的爸爸媽(ma)媽(ma)也在(zai)觀眾席(xi)。
一(yi)大重磅(bang)發布是NVLink Fusion半(ban)定(ding)制AI基礎(chu)設(she)施,向外部芯片(pian)敞開了允許接入英偉達(da)NVLink機架式(shi)系統的(de)大門。這意味著構建AI系統,不必全用英偉達(da)的(de)芯片(pian)產品(pin),而是可以搭配(pei)使(shi)用其他企業的(de)定(ding)制CPU和AI芯片(pian)。
富士通(tong)、高通(tong)都是其定(ding)制CPU合作伙伴。今日,高通(tong)宣布(bu)將(jiang)開發定(ding)制數(shu)據中心CPU,可接入(ru)英偉達機架式(shi)架構,實現與英偉達GPU的(de)快速(su)通(tong)信(xin)。
黃仁勛(xun)還曬出美國AI數據中心項目“星(xing)際之門”的(de)進(jin)展(zhan):超(chao)過4萬平方米,可擴展(zhan)至1.2GW。“買得(de)越多,做到得(de)越多!”黃仁勛(xun)說,這就是構建AI工廠的(de)原(yuan)因。
總體而言,黃(huang)仁(ren)勛重點(dian)分享了在AI工(gong)廠、AI agents、機器(qi)人技術等方面的最新(xin)進展。
他回顧了英偉達(da)從(cong)GPU芯片到(dao)的(de)AI基(ji)礎設施轉(zhuan)型歷程:2006年(nian)介(jie)紹CUDA并(bing)行(xing)計(ji)算軟件平臺和編程模型;2016年(nian)推(tui)出DGX-1超級計(ji)算機(ji),被贈予首臺DGX-1的(de)非營利性(xing)公司OpenAI開啟了AI新革(ge)命;2019年(nian)/2020年(nian)收(shou)購(gou)Mellanox,將整(zheng)個數據中心轉(zhuan)換成一個計(ji)算單(dan)元。
“十(shi)年后回頭看(kan),你會看(kan)見AI融入一切。”黃仁(ren)勛說(shuo),就像互聯(lian)網,就像生產(chan)電(dian)力需要工廠(chang),AI需要生成tokens的AI工廠(chang)。他預言AI基礎設施產(chan)業的市場規(gui)模將(jiang)達到數(shu)萬億美元。
加(jia)(jia)速(su)計算(suan)始于(yu)CUDA-X GPU加(jia)(jia)速(su)庫,覆蓋、計算(suan)光(guang)刻、計算(suan)輔助工程、決(jue)策優化、數據科學(xue)與處理、深度學(xue)習(xi)、量子計算(suan)、天氣分析、醫藥影像等(deng)。這些(xie)庫讓開發者(zhe)更易利(li)用CUDA的功能并從英(ying)偉達平臺獲得(de)高性能,從而(er)加(jia)(jia)速(su)應(ying)用。
臺積電、Cadence 、KLA、西門子、新思科(ke)技正在采用英偉達CUDA-X和(he)Blackwell平臺推動(dong)芯片設計和(he)制造的發(fa)展。
GeForce改(gai)變(bian)了AI,AI又反過(guo)來(lai)改(gai)變(bian)GeForce。英(ying)偉達(da)Grace Blackwell由臺積電(dian)代工生產,反過(guo)來(lai)臺積電(dian)將采用Grace Blackwell來(lai)推進(jin)芯片制造。
在(zai)電信行業,英偉(wei)達(da)與(yu)軟銀、T-Mobile、諾基(ji)亞(ya)、三星、富士通、思科等生態伙伴合(he)作(zuo),基(ji)于AI構建6G;在(zai)量子計(ji)算(suan)領域,英偉(wei)達(da)構建混合(he)量子-GPU計(ji)算(suan)。
代理(li)式(shi)AI(Agentic AI)基于(yu)“理(li)解-思(si)考-行動”循(xun)環,所需的(de)(de)計算量是(shi)單范(fan)例(li)提(ti)示(shi)(One-Shot)的(de)(de)100倍(bei)~1000倍(bei)。物(wu)理(li)AI是(shi)理(li)解世界的(de)(de)AI,機器(qi)人革命的(de)(de)基石(shi)。通用機器(qi)人將開啟(qi)下一(yi)個萬億美(mei)元產業。
一、GB200全面投產,GB300今秋上市,詳解Blackwell芯片生產全流程
Grace Blackwell NVL72是一個集成了36張英(ying)偉達Grace CPU和72張Blackwell GPU的機架級(ji)系統,用于加(jia)速(su)AI訓練和推(tui)理。
它展(zhan)示了英偉(wei)達縱向(xiang)擴(kuo)展(zhan)(Scale up)的(de)能力,相當(dang)于“一顆巨型GPU”。
橫向擴展(Scale out)是指將計(ji)(ji)算(suan)機連在一起(qi)。黃(huang)仁勛說(shuo),Scale out很簡(jian)單(dan),Scale up很難(nan)。構(gou)建更大的計(ji)(ji)算(suan)機超(chao)出半導體物(wu)理學(xue)的極(ji)限,而Grace Blackwell做到了。
GB200系統已全面投產。相同的體系結構、物理占用空間、電氣機械條件,將于今年第三季度可升級成GB300 Grace Blackwell芯片。
相比GB200,GB300的AI推理(li)性能提高到1.5倍(bei),還實(shi)現了1.5倍(bei)的HBM和2倍(bei)的網絡互(hu)連速率。
新系統(tong)一個節點的性(xing)能(neng),就能(neng)匹(pi)敵2018年(nian)的整(zheng)臺Sierra超級計算機(ji)(有18000張GPU),也就是(shi)6年(nian)內(nei)將性(xing)能(neng)提高4000倍。
Blackwell不僅是一個(ge)科(ke)技(ji)(ji)、工程奇跡,更是中國臺(tai)灣科(ke)技(ji)(ji)生態系(xi)統(tong)卓越(yue)成就的證(zheng)明。從晶圓上蝕刻第(di)一個(ge)晶體管,到銷(xiao)緊(jin)Blackwell機架的最后(hou)一顆螺絲(si),每個(ge)步驟(zou)都承載著合(he)作伙伴的貢獻。
它(ta)最(zui)初是臺積電的(de)一片空白硅晶圓,在一片12英寸晶圓上(shang),經(jing)歷數(shu)百(bai)道的(de)晶圓處理和(he)紫外(wai)光微影步(bu)驟(zou),逐層構建2000億顆晶體管(guan),晶圓被劃線切割成個別的(de)Blackwell裸晶粒(die)。經(jing)過測(ce)試和(he)分類,良(liang)品晶粒被挑選出來(lai),進入后續制程。
在臺積電、矽品(pin)與(yu)艾克爾執行的CoWoS封(feng)裝中,32顆Blackwell晶粒與(yu)128組HBM堆(dui)(dui)疊,被接(jie)合在一片定制化(hua)硅中介層晶圓上。蝕刻在其中的金屬(shu)互連(lian)線,將Blackwell GPU與(yu)HBM堆(dui)(dui)疊連(lian)接(jie)到每個SIP單元中,最后加熱(re)、模塑并固化(hua),形成Blackwell B200超級芯片。
在京元電子,每顆Blackwell芯片都會在125攝氏度(du)的烤箱中,進行數小(xiao)時(shi)壓力測試。在鴻海,機器夜以繼日(ri)地(di)將(jiang)超過(guo)1萬個零部件精準(zhun)地(di)放(fang)置(zhi)在Grace Blackwell PCB上(shang)。
同(tong)時,全球各地(di)工廠也在(zai)準備其他零部件。酷(ku)碼、奇(qi)鋐、雙鴻、臺積電提供(gong)的定(ding)制化液冷銅(tong)制散熱(re)器讓(rang)芯片保(bao)持最佳(jia)溫度。
在另一(yi)件鴻海廠房制(zhi)造的ConnectX-7 SuperNIC用來實現橫向擴展的通(tong)信能力。加(jia)上BlueField-3 DPU來卸(xie)載并(bing)加(jia)速(su)網絡、存儲等工作。
這些零部件精(jing)心得整(zheng)合進(jin)GB200運(yun)算托盤(pan)。
英偉達NVLink是一(yi)項突破性高(gao)速互(hu)連技術,可(ke)連接多個GPU,擴展成(cheng)一(yi)個巨(ju)大(da)的虛擬GPU。NVLink交(jiao)換機托盤由NVLink交(jiao)換芯片構成(cheng),提供(gong)14.4TB/s的全互(hu)連帶寬。
NVLink主干形(xing)成了(le)(le)一(yi)個定制化(hua)的(de)盲插背板(ban),整(zheng)合了(le)(le)5000條(tiao)銅纜,提供130TB/s的(de)全互連帶寬(kuan),這將所(suo)有72張Blackwell芯片(pian)(144顆(ke)GPU晶粒),連成了(le)(le)一(yi)個巨大的(de)GPU。
從世(shi)界(jie)各地來的(de)組(zu)件(jian)運(yun)抵鴻海、緯創、廣達、戴爾、華碩、技(ji)嘉、慧與、美超微及其他合作伙伴手中,由技(ji)術人員(yuan)組(zu)裝成機架級規模的(de)AI超級計(ji)算機GB200 NVL72,總計(ji)有120萬個(ge)零部(bu)件(jian)、130萬億顆晶體管,重量高達1800公斤。
二、英偉達敞開生態大門,能與定制CPU、AI芯片混搭!助攻靈活構建AI工廠
英偉達一直致力(li)于(yu)開發全棧集成(cheng)解決方案,并將其技術作為模(mo)塊化產品提(ti)供給客戶(hu)及合(he)作伙伴(ban),以便(bian)靈(ling)活構建。其NVL72機(ji)架(jia)級系統幾乎(hu)部署在全球(qiu)所有主要的超大規模(mo)AI工(gong)廠中。
今日,英偉達發布半定制AI基礎設施NVLink Fusion。
NVLink Fusion擁有世界一(yi)流的AI性(xing)能(neng)、經工(gong)業驗證的縱向和(he)橫(heng)向擴展生(sheng)態系統,以及單一(yi)可擴展AI工(gong)廠架(jia)構,支(zhi)持英(ying)偉達芯(xin)片與(yu)其他(ta)定(ding)制芯(xin)片混搭(da),能(neng)加快AI工(gong)廠上市(shi)時間,供超大規模企業采用和(he)管理(li)。
該AI基礎設施有兩種配(pei)置:一種是通(tong)過NVLink C2C,將(jiang)定制(zhi)(zhi)CPU與(yu)英偉達(da)(da)GPU結合到NVLink機架(jia)級架(jia)構中;另一種是將(jiang)英偉達(da)(da)Grace CPU與(yu)定制(zhi)(zhi)AI計(ji)算加速(su)器結合。
其定制芯片合作伙伴包括AIchip、Astera Labs、Marvell、聯發科,CPU合作伙伴包括富士通、高通,技術合作伙伴包括Cadence和新思科技。
云提供(gong)商(shang)可使用任何ASIC、英(ying)偉達的機架式系統和英(ying)偉達端到端網絡平臺,將(jiang)AI工廠擴展(zhan)至數(shu)百萬張GPU。該網絡平臺提供(gong)高達800Gb/s的吞(tun)吐(tu)量,并將(jiang)提供(gong)共封裝光學器件。
三、Blackwell全家桶添新:個人AI超算、AI筆電、AI服務器
英(ying)偉達(da)Blackwell產品組合涵蓋從(cong)桌面到AI工廠,有面向(xiang)Arm平臺(tai)的個(ge)人AI平臺(tai)DGX Spark、數據中(zhong)心解(jie)決方(fang)案(an)GB200/GB300 NVL72,也有針對x86平臺(tai)的RTX PRO筆記本電腦(nao)、企業數據中(zhong)心解(jie)決方(fang)案(an)RTX PRO Blackwell服(fu)務器(qi)以及先進(jin)的AI存(cun)儲服(fu)務器(qi)解(jie)決方(fang)案(an)。
今日,英偉達Blackwell家族(zu)增加新成員,包括DGX Spark和(he)DGX Station個人AI超級計算機、RTX PRO筆記本(ben)電腦、RTX PRO Blackwell服(fu)務器(qi)。
1、桌面級AI超算DGX Spark和DGX Station
DGX Spark個人AI超級計算機今夏就會上市。它是全球最小AI超級計算機,采用GB10 Grace Blackwell超級芯片、128GB統一系統內存、ConnectX-7 SmartNIC,AI算力達到1PFLOPS。
黃(huang)仁勛舉起2016年推出的DGX-1超級計算機(圖左)與DGX Spark(圖右)作對比(bi),可見(jian)DGX Spark有多輕巧。
宏碁、華(hua)碩(shuo)、戴爾、技嘉(jia)、惠普、聯想、微星(xing)等(deng)OEM合(he)作伙伴將推出DGX Spark。
DGX Station是針對更嚴苛AI工作負載設計的桌面AI超級計算機,本地能跑1萬億參數模型,可提供數據中心級性(xing)能。
它搭載GB300 Grace Blackwell Ultra超級芯片、784GB統一系統內存、網絡速度多達800Gb/s的ConnectX-8 SuperNIC,AI性能達到20PFLOPS。
華碩(shuo)、戴爾、技嘉、惠(hui)普(pu)和微(wei)星等將在今年晚些(xie)時候推出DGX Station。
2、RTX PRO筆記本電腦
英偉達RTX PRO筆記本電腦搭載24GB GDDR7內存、2倍快的內存,AI性能達到1.8PFLOPS,今年5月上市。
英(ying)偉達專業GPU一直是企業工作站部(bu)署的首(shou)選解決方案(an)。RTX技術(shu)結合AI、實(shi)時光線追(zhui)蹤、高級(ji)圖形和計(ji)(ji)算,改變了(le)桌面計(ji)(ji)算。
英偉達正在更新RTX PRO GPU陣(zhen)容,覆蓋RTX PRO 5000、4000、3000、2000、1000、500系列筆(bi)記(ji)本電腦(nao)GPU,搭載這些(xie)GPU的筆(bi)記(ji)本電腦(nao)將于今年(nian)夏天從OEM合(he)作伙伴處(chu)提(ti)供。
3、RTX PRO Blackwell服務器
英偉達RTX PRO Blackwell服務器是面向(xiang)企(qi)業(ye)AI和工業(ye)AI的計算平臺,擴展了Blackwell的性能(neng)和能(neng)源效率,可(ke)(ke)加速代理式(shi)AI、物理AI、模擬(ni)仿真、視覺(jue)計算、設(she)計、數(shu)字孿生等各種企(qi)業(ye)工作(zuo)負載,支持使用英(ying)偉達藍圖構建(jian)的AI agents和生成式(shi)AI應用,即(ji)日可(ke)(ke)訂購。
這些新服務器將提供多種NVIDIA認證系統配置,針對英偉達AI軟件棧、Spectrum-X以太網網絡進行了優化,最多科支持8張RTX PRO 6000 Blackwell服務器版GPU,FP4 AI性能可達30PFLOPS,3PFLOPS RTX圖(tu)形(xing)性能可支(zhi)持大(da)規模實時Omniverse數字(zi)孿生模擬和工業機(ji)器人等(deng)物理AI應用。
相比H100 HGX服務器,Blackwell服務器運行DeepSeek-R1的性能達到4倍。
四、助攻企業更快開發AI agents,挖掘數據知識,提高團隊生產力
英偉達企業AI平臺正在加(jia)速全球IT一萬億美元投資(zi)。該平臺包含(han)三層(ceng):AI基礎設施(shi)、AIOps、代(dai)理式(shi)AI。
在企業AI工廠(chang)基礎設施上部署AI agents的(de)開發人員可利用(yong)Dataiku、DataRobot、Dynatrace、JFrog等合作伙(huo)伴AIOps工具(ju)來構建、編(bian)排、運營和(he)擴展AI工作流。
該設計還支(zhi)持來自CrewAI的框架,以及來自DataStax和(he)Elastic的向量數據庫,以幫助agents存(cun)儲、搜索(suo)和(he)檢索(suo)數據。
借助(zhu)來(lai)自Arize AI、Galileo、SuperAnnotate、Unstructured、Weights & Biases等(deng)合作伙(huo)(huo)伴(ban)的工具(ju),開發人員可進行(xing)數(shu)據標(biao)記、合成(cheng)數(shu)據生成(cheng)、模型評估和(he)實驗跟(gen)蹤。ActiveFence、CrowdStrike、Fiddler、Securiti、Trend Micro等(deng)安全合作伙(huo)(huo)伴(ban)的軟(ruan)件可保護AI工廠。
Canonical、Nutanix、Red Hat、VMware等(deng)編排(pai)和(he)(he)部署合作(zuo)(zuo)伙伴支(zhi)持在復雜的企業環境中(zhong)無縫(feng)擴(kuo)展和(he)(he)管(guan)理AI agents工作(zuo)(zuo)負(fu)載。
代理式(shi)AI改變了企(qi)業(ye)用數據做(zuo)決策的(de)方式(shi)。比如,VAST僅用3天就(jiu)利用英偉達AI-Q藍圖與自身的(de)加速AI數據平(ping)臺(tai),打造出銷售研究AI agent,通過NeMo Retriever,該平(ping)臺(tai)持續提取、嵌入和索(suo)引數據資料,讓(rang)語義(yi)搜索(suo)更快。
過去需要(yao)幾天才能擬(ni)定的銷售(shou)計劃(hua)(hua),現(xian)在(zai)只需一個(ge)AI提示詞(ci)。AI agent會(hui)擬(ni)定一個(ge)銷售(shou)大(da)綱(gang),接著使用CRM系統、多模(mo)態(tai)知識庫和(he)內部(bu)工(gong)具等資料(liao),最后用Llama Nemotron將大(da)綱(gang)轉為逐步銷售(shou)計劃(hua)(hua)。
英偉達推出經過英偉達企業AI工廠驗證的新設計和英偉達AI藍圖,使企(qi)業能夠構建(jian)智能、適應性強的AI Agents,從而提(ti)高團隊生產力(li)。
新(xin)AI藍圖可(ke)幫助開發人員(yuan)構建(jian)能說話(hua)、研究和學習的(de)智能AI隊(dui)友,通過(guo)理解(jie)自然通信和直接訪問企業數據,創建(jian)符合業務目標的(de)agents,以(yi)提高(gao)員(yuan)工工作效(xiao)率。
全球領先存儲系統制造商正推出基于英偉達AI數據平臺的(de)產品和解決方案,來支持AI agents。英偉(wei)達AI數據平臺使(shi)用檢(jian)索增強(qiang)生成和NeMo檢(jian)索微服(fu)務(wu)來訪(fang)問企(qi)業數據,能夠為AI agents提供近(jin)乎實時的(de)業務(wu)洞(dong)察(cha)。
使用這些解決方案構建(jian)代理式AI基(ji)礎(chu)設施,可直接(jie)訪問企業中許(xu)多存儲設備中的(de)非結構化數據,幫助企業使用檢索增強生成(RAG)軟件將數據轉化為可操(cao)作(zuo)的(de)知識,為AI agents提(ti)供更快更準確的(de)響應。
存儲(chu)提供(gong)商可將(jiang)他們的文檔安(an)全和訪問(wen)控制專業知(zhi)識集成(cheng)到內容(rong)索(suo)引和檢索(suo)過程中,從(cong)而提高(gao)AI推理的安(an)全性(xing)和數(shu)據隱私(si)合規性(xing)。
五、加速人形機器人開發:開源基礎模型,擴充合成運動數據集
AI agents本(ben)質上是數字機器人(ren)。英偉(wei)達還(huan)想制造(zao)物理機器人(ren)。
機(ji)器(qi)人要在(zai)虛(xu)擬世界中學(xue)習如(ru)何成為一個好的(de)機(ji)器(qi)人,虛(xu)擬世界必須遵(zun)循(xun)真實世界的(de)物理(li)定律。英偉達與谷(gu)歌DeepMind、迪(di)士尼研究院合作研發(fa)了世界上最先(xian)進的(de)物理(li)引擎Newton,將于7月開源。
物(wu)理AI是下一波AI浪潮。英(ying)偉(wei)達構建了機(ji)器(qi)人行業所需的3臺(tai)計算機(ji):
(1)DGX,用Omniverse來訓練AI模型;
(2)RTX PRO Blackwell服務器和(he)RTX PRO 6000工作站,用于模擬仿真(zhen)與合成數據生成;
(3)Jetson AGX,用于(yu)機器人(ren)運行時。
英偉達已構(gou)建(jian)全(quan)棧軟硬件(jian),包括在(zai)這些計算機上運行(xing)的(de)基(ji)礎模型、仿真框架和(he)數據(ju)管(guan)道(dao),以供開發人員(yuan)加速工作流(liu)程。
人形機器人是增長最快的機器人領域之一。英偉達打造了開放式人形機器人開發平臺Isaac GR00T。這是面向物理(li)AI合成數據(ju)生(sheng)成、預訓練和推理(li)的新(xin)AI基(ji)礎設施。
該平臺包括兩項重要發布:Isaac GR00T N1.5基礎模型和Isaac GR00T-Dreams合成數據生成藍圖。
Isaac Groot N1.5是英偉達開放、通用(yong)、完全可定(ding)制的人型機器人基礎模(mo)型的首(shou)次(ci)更(geng)新,它能(neng)夠更(geng)好地(di)適(shi)應新的環境和(he)工作空間配置,并(bing)在給定(ding)指令時更(geng)好地(di)識別物體,提高拾取(qu)和(he)放置任務(wu)的成功(gong)率。
此前該模型(xing)已被下載6000次(ci),獲得(de)3.6K星。新的N1.5模型(xing)將于(yu)6月9日開源。
開發者可(ke)以為特定(ding)機(ji)器人品牌發布訓練模(mo)型(xing),并使用英偉達Isaac GR00T-Dreams藍圖生成的合成數據訓練Isaac Groot N1.5。
機(ji)器人制造商面臨的主(zhu)要(yao)挑戰是(shi)缺(que)乏大規(gui)模(mo)、真(zhen)實(shi)和合成數(shu)據(ju)來訓練模(mo)型(xing)。機(ji)器人從真(zhen)實(shi)世界的數(shu)據(ju)中(zhong)學習,人工示(shi)范無法大規(gui)模(mo)推(tui)行,這既昂貴又耗時。開發(fa)者(zhe)可(ke)使用英偉達Cosmos物理AI世界基礎模(mo)型(xing)來擴增數(shu)據(ju)。
英偉達研究團隊使用Isaac GR00T-Dreams藍圖生成合成數據,僅用36小時就選練出Isaac Groot N1.5。而如果不用這個藍圖,手動收集這些數據需要花費近3個月。
Isaac GR00T-Dreams是(shi)一個基于英偉達Cosmos構建的(de)藍圖,用(yong)于生成(cheng)大規模合成(cheng)軌跡數據(ju)(ju),是(shi)一種真實(shi)(shi)到(dao)真實(shi)(shi)的(de)數據(ju)(ju)工作流程。這些生成(cheng)數據(ju)(ju)可以被用(yong)來教(jiao)機器(qi)人適應不斷變(bian)化的(de)環境,掌握(wo)新的(de)行為。
首先,通過記錄單一(yi)環境(jing)中的(de)單一(yi)任務進行(xing)遠程操作的(de)人工演示,開發者可對Cosmos世界基礎模型進行(xing)微調。
然(ran)后,用圖像和新(xin)的(de)指令提示模(mo)型,以生成“夢境(Dream)”,即機器人(ren)在(zai)新(xin)環境中(zhong)執行新(xin)任務的(de)視頻,或者說是未來世界(jie)的(de)狀態。
一旦(dan)產生大量(liang)“夢境”,Cosmos就會推理并評估(gu)每個“夢境”的質量(liang),選擇最好的進行訓練。
這(zhe)些“夢境”仍然(ran)(ran)只是(shi)像素。機器人是(shi)從(cong)動(dong)作中學習的,GR00T-Dreams藍圖從(cong)3D“夢境”視頻片段,生成(cheng)3D的動(dong)作軌跡(ji),然(ran)(ran)后用它來訓練(lian)機器人模型。
GR00T-Dreams讓機器人能夠以少(shao)量的人工捕捉,學(xue)習大量各種新動(dong)作。
因此(ci),一個小(xiao)型的人類(lei)示范團(tuan)隊(dui),就能完成過去需(xu)要(yao)數(shu)千人才能完成的工作。這使得開發者在解決機(ji)器人挑戰方面又(you)邁(mai)進(jin)了一步。
最終,機器人可以正確拾取物品,比如(ru)讓它拿起(qi)蘋(pin)果(guo)或(huo)罐頭。
六、臺積電用Omniverse構建新晶圓廠,富士康用數字孿生訓練機器人
臺積電、富士康、緯創、和碩(shuo)、臺達、廣達、緯穎、技嘉等中(zhong)國(guo)臺灣領先的半導體和電子制(zhi)(zhi)造公司使(shi)用英偉達Omniverse,為制(zhi)(zhi)造過程的每一個步驟(zou)開發數字孿生。
他(ta)們正在建設晶圓(yuan)廠(chang)(chang)和AI工廠(chang)(chang)的數(shu)字孿生,以優化制造(zao)過程,這為(wei)他(ta)們節(jie)省了數(shu)百萬美(mei)元的成本(ben)。
例(li)如(ru),廣達、緯創、和(he)碩在(zai)實體動(dong)工前,先(xian)以(yi)虛擬方式規劃新廠房和(he)產(chan)線,并透(tou)過(guo)減少(shao)停(ting)機(ji)時間,節省(sheng)數百萬美元的成本。和(he)碩模擬錫膏點膠以(yi)減少(shao)生(sheng)產(chan)缺陷。
臺積(ji)電正在(zai)與(yu)一家AI驅動的(de)數字孿生(sheng)創企(qi)合(he)作(zuo),優化(hua)其新晶圓廠的(de)規劃與(yu)建(jian)設(she)。臺積(ji)電利用AI引擎和基(ji)于Omniverse庫構建(jian)的(de)應(ying)用程序,將傳(chuan)統的(de)2D CAD圖資轉化(hua)成(cheng)了整座晶圓廠的(de)豐富交互式3D布(bu)局,并在(zai)英偉達cuOpt平臺上開發AI工具,可(ke)模擬和優化(hua)跨多樓層的(de)復雜管線系統,進而節省數月時間(jian)。
臺積電也使用視覺語(yu)言模型(xing)(xing)和視覺基礎模型(xing)(xing)來改(gai)進自動缺陷(xian)分類工(gong)作流程(cheng),從(cong)而(er)提高對晶(jing)圓產品缺陷(xian)進行分類的效(xiao)率,幫(bang)助工(gong)程(cheng)師(shi)查明問題(ti)的潛在根源。
除了使(shi)用數字孿生(sheng)和視覺AI之外,臺積電(dian)還利用英偉達CUDA-X軟件(jian)庫(ku)和GPU來加速(su)其半(ban)導體芯片設計工(gong)作流(liu)程,從使(shi)用英偉達cuLitho進行光(guang)刻到半(ban)導體工(gong)藝(yi)模(mo)擬。
富(fu)士康臺(tai)灣工廠正依靠基(ji)于OpenUSD、西門子和Omniverse技術開(kai)發的Fii數字孿生平臺(tai)來設計和模擬機器人(ren)工作單元、裝配線和整個工廠布(bu)局(ju)。
此(ci)外(wai),富士康(kang)使用英偉達Isaac GR00T N1模(mo)型、用于生成合成操作動作的(de)Isaac GR00T-Mimic藍圖和(he)Isaac Lab來訓練工業機械臂和(he)人形(xing)機器人執行擰(ning)緊(jin)螺絲(si)、拾取和(he)放(fang)置、組裝、電纜插入等復(fu)雜(za)任務。
利用Omniverse藍(lan)圖的(de)AI工廠數字孿生,富士(shi)康(kang)可以(yi)在液冷POD中模擬和測試GB200 Grace Blackwell超(chao)級芯片,以(yi)復(fu)制AI工廠的(de)條件(jian)。
為了開發物理(li)AI機器人,多家公(gong)司利用數字孿生作為機器人訓練場,以開發、訓練、測試和模(mo)擬這(zhe)些機器人。
無論是機(ji)械臂、自主移動(dong)機(ji)器人、人形機(ji)器人還是視(shi)覺AI agents,都(dou)(dou)可以模(mo)擬任務執行,或以團隊方式(shi)進行多方協作,而且當(dang)通(tong)過物聯網連接到實體孿生時,每個數字孿生都(dou)(dou)會變成實時互動(dong)式(shi)儀表板。
和碩(shuo)借(jie)助英偉達Metropolis打造(zao)AI agents,以協作員工(gong)學習復(fu)雜技能。
Linker Vision和高(gao)雄市用數字孿(luan)生(sheng)來模擬各種(zhong)不(bu)可預測情境的(de)影(ying)響,并打造管理城(cheng)市里(li)影(ying)像串流系(xi)統的(de)AI agents,以(yi)發送即時通知給第一線應變人員(yuan)。
結語:全力投身AI基建,英偉達再擴生態影響力
短短幾年,英偉達(da)已(yi)發展(zhan)成(cheng)為(wei)一(yi)家市(shi)值3萬億美元的公(gong)司。當前英偉達(da)正全力(li)投入AI基礎設施建設,積(ji)極布局下一(yi)波企業AI、工業AI、物(wu)理AI以及AI4Science浪潮,為(wei)下一(yi)代AI研(yan)發提供(gong)各(ge)類硬件(jian)設備及軟(ruan)件(jian)。
英(ying)偉(wei)(wei)達將從AI到機器人的基(ji)礎設施各(ge)階段拆解,形成靈活(huo)、模塊化的產品矩陣(zhen)。隨(sui)著定制(zhi)AI芯片陣(zhen)營日趨壯(zhuang)大,英(ying)偉(wei)(wei)達又適時推出半定制(zhi)AI基(ji)礎設施NVLink Fusion,敞開(kai)生態大門(men),此(ci)舉有望幫助英(ying)偉(wei)(wei)達進一步擴大其數據中心(xin)生態及市場影(ying)響力。