英偉達(dá)近日正式推出了Cosmos平臺(tái),這一創(chuàng)新舉措旨在為自動(dòng)駕駛汽車和機(jī)器人等物理AI系統(tǒng)的開(kāi)發(fā)提供強(qiáng)有力的支持。該平臺(tái)融合了生成式世界基礎(chǔ)模型(WFMs)、先進(jìn)分詞器、安全保護(hù)機(jī)制以及高效的視頻處理流程。
據(jù)英偉達(dá)介紹,開(kāi)發(fā)物理AI模型歷來(lái)成本高昂,且需依賴大量真實(shí)世界的數(shù)據(jù)和反復(fù)測(cè)試。Cosmos平臺(tái)中的世界基礎(chǔ)模型(WFM)為開(kāi)發(fā)者開(kāi)辟了一條新路徑,通過(guò)生成大量基于物理特性的逼真合成數(shù)據(jù),簡(jiǎn)化模型訓(xùn)練和評(píng)估過(guò)程。開(kāi)發(fā)者還可以對(duì)Cosmos WFM進(jìn)行微調(diào),以構(gòu)建符合自身需求的定制模型。
目前,Cosmos平臺(tái)的模型已經(jīng)開(kāi)放許可,開(kāi)發(fā)者可以在NVIDIA API目錄中預(yù)覽首批模型,同時(shí)也可從NVIDIA NGC?目錄或Hugging Face平臺(tái)下載模型系列和微調(diào)框架。這一舉措無(wú)疑將極大地促進(jìn)AI模型的開(kāi)發(fā)效率和靈活性。
英偉達(dá)還宣布,多家企業(yè)已成為Cosmos平臺(tái)的首批用戶,包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi、XPENG以及拼車巨頭Uber等。這些企業(yè)的加入,將進(jìn)一步推動(dòng)Cosmos平臺(tái)在實(shí)際應(yīng)用中的驗(yàn)證與優(yōu)化。
Cosmos平臺(tái)的應(yīng)用場(chǎng)景廣泛,其中包括視頻搜索和理解、生成合成數(shù)據(jù)、模型開(kāi)發(fā)和評(píng)估以及預(yù)測(cè)和多宇宙模擬等。例如,在視頻搜索和理解方面,Cosmos平臺(tái)可以輕松幫助用戶查找特定訓(xùn)練場(chǎng)景,如雪地路況或倉(cāng)庫(kù)擁堵情況。在生成合成數(shù)據(jù)方面,基于物理學(xué)的逼真視頻數(shù)據(jù)生成,將為模型訓(xùn)練提供更加豐富和真實(shí)的素材。Cosmos平臺(tái)還支持模型的開(kāi)發(fā)和評(píng)估,以及通過(guò)多宇宙模擬預(yù)測(cè)所有可能的未來(lái)結(jié)果,從而幫助AI模型選擇最佳路徑。
隨著Cosmos平臺(tái)的推出,英偉達(dá)再次展示了其在AI領(lǐng)域的領(lǐng)導(dǎo)地位和技術(shù)創(chuàng)新實(shí)力。這一平臺(tái)不僅為開(kāi)發(fā)者提供了便捷高效的工具,也為自動(dòng)駕駛汽車和機(jī)器人等物理AI系統(tǒng)的未來(lái)發(fā)展奠定了堅(jiān)實(shí)基礎(chǔ)。