Cosmos模型可以接受文本、圖像或視頻的提示，生成虛擬世界狀態(tài)，并針對(duì)自動(dòng)駕駛和機(jī)器人應(yīng)用實(shí)現(xiàn)內(nèi)容的生成。為增進(jìn)大家對(duì)Cosmos的認(rèn)識(shí)，本文將對(duì)Cosmos、Cosmos與機(jī)器人、自動(dòng)駕駛的關(guān)系予以介紹。如果你對(duì)Cosmos具有興趣，不妨繼續(xù)往下閱讀哦。

一、英偉達(dá)Cosmos

在2025年消費(fèi)電子展（CES）上，NVIDIA 發(fā)布了全新的 Cosmos 平臺(tái)，該平臺(tái)旨在加速物理人工智能(AI)系統(tǒng)的開(kāi)發(fā)，尤其是自主駕駛車(chē)輛和機(jī)器人。Cosmos 平臺(tái)集成了生成式世界基礎(chǔ)模型(WFM)、視頻標(biāo)記器、安全防護(hù)機(jī)制以及一個(gè)加速的數(shù)據(jù)處理管道，這些功能幫助開(kāi)發(fā)者在減少對(duì)真實(shí)世界數(shù)據(jù)依賴(lài)的情況下創(chuàng)建和優(yōu)化 AI 模型。

英偉達(dá)Cosmos 平臺(tái)將以開(kāi)放模型許可的形式在 Hugging Face 和 NVIDIA NGC 目錄中提供，后續(xù)將推出經(jīng)過(guò)優(yōu)化的 NVIDIA NIM 微服務(wù)，并通過(guò) NVIDIA AI 企業(yè)軟件平臺(tái)提供企業(yè)支持。

NVIDIA 首席執(zhí)行官黃仁勛在展會(huì)上表示:“機(jī)器人技術(shù)即將迎來(lái)像 ChatGPT 那樣的轉(zhuǎn)折時(shí)刻。與大型語(yǔ)言模型一樣，世界基礎(chǔ)模型是推動(dòng)機(jī)器人和自主駕駛車(chē)輛發(fā)展的核心，但并非所有開(kāi)發(fā)者都有能力和資源來(lái)訓(xùn)練自己的模型。我們創(chuàng)建 Cosmos 就是為了讓物理 AI 的開(kāi)發(fā)更加普及，讓每個(gè)開(kāi)發(fā)者都能接觸到通用機(jī)器人技術(shù)。”

Cosmos 模型可以根據(jù)文本、圖像和傳感器數(shù)據(jù)生成基于物理的高清視頻，使其適用于視頻搜索、合成數(shù)據(jù)生成和強(qiáng)化學(xué)習(xí)等應(yīng)用。開(kāi)發(fā)者能夠定制模型以模擬工業(yè)環(huán)境、駕駛場(chǎng)景以及其他特定用例。此外，NVIDIA 還推出了 NeMo Curator，這是一個(gè)加速視頻處理管道，能夠在14天內(nèi)處理2000萬(wàn)小時(shí)的視頻數(shù)據(jù)，以及 Cosmos Tokeniser，這是一個(gè)視覺(jué)數(shù)據(jù)壓縮工具。

Agility Robotics 的首席技術(shù)官 Pras Velagapudi 指出:“數(shù)據(jù)稀缺性和變異性是機(jī)器人環(huán)境成功學(xué)習(xí)的關(guān)鍵挑戰(zhàn)。Cosmos 的文本、圖像和視頻到世界的能力使我們能夠生成和增強(qiáng)各種任務(wù)的場(chǎng)景，從而在不需要過(guò)多昂貴的真實(shí)數(shù)據(jù)捕獲的情況下訓(xùn)練模型?！?

二、英偉達(dá)Cosmos 推動(dòng)機(jī)器人、自動(dòng)駕駛汽車(chē)應(yīng)用

Cosmos 世界基礎(chǔ)模型可以實(shí)現(xiàn)合成數(shù)據(jù)生成，以增強(qiáng)訓(xùn)練數(shù)據(jù)集，在物理 AI 模型部署到現(xiàn)實(shí)世界之前進(jìn)行仿真測(cè)試和調(diào)試，以及在虛擬環(huán)境中進(jìn)行強(qiáng)化學(xué)習(xí)以加速 AI 智能體學(xué)習(xí)。

開(kāi)發(fā)者可以通過(guò)使用 NVIDIA Omniverse 組合的 3D 場(chǎng)景來(lái)調(diào)節(jié) Cosmos ，從而生成大量可控的基于物理學(xué)的合成數(shù)據(jù)。

Waabi 是一家從自動(dòng)駕駛汽車(chē)開(kāi)始致力于開(kāi)發(fā)物理世界生成式 AI 的先驅(qū)。該公司正在評(píng)估 Cosmos 在自動(dòng)駕駛汽車(chē)軟件開(kāi)發(fā)和仿真中視頻數(shù)據(jù)搜索與整理的應(yīng)用。這將進(jìn)一步加速該公司安全方面行業(yè)領(lǐng)先的方法，該方法以 Waabi World 為基礎(chǔ)。Waabi World 是一種生成式 AI 仿真器，能夠以與現(xiàn)實(shí)世界中發(fā)生的情況相同的水平，創(chuàng)建出車(chē)輛可能遇到的情況。

在機(jī)器人開(kāi)發(fā)中，世界基礎(chǔ)模型可以生成合成虛擬環(huán)境或世界，為機(jī)器人學(xué)習(xí)提供更具性?xún)r(jià)比、更高效和更受控的空間。AI 機(jī)器人初創(chuàng)公司 Hillbot 正在利用 Cosmos 生成萬(wàn)億字節(jié)級(jí)的高保真 3D 環(huán)境，以提升數(shù)據(jù)工作流。這種 AI 生成數(shù)據(jù)將幫助公司完善其機(jī)器人培訓(xùn)和操作，實(shí)現(xiàn)更快、更高效的機(jī)器人技能和提高工業(yè)和家庭任務(wù)表現(xiàn)。

無(wú)論工業(yè)或家庭應(yīng)用，開(kāi)發(fā)者都可以使用 NVIDIA Omniverse 和 Cosmos 作為多元宇宙仿真引擎，允許物理 AI 策略模型模擬執(zhí)行特定任務(wù)的每一個(gè)可能的未來(lái)路徑，從而有助于模型選擇最佳路徑。

數(shù)據(jù)管理和 Cosmos 模型的訓(xùn)練依賴(lài)于數(shù)千個(gè) NVIDIA GPU，通過(guò)高性能、完全托管的 AI 平臺(tái) NVIDIA DGX Cloud，在每個(gè)領(lǐng)先的云端提供加速計(jì)算集群。

采用 Cosmos 的開(kāi)發(fā)者可以使用 DGX Cloud 進(jìn)行 Cosmos 模型的簡(jiǎn)單部署，并通過(guò) NVIDIA AI Enterprise 軟件平臺(tái)提供進(jìn)一步的支持。

以上便是此次帶來(lái)的英偉達(dá)Cosmos相關(guān)內(nèi)容，通過(guò)本文，希望大家對(duì)英偉達(dá)Cosmos已經(jīng)具備一定的了解。如果你喜歡本文，不妨持續(xù)關(guān)注我們網(wǎng)站哦，將于后期帶來(lái)更多精彩內(nèi)容。最后，十分感謝大家的閱讀，have a nice day!