4月12日，蔚來宣布NOMI GPT正式開啟推送。此次推送的更新是基于全新技術(shù)架構(gòu)，為NOMI量身打造NOMI GPT端云多模態(tài)大模型。NOMI GPT包含自研多模態(tài)感知、自研認(rèn)知中樞、情感引擎、多專家Agent，實(shí)現(xiàn)蔚來產(chǎn)品、服務(wù)、社區(qū)的全域貫通，提供更高效、愉悅的AI服務(wù)。

升級(jí)NOMI GPT功能后，用戶可以體驗(yàn)到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場景生成在內(nèi)的多項(xiàng)全新交互體驗(yàn)，享受智能AI賦能下的全新出行。此次NOMI GPT上線將同步陸續(xù)推送給搭載Banyan·榕智能系統(tǒng)的車型。自發(fā)布以來，NOMI 已經(jīng)歷超過130次版本迭代、超2000項(xiàng)功能的新增及更新。

NOMI GPT認(rèn)知中樞、行業(yè)獨(dú)有的情感引擎和行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知是NOMI煥新升級(jí)后的的三大核心技術(shù)架構(gòu)，配合數(shù)十億級(jí)的參數(shù)模型、毫秒級(jí)的響應(yīng)速度，賦予了NOMI在感知、認(rèn)知、決策等方面強(qiáng)大的復(fù)雜邏輯推理能力，具備了能與用戶進(jìn)行開放式問答的交互能力。

NOMI GPT的認(rèn)知中樞——領(lǐng)會(huì)意圖有默契，執(zhí)行夠聰明，靈活不打擾

NOMI GPT認(rèn)知中樞擁有極為高效的信息認(rèn)知能力，能在海量信息源中精準(zhǔn)判斷用戶意圖與需求，無縫調(diào)度大模型架構(gòu)內(nèi)組件，實(shí)現(xiàn)“領(lǐng)會(huì)用戶意圖有默契，執(zhí)行夠聰明，靈活不打擾”的優(yōu)質(zhì)用車體驗(yàn)。

蔚來自研的端云一體認(rèn)知中樞，集成了行業(yè)最全知識(shí)庫，包括中控分發(fā)，多模拒識(shí)，跨域繼承amp;跳轉(zhuǎn)， 多Agent決策幾個(gè)部分，讓NOMI有了對(duì)復(fù)雜任務(wù)的處理能力，能夠?qū)Ω兄降男畔⑦M(jìn)行推理分析，從容調(diào)度執(zhí)行各種任務(wù)，回答各種問題。通過認(rèn)知中樞，NOMI會(huì)根據(jù)你所說的內(nèi)容，結(jié)合對(duì)話上下文、感知以及狀態(tài)信息，智能地判斷調(diào)用任務(wù)型交互、問答閑聊、用車助手等，同時(shí)也能支持語義創(chuàng)建完整的快捷場景。

行業(yè)獨(dú)有情感引擎——NOMI與你“情投意合”

行業(yè)獨(dú)有的情感引擎是NOMI實(shí)現(xiàn)擬人交互的關(guān)鍵，通過與用戶長期的溝通與陪伴、記憶、學(xué)習(xí)，實(shí)現(xiàn)有個(gè)性的成長，讓NOMI不只是一個(gè)冰冷的“助手”，更是懂你的情感伙伴。

NOMI 的記憶能力包括短期記憶和長期記憶，短期記憶可以用戶近期感興趣的話題、提到人和物，長期記憶能夠記住用戶及家人朋友，記住每一個(gè)人的喜好。

在情感引擎的幫助下，NOMI可以更快的學(xué)習(xí)成長，通過實(shí)時(shí)反饋、事后反思、人為訓(xùn)練等方式，不斷變得更加聰明，不斷掌握新技能和新知識(shí)。

情感引擎也讓每一個(gè)NOMI都能發(fā)展出和用戶性格相契合的“人設(shè)”，包括性格、三觀、夢(mèng)想等，和NOMI的每一句對(duì)話、每一個(gè)表情，更自然、更有溫度，隨著陪伴時(shí)間的增長，NOMI也會(huì)潛移默化地和用戶的性格更加契合。

行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知——無網(wǎng)絡(luò)，NOMI也可以“看得見，認(rèn)得出”

在行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知能力下，車機(jī)聯(lián)網(wǎng)不再是用戶使用NOMI的必須條件，NOMI也將具備“看得見，認(rèn)得出”“聽得到，聽得懂”“知冷熱，有觸感”等能力，做到賬號(hào)隔離，敏感信息不出車，車載通信端到端加密，保障用戶隱私安全的同時(shí)也讓車載人工智能的感知能力得到了極大的擴(kuò)展。

除了可以實(shí)現(xiàn)端側(cè)獨(dú)立運(yùn)行之外，融合了圖像、音頻(聽覺)、車身傳感器(觸覺)等多模感知的NOMI可以像人類一樣，獲得了更全面的感知座艙內(nèi)外的人與事物的能力，并將多維度感知獲得的數(shù)十億參數(shù)，用自然語言進(jìn)行描述。

基于多模態(tài)感知的能力，NOMI現(xiàn)在可以像朋友一樣，看見你的物品、著裝、狀態(tài)，甚至艙外的車輛、樓宇、動(dòng)物植物，并提供更懂你的服務(wù)、更有趣的溝通。

端側(cè)多模態(tài)感知內(nèi)部測試中，預(yù)計(jì)今年內(nèi)面向蔚來車型推送。