【太平洋汽車 行業(yè)頻道】4月12日，蔚來NOMI GPT大模型正式上線，一周之內(nèi)將同步推送給搭載Banyan·榕 蔚來智能系統(tǒng)的車型。據(jù)官方介紹，此次NOMI升級(jí)了基于全新技術(shù)架構(gòu)，為NOMI量身打造NOMI GPT端云多模態(tài)大模型，包含自研多模態(tài)感知、自研認(rèn)知中樞、情感引擎、多專家Agent，能夠?qū)崿F(xiàn)蔚來產(chǎn)品、服務(wù)、社區(qū)的全域貫通，提供更高效、愉悅的AI服務(wù)。

　　而升級(jí)NOMI GPT功能后，用戶可以體驗(yàn)到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場(chǎng)景生成在內(nèi)的多項(xiàng)全新交互體驗(yàn)，享受智能AI賦能下的全新出行。

　　其中大模型百科包含百科問答、出行攻略和學(xué)習(xí)創(chuàng)作三大功能；

　　無限趣聊包括情感聊天、音樂影視、語言游戲三大功能；

　　魔法氛圍包括場(chǎng)景氛圍、心情氛圍和世界氛圍三大功能；

　　趣玩表情包括精準(zhǔn)表情、驚喜表情和九連拍三大功能；

　　用車問答包括車輛信息查詢、用車知識(shí)查詢和指示燈查詢?nèi)蠊δ埽?/strong>

　　AI場(chǎng)景城市包括行車顧問、氛圍營造、空間舒適和場(chǎng)景推薦四大功能。

　　而NOMI換新升級(jí)后的三大技術(shù)架構(gòu)分別為是NOMI GPT認(rèn)知中樞、行業(yè)獨(dú)有的情感引擎和行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知，在配合數(shù)十億級(jí)的參數(shù)模型、毫秒級(jí)的響應(yīng)速度，賦予了NOMI在感知、認(rèn)知、決策等方面強(qiáng)大的復(fù)雜邏輯推理能力，具備了能與用戶進(jìn)行開放式問答的交互能力。

　　具體來看，其中NOMI GPT認(rèn)知中樞，擁有極為高效的信息認(rèn)知能力，能在海量信息源中精準(zhǔn)判斷用戶意圖與需求，無縫調(diào)度大模型架構(gòu)內(nèi)組件，實(shí)現(xiàn)“領(lǐng)會(huì)用戶意圖有默契，執(zhí)行夠聰明，靈活不打擾”的優(yōu)質(zhì)用車體驗(yàn)。

　　同時(shí)，蔚來自研的端云一體認(rèn)知中樞，集成了行業(yè)最全知識(shí)庫，包括中控分發(fā)，多模拒識(shí)，跨域繼承&跳轉(zhuǎn)，多Agent決策幾個(gè)部分，讓NOMI有了對(duì)復(fù)雜任務(wù)的處理能力，能夠?qū)Ω兄降男畔⑦M(jìn)行推理分析，從容調(diào)度執(zhí)行各種任務(wù)，回答各種問題。

　　通過認(rèn)知中樞，NOMI會(huì)根據(jù)你所說的內(nèi)容，結(jié)合對(duì)話上下文、感知以及狀態(tài)信息，智能地判斷調(diào)用任務(wù)型交互、問答閑聊、用車助手等，同時(shí)也能支持語義創(chuàng)建完整的快捷場(chǎng)景。

　　而情感引擎則是NOMI實(shí)現(xiàn)擬人交互的關(guān)鍵，它通過與用戶長期的溝通與陪伴、記憶、學(xué)習(xí)，實(shí)現(xiàn)有個(gè)性的成長。并且NOMI的記憶能力包括短期記憶和長期記憶，短期記憶可以用戶近期感興趣的話題、提到人和物，長期記憶能夠記住用戶及家人朋友，記住每一個(gè)人的喜好。

　　在情感引擎的幫助下，NOMI可以更快的學(xué)習(xí)成長，通過實(shí)時(shí)反饋、事后反思、人為訓(xùn)練等方式，不斷變得更加聰明，不斷掌握新技能和新知識(shí)。并且會(huì)逐步發(fā)展成和用戶性格相契合的“人設(shè)”，包括性格、三觀、夢(mèng)想等。和NOMI的每一句對(duì)話、每一個(gè)表情，更自然、更有溫度，隨著陪伴時(shí)間的增長，NOMI也會(huì)潛移默化地和用戶的性格更加契合。

　　最后是端側(cè)多模態(tài)感知能力，車機(jī)聯(lián)網(wǎng)不再是用戶使用NOMI的必須條件，NOMI也將具備“看得見，認(rèn)得出”“聽得到，聽得懂”“知冷熱，有觸感”等能力，做到賬號(hào)隔離，敏感信息不出車，車載通信端到端加密，保障用戶隱私安全的同時(shí)也讓車載人工智能的感知能力得到了極大的擴(kuò)展。

　　除了可以實(shí)現(xiàn)端側(cè)獨(dú)立運(yùn)行之外，融合了圖像（視覺）、音頻（聽覺）、車身傳感器（觸覺）等多模感知的NOMI可以像人類一樣，獲得了更全面的感知座艙內(nèi)外的人與事物的能力，并將多維度感知獲得的數(shù)十億參數(shù)，用自然語言進(jìn)行描述。

　　基于多模態(tài)感知的能力，NOMI現(xiàn)在可以像朋友一樣，看見你的物品、著裝、狀態(tài)，甚至艙外的車輛、樓宇、動(dòng)物植物，并提供更懂你的服務(wù)、更有趣的溝通。

　　另外，端側(cè)多模態(tài)感知還在內(nèi)部測(cè)試中，預(yù)計(jì)今年內(nèi)面向蔚來車型推送。（文：太平洋汽車 吳啟星）