理想同學(xué)AI智能技術(shù):從助手到家人的進(jìn)階之路
10 月,理想第 100 萬(wàn)輛整車(chē)于江蘇常州制造基地下線,并在隨后的4天完成百萬(wàn)交付,汽車(chē)行業(yè)由此誕生首位達(dá)成百萬(wàn)輛生產(chǎn)與交付的新勢(shì)力車(chē)企。其產(chǎn)品力持續(xù)進(jìn)階,其理想同學(xué)AI智能技術(shù)在行業(yè)內(nèi)更是堪稱(chēng)一流。
理想同學(xué)作為理想汽車(chē)人工智能的核心載體,本次技術(shù)分享介紹了其三個(gè)發(fā)展階段:增強(qiáng)感知,化身助手,融入家庭。
第一個(gè)階段是增強(qiáng)能力,在此階段,理想同學(xué)聽(tīng)得清、看得遠(yuǎn)且感知能力十分強(qiáng)大,響應(yīng)需求也極為迅速,進(jìn)而逐步成長(zhǎng)為能力更強(qiáng)大、功能更全面、體驗(yàn)更流暢的智能助手。
目前,理想同學(xué)累計(jì)喚醒次數(shù)已達(dá) 23.8 億次,任務(wù)完成率為 96%,Mind GPT 對(duì)話次數(shù)增長(zhǎng) 4 倍,用戶(hù)滿意度達(dá) 96.2%。而在對(duì)話方面,其具備類(lèi)人對(duì)話的特性,這得益于雙麥陣列麥克風(fēng)與聲紋跟蹤技術(shù),該技術(shù)支持全艙自由對(duì)話。
同時(shí),RGB 攝像頭與多模態(tài)感知技術(shù)的運(yùn)用,以及 10 多個(gè)地區(qū)方言的喚醒和方言自動(dòng)識(shí)別功能,讓用戶(hù)無(wú)需操作繁瑣的設(shè)置項(xiàng),就能順暢地與理想同學(xué)進(jìn)行交流互動(dòng)。
自研大模型 Mind GPT 致力于打造擬人新高度,為此,理想汽車(chē)從基座模型到頂層大模型應(yīng)用展開(kāi)全棧式自研。不僅如此,理想汽車(chē)全自研多模態(tài)認(rèn)知大模型 Mind GPT 正式通過(guò)國(guó)家《生成式人工智能服務(wù)管理暫行辦法》備案,成功成為首個(gè)通過(guò)該備案的汽車(chē)廠商自研大模型。
由于理想汽車(chē)自研的多模態(tài)認(rèn)知大模型 Mind GPT 歷經(jīng) 40 余次優(yōu)化,使得理想同學(xué)在理解、總結(jié)及工具調(diào)用方面逐漸成熟,逐步成長(zhǎng)為得力助手。并且借助 Q - MoE 連接器,達(dá)成多模態(tài)信號(hào)融合,讓理想同學(xué)能夠聽(tīng)得清、看得明。
在靈動(dòng)執(zhí)行過(guò)程中,當(dāng)面對(duì)復(fù)雜任務(wù)時(shí),理想同學(xué)宛如能工巧匠一般,拆解并調(diào)用工具,不僅可以自主完成任務(wù),甚至還能創(chuàng)新工具。當(dāng)前它已支持 300 余項(xiàng)工具,預(yù)計(jì)年底或許能達(dá)到 1000 項(xiàng),而作為車(chē)端 AI 編程先驅(qū),其成功突破了傳統(tǒng)局限,有力地推動(dòng)它邁向智能助手的高峰。
在交互體驗(yàn)上,理想同學(xué)不僅支持全艙自由對(duì)話、識(shí)別多種方言,而且融合視覺(jué)感知,成功實(shí)現(xiàn)多模態(tài)互動(dòng)。當(dāng)作為用車(chē)助手時(shí),它既能查詢(xún)車(chē)輛狀態(tài)、診斷故障;在出行之際,又能提供綜合建議、景點(diǎn)信息;于娛樂(lè)之時(shí),還能搜索影視音樂(lè)、解答百科問(wèn)題,甚至能憑借一句話指令生成任務(wù)或創(chuàng)意畫(huà)作,且支持多種風(fēng)格,以此激發(fā)全家靈感。
針對(duì)兒童用戶(hù),不但設(shè)有小主人模式、兒童應(yīng)用及趣味交互功能,用于陪伴孩子成長(zhǎng),而且理想同學(xué)可通過(guò)聲紋識(shí)別用戶(hù)身份,持續(xù)學(xué)習(xí)記憶用戶(hù)偏好,以不同人設(shè)風(fēng)格語(yǔ)音互動(dòng),進(jìn)而建立情感共鳴,努力成為家庭中的貼心一員。
由于理想汽車(chē)是第一個(gè)在車(chē)端實(shí)現(xiàn) AI 自動(dòng)編程的車(chē)企,所以理想同學(xué)具備獨(dú)特優(yōu)勢(shì)。它不僅能通過(guò)聲紋感知身份,并持續(xù)學(xué)習(xí)記住用戶(hù)的聲音,還通過(guò)建設(shè)記憶能力,記憶與用戶(hù)對(duì)話中的內(nèi)容和主題,就像家人一樣,牢記用戶(hù)的興趣、喜好、聊天內(nèi)容等,隨時(shí)準(zhǔn)備好提供幫助。
在情感連接方面,理想同學(xué)在記住信息之后,還能夠像家人一樣,在不同的場(chǎng)合用不同人設(shè)風(fēng)格的語(yǔ)音與用戶(hù)對(duì)話,從而與用戶(hù)形成共情,接近50%用戶(hù)在情感上認(rèn)為理想同學(xué)是家人。
汽車(chē)網(wǎng)評(píng):
總的來(lái)看,理想同學(xué)依憑清晰規(guī)劃、先進(jìn)技術(shù)與多元功能,于汽車(chē)智能化領(lǐng)域獨(dú)辟蹊徑。從增能起步,到助手進(jìn)階,再向家庭融入邁進(jìn),技術(shù)指標(biāo)亮眼,交互與情感構(gòu)建亦魅力非凡。理想汽車(chē)車(chē)端 AI 成果助力其進(jìn)化。未來(lái),理想同學(xué)將引領(lǐng)汽車(chē)智能潮流,創(chuàng)造智能便捷且富有情感的出行生活,續(xù)寫(xiě)智能篇章。