由南京經(jīng)濟(jì)技術(shù)開發(fā)區(qū)管理委員會(huì)、思必樞大生態(tài)南京市工業(yè)和信息化局主辦，模型中國信息通信研究院、打造多中國人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟承辦的融合“2024南京人工智能產(chǎn)業(yè)發(fā)展論壇”在南京漢府飯店舉行。思必馳智能汽車事業(yè)部副總經(jīng)理曾春華受中國人工智能產(chǎn)業(yè)發(fā)展聯(lián)盟邀請(qǐng)參加同期舉辦的思必樞大生態(tài)汽車行業(yè)推進(jìn)組聯(lián)合組會(huì)，并作《AI中樞大模型打造多維生態(tài)融合》主題分享。模型

思必馳提出“AI中樞大模型”技術(shù)架構(gòu)

從AI技術(shù)應(yīng)用于智能座艙的打造多產(chǎn)品方案演進(jìn)來看，車載語音交互方案經(jīng)歷了“以AI技術(shù)提升現(xiàn)有語音交互功能”“以AI賦能車內(nèi)高頻剛需應(yīng)用場景”“以AI賦能車內(nèi)創(chuàng)新場景”三個(gè)階段。融合

在第一階段中，思必樞大生態(tài)AI主要幫助語音助手實(shí)現(xiàn)從語音指令到意圖理解的模型進(jìn)化升級(jí)，達(dá)到隨意說、打造多聽得懂，融合以及人格化、思必樞大生態(tài)情感化的模型個(gè)性化交互方式。到了第二階段，打造多通過分析車內(nèi)高頻剛需應(yīng)用場景，AI技術(shù)可跨域打通出行、用車、娛樂等資源，協(xié)助語音助手實(shí)現(xiàn)汽車大師、行程規(guī)劃、美食助理、新聞助理、導(dǎo)航助理、音視頻助理等功能。而在大模型時(shí)代，隨著大模型在智能座艙的不斷落地，AI技術(shù)正賦能車內(nèi)的創(chuàng)新場景應(yīng)用，使車載語音助手從語言智能向工具智能、主動(dòng)智能演進(jìn)。

這其中，車企在應(yīng)用大模型所面臨的挑戰(zhàn)主要體現(xiàn)在：大模型與車場景如何實(shí)現(xiàn)深度融合，包括與系統(tǒng)、環(huán)境的融合；車企在發(fā)揮各個(gè)大模型的優(yōu)勢時(shí)，需要通過“中樞”解決融合調(diào)度的問題；以及如何以Agent框架為主體，以人為中心，建立大模型的端到端的體驗(yàn)。

對(duì)此，思必馳基于自研全鏈路智能語音語言交互技術(shù)、DFM大模型以及大數(shù)據(jù)構(gòu)建“中樞大模型”架構(gòu)，打造“1+N”模式，即“1”個(gè)百模中臺(tái)（中樞大模型）與“N”個(gè)專業(yè)大模型組合上車，打通前端語言處理、用車場景與后端模型生態(tài)，形成車載垂域的生態(tài)圈，使車載AI體驗(yàn)從“語音指令”邁向“語言智能”+“工具智能”。

曾春華表示，中樞大模型不是一個(gè)云服務(wù)，而是一套框架體系和方法論。通過將中樞大模型規(guī)范配合SDK可以將大模型的上車體驗(yàn)達(dá)到最佳。此外，中樞大模型的規(guī)范結(jié)合SDK可以有效減少集成適配的工作量，通過中樞體系化輸出的產(chǎn)品化方案將更具優(yōu)勢。

更專注用車場景，打造多維生態(tài)融合

智能座艙中樞大模型方案將更專注于用車場景，通過將多維度垂域與大模型垂域串聯(lián)打通，中樞大模型方案可對(duì)用戶的指令完成情境理解與推理，并實(shí)現(xiàn)自由跨域，從而為用戶提供更加完善、全面的個(gè)性化服務(wù)。

在智能出行場景，通過打通車載垂域生態(tài)，中樞大模型可為用戶提供智能出行規(guī)劃、路書分享、美食地圖、大模型日程提醒、智能多輪對(duì)話等內(nèi)容，實(shí)現(xiàn)出行場景大串聯(lián)。在用車場景，中樞大模型通過智能文本分析、智能切圖、智能多輪對(duì)話、內(nèi)容提取、串聯(lián)控制等功能，可以為用戶提供汽車售前、售后的咨詢，以及用車指導(dǎo)、AI說明書、競品對(duì)比等服務(wù)。此外，思必馳中樞大模型還可為用戶打造更加個(gè)性化的虛擬助理，具備超擬人的TTS（語音合成）、人設(shè)性格復(fù)刻、情感化交互等能力。

大模型端側(cè)部署的趨勢

近年來，得益于模型與芯片技術(shù)以及產(chǎn)業(yè)的快速發(fā)展，各終端（手機(jī)、PC、IOT等）的大模型端部產(chǎn)品化也在加速發(fā)展。可以預(yù)見的是，AI+OS的全新技術(shù)底座將成為大模型時(shí)代新的人機(jī)交互趨勢。

曾春華認(rèn)為，大模型時(shí)代下，端側(cè)設(shè)備將成為大模型平權(quán)的重要觸點(diǎn)和入口，端側(cè)部署將極大程度降低推理與算力成本。通過端側(cè)大模型技術(shù)，用戶體驗(yàn)將在隱私安全保證下實(shí)現(xiàn)個(gè)性化以及低延遲高性能的優(yōu)化升級(jí)。以智能汽車為例，端側(cè)大模型技術(shù)將打造出車空間的全模態(tài)人機(jī)自然交互，以及以LLM為核心的車載OS全新軟件架構(gòu)，并實(shí)現(xiàn)車場景的多模態(tài)模型訓(xùn)練微調(diào)及部署。

作為汽車、電子信息、通信等領(lǐng)域跨界融合的產(chǎn)物，智能網(wǎng)聯(lián)汽車已成為全球技術(shù)革命和產(chǎn)業(yè)變革的前沿陣地，汽車行業(yè)有望借助大模型，鞏固和擴(kuò)大在智能網(wǎng)聯(lián)領(lǐng)域的優(yōu)勢，在新一輪產(chǎn)業(yè)革命中走在前列。在這一過程中，思必馳期待以自身技術(shù)積累賦能行業(yè)發(fā)展，打造汽車生態(tài)影響力。目前，思必馳的中樞大模型方案已在北汽、哪吒等多個(gè)項(xiàng)目實(shí)施落地，助力合作伙伴為用戶提供更加快速、便捷、智能化的駕乘體驗(yàn)。