在2025云棲大會上,斑馬智行攜手高通與阿里通義,正式推出全球首個全模態(tài)端側(cè)大模型實車方案Auto Omni。該方案通過整合語音、視覺、觸覺等多模態(tài)交互能力,實現(xiàn)了智能座艙從被動響應到主動服務的跨越式升級,為車企提供覆蓋全場景的"交鑰匙"式解決方案。
據(jù)技術(shù)團隊披露,Auto Omni的研發(fā)歷時15000余小時,構(gòu)建了三大核心能力:全模態(tài)感知系統(tǒng)可同步處理語音指令、手勢操作及環(huán)境感知數(shù)據(jù);全時空記憶引擎能記錄用戶偏好并預測需求;全場景服務網(wǎng)絡則覆蓋出行、娛樂、生活等高頻場景。方案特別適配高通8397等主流芯片平臺,并深度集成通義Qwen Omni大模型,形成從硬件適配到場景應用的完整技術(shù)棧。
產(chǎn)業(yè)合作方面,斑馬智行已與國內(nèi)頭部車企達成定點協(xié)議,預計2026年實現(xiàn)量產(chǎn)交付。同時,由網(wǎng)易云音樂、喜馬拉雅、飛豬等12家企業(yè)組成的"AI車載平臺服務聯(lián)盟"正式成立,該聯(lián)盟將整合數(shù)字娛樂、本地生活、車輛服務三大領域資源,通過平臺級Agent產(chǎn)品為用戶提供無感化服務體驗。例如,系統(tǒng)可根據(jù)用戶日程自動推薦周邊餐廳,或結(jié)合車況數(shù)據(jù)預約維修服務。
阿里巴巴集團在大會期間同步釋放重磅信息:CEO吳泳銘宣布將原定3年3800億元的AI基礎設施投資計劃擴容,未來投入規(guī)模將持續(xù)擴大。技術(shù)發(fā)布環(huán)節(jié),阿里云CTO周靖人推出Qwen3-Max、Qwen3-Omni等七款大模型,其中Qwen3-Omni已率先完成與斑馬智行系統(tǒng)的融合,為Auto Omni提供更強大的語義理解和多模態(tài)生成能力。這項技術(shù)突破使得車載系統(tǒng)能夠同時處理語音對話、視覺識別和場景推理,將人機交互效率提升3倍以上。