斑馬智行CTO司羅披露：與阿里雲高通合作，行業首發端到端全模態端側大模型解決方案

9月24日，2025雲棲大會在杭州開幕，這場以「雲智一體·碳硅共生」為主題的科技盛會匯聚了來自50多個國家的2000余位嘉賓，共同探討AI、雲計算與產業應用的最新趨勢。

大會首日，阿里雲連發7款通義大模型，從模型智能水平、Agent工具調用，到Coding能力、深度推理、多模態，各方面性能均實現多項突破。

其中，行業首個原生端到端全模態AI大模型Qwen3-Omni，通過引入多種架構升級和技術迭代，在36個音視頻基準測試中實現22項SOTA，32項取得開源模型最佳效果。

聚焦於通義多模態前沿技術，在9月24日下午的通義多模態交互技術論壇上，來自阿里通義實驗室與斑馬智行、聯想、雲希谷等企業的專家或高管，分別帶來了多模態感知與交互、多模態融合理解、端雲協同等核心方向上的技術分享。

多模態大模型通過融合視覺、語言、音頻等多種信息模態，讓AI能夠以更接近人類的方式感知和認知世界。斑馬智行首席技術官司羅指出，當前多模態大模型發展正呈現三大趨勢：統一架構與原生多模態融合、推理能力的深化，以及模型部署的兩極化。

而在汽車智能化領域，多模態大模型的應用正在推進智能座艙架構的演進。

傳統「流水線」架構依賴預設規則與分散感知，難以處理複雜場景；而新一代「端到端」架構基於原生多模態大模型，能夠實現感知—認知—決策的閉環，真正具備情境理解與主動服務能力。

同時，在信息安全的需求下，端到端架構也逐漸從融合到端側演進，不僅解決了數據隱私和延迟問題，更通過本地化處理實現了真正的實時智能響應。

基於這些技術趨勢，斑馬智行宣佈率先融合接入阿里雲Qwen3-Omni模型，這也是該原生端到端全模態AI大模型首次被採用。

9月26日，斑馬智行將聯合阿里雲與高通，正式發佈端到端全模態端側大模型解決方案Auto Omni。據介紹，該方案基於阿里雲Qwen Omni及高通驍龍8397芯片平臺打造，在業內率先採用端到端技術架構，具有主動智能、斷網可用、隱私無憂三大特點，能夠實現從指令式交互到Always on主動智能的代際提升。

通過兩大場景，司羅展示了智能座艙基於Auto Omni實現的主動智能能力，如通過多模態感知乘員狀態及車內外環境差異，自動開啟空調並避免吹到車主的臉；實時解析車內對話語義，結合情景理解主動參與對話並提供服務等。

據瞭解，首批搭載高通8397芯片的車型將在2026年量產，採用Auto Omni全模態端側大模型解決方案的第一批AI智能座艙也將屆時面世。在本次雲棲大會上，斑馬將在前沿應用館特展區斑馬智行展臺開放實車體驗。

在分享中司羅談道，斑馬智行在AI in All戰略之下，希望與客户及合作伙伴共赴AGI時代。通過全球首個智能座艙全模態端側大模型實車方案，斑馬智行正在引領汽車智能座艙率先邁入吳泳銘所定義的「自主行動」新階段。

雲棲大會將持續至9月26日，預計將有更多汽車智能化領域創新技術在此期間亮相。

編輯：許瀝心