自去年ChatGPT發(fā)布之后，大模型的熱度居高不下。國(guó)內(nèi)企業(yè)迅速跟進(jìn)，前有百度文心一言、阿里通義千問(wèn)，后有訊飛星火，加上商湯、騰訊等多家企業(yè)，共同開啟“百模大戰(zhàn)”。

一場(chǎng)場(chǎng)的發(fā)布會(huì)向公眾展示大模型在各個(gè)領(lǐng)域的應(yīng)用前景，開啟了一場(chǎng)人工智能的狂歡。而對(duì)于汽車領(lǐng)域，眾廠商發(fā)揮巧思，在智能座艙、自動(dòng)駕駛等方向似乎都有大模型應(yīng)用的廣闊天地。

“AI研發(fā)的一個(gè)終極目標(biāo)是我們希望設(shè)計(jì)一個(gè)算法，并使它能像人一樣去思考。ChatGPT向人們證明，這并不是不切實(shí)際的想象，AI大模型也許會(huì)在未來(lái)融入到社會(huì)的各個(gè)行業(yè)場(chǎng)景，驅(qū)動(dòng)產(chǎn)業(yè)的變革，經(jīng)濟(jì)的增長(zhǎng)，將會(huì)帶來(lái)新的一場(chǎng)工業(yè)革命?！痹谟缮w世汽車主辦的“人工智能——大模型時(shí)代下的智能汽車技術(shù)研討會(huì)”上，NVIDIA工程和解決方案技術(shù)總監(jiān)路川如是說(shuō)到。

NVIDIA工程和解決方案技術(shù)總監(jiān)路川；圖片來(lái)源：蓋世汽車

大模型的火熱，無(wú)疑也給予汽車產(chǎn)業(yè)玩家極大的想象空間，但是每一種新興事物的出現(xiàn)，總是伴隨著擁躉與爭(zhēng)議，大模型同樣如此。但也有一批批先行者前赴后繼，想要在這團(tuán)還不太明朗的迷霧中，探索一條通往終局的大道。

大模型重塑智能汽車體驗(yàn)

就汽車行業(yè)和大模型的關(guān)系，大模型可以在自動(dòng)駕駛、座艙智能化、人車傳感器互聯(lián)、工廠數(shù)字化等層面產(chǎn)生價(jià)值。從功能層面來(lái)看，目前AI大模型在汽車上主要有兩種落地形式。

其中一類與智能駕駛有關(guān)，自動(dòng)駕駛的進(jìn)程，因?yàn)榇竽Ｐ陀稚?。ChatGPT的出現(xiàn)帶給自動(dòng)駕駛行業(yè)很大啟示，這種通過(guò)對(duì)海量多模態(tài)數(shù)據(jù)的大規(guī)模自監(jiān)督學(xué)習(xí)，加之預(yù)訓(xùn)練+微調(diào)的方式，讓AI得以完成各種復(fù)雜自然語(yǔ)言任務(wù)。自動(dòng)駕駛，被認(rèn)為是下一個(gè)可能實(shí)現(xiàn)突破的領(lǐng)域。

對(duì)此，汽車產(chǎn)業(yè)界迅速反應(yīng)。今年4月，毫末智行發(fā)布了自動(dòng)駕駛生成式大模型DriveGPT，通過(guò)引入駕駛數(shù)據(jù)建立RLHF技術(shù)，對(duì)自動(dòng)駕駛認(rèn)知決策模型進(jìn)行持續(xù)優(yōu)化，終極目標(biāo)是實(shí)現(xiàn)端到端自動(dòng)駕駛。

6月20日，理想汽車也公布了其智能駕駛最新進(jìn)展，稱理想AD Max 3.0進(jìn)入大模型時(shí)代，當(dāng)月內(nèi)將向北京和上海的內(nèi)測(cè)用戶交付不依賴高精地圖的城市NOA功能，下半年將向用戶開放通勤NOA功能。該功能核心是采用了BEV大模型。

AI大模型或賦予自動(dòng)駕駛更快速、準(zhǔn)確地解決認(rèn)知和決策問(wèn)題的能力，或在標(biāo)注、仿真、視頻信息處理等多方面存在應(yīng)用空間。如通過(guò)大模型優(yōu)化數(shù)據(jù)標(biāo)注，可以降低人工標(biāo)注比例和成本，以及提升虛擬訓(xùn)練環(huán)境的真實(shí)性，優(yōu)化虛擬訓(xùn)練數(shù)據(jù)等。

對(duì)于大模型上車，還有一類是用于人工智能對(duì)話交流，大多數(shù)應(yīng)用在智能座艙。比如此前發(fā)布的百度的文心一言，已有東風(fēng)日產(chǎn)、紅旗、長(zhǎng)城以及吉利銀河等近十家車企宣布接入；阿里巴巴也宣布AliOS智能汽車操作系統(tǒng)已接入通義千問(wèn)大模型進(jìn)行測(cè)試等。

在研討會(huì)上，商湯絕影智能車艙產(chǎn)品創(chuàng)新高級(jí)總監(jiān)邵昌旭分享到，未來(lái)的智能座艙將成為有溫度，能夠更加懂你出行的管家，能夠全方位的感知和理解乘客的需求。

商湯絕影智能車艙產(chǎn)品創(chuàng)新高級(jí)總監(jiān)邵昌旭；圖片來(lái)源：蓋世汽車

通過(guò)大模型賦能，智能汽車更具“情感”，以真正向第三生活空間轉(zhuǎn)變，滿足乘客更深層次的生理和心理需求。值得注意的是，現(xiàn)在如百度的文心大模型，再或者吉利AI大模型，其在智能座艙領(lǐng)域最核心的應(yīng)用均是在語(yǔ)音等交互場(chǎng)景，短期內(nèi)可能會(huì)出現(xiàn)同質(zhì)化的隱憂。

當(dāng)然，在大模型時(shí)代，智能座艙可進(jìn)化的空間遠(yuǎn)不止于此。

今天的智能座艙，本質(zhì)上在功能層面并不是一個(gè)AI問(wèn)題，而是用產(chǎn)品經(jīng)理去定義座艙中的各個(gè)場(chǎng)景?！按竽Ｐ蜁r(shí)代的一個(gè)典型特征就是好像每一個(gè)問(wèn)題都可以變成AI問(wèn)題?！遍L(zhǎng)城汽車智能化研發(fā)總監(jiān)楊繼峰說(shuō)到。

長(zhǎng)城汽車智能化研發(fā)總監(jiān)楊繼峰；圖片來(lái)源：蓋世汽車

AI問(wèn)題的核心是如何讓機(jī)器模擬人類的智能思維和行為。大模型時(shí)代，有機(jī)會(huì)把座艙變成一個(gè)AI問(wèn)題。如自動(dòng)駕駛一般，其本質(zhì)是車如人一樣駕駛，對(duì)于智能座艙，則是駕乘空間如何更加的“擬人”。智能座艙需要從如今的形態(tài)走向智能空間形態(tài)。

基于這種思考，若將用戶歷史使用習(xí)慣和車內(nèi)外的當(dāng)前環(huán)境狀態(tài)等信息，輸入給座艙的認(rèn)知大模型，再利用各種生態(tài)應(yīng)用或交互方式等方式來(lái)表現(xiàn)，以實(shí)現(xiàn)智能座艙的體驗(yàn)躍升。

現(xiàn)在智能空間會(huì)成為一個(gè)跟自動(dòng)駕駛體量差不多的AI問(wèn)題。Coding、閱讀、知識(shí)搜索和推送……所有的業(yè)務(wù)重構(gòu)會(huì)變成一個(gè)一個(gè)的AI問(wèn)題。這帶來(lái)了一個(gè)全新的挑戰(zhàn)，“我們沒(méi)有準(zhǔn)備好?！睏罾^峰說(shuō)到。

大模型這筆賬，該怎么算

楊繼峰認(rèn)為大模型突然爆發(fā)的本質(zhì)原因是LLM提供了一個(gè)能力和泛化能力足夠強(qiáng)的模型基座，和一系列可以SFT、可以對(duì)齊、plug-in，以及可以重訓(xùn)、可以輕量化的工程范式。

落到具體的實(shí)現(xiàn)層面，如大模型在智能座艙方面的應(yīng)用，挑戰(zhàn)伴隨著變化出現(xiàn)。如可能面臨需要去挖掘各個(gè)不同的維度上所有的感知數(shù)據(jù)；在座艙里需要建立從來(lái)沒(méi)有建立過(guò)的針對(duì)于算法的數(shù)據(jù)閉環(huán)體系等。

高合汽車前期智能產(chǎn)品與技術(shù)規(guī)劃負(fù)責(zé)人黃駿認(rèn)為，大語(yǔ)言模型、多模態(tài)檢測(cè)模型和神經(jīng)輻射場(chǎng)建模NeRF是比較可能落地的座艙大模型。其中，多模態(tài)檢測(cè)模型的重要性愈發(fā)突出，能大幅削減檢測(cè)模型標(biāo)注成本。而利用擴(kuò)散網(wǎng)絡(luò)生成的SR場(chǎng)景能大幅降低座艙計(jì)算負(fù)載。

高合汽車前期智能產(chǎn)品與技術(shù)規(guī)劃負(fù)責(zé)人黃駿；圖片來(lái)源：蓋世汽車

但從大模型開發(fā)的視角來(lái)看，今天還處在技術(shù)競(jìng)爭(zhēng)的前期階段，模型如何做到足夠大能力足夠強(qiáng)，形成強(qiáng)的競(jìng)爭(zhēng)力是本質(zhì)問(wèn)題。站在企業(yè)角度，如何讓大模型盡快進(jìn)入產(chǎn)品工程賽道和降成本周期，以快速進(jìn)行大規(guī)模應(yīng)用，才是本質(zhì)要求。

這是一個(gè)持續(xù)深化的過(guò)程。

一方面，大模型的成熟是一個(gè)循序漸進(jìn)的過(guò)程?；鹕揭嫫囆袠I(yè)總經(jīng)理?xiàng)盍ケ硎荆竽Ｐ偷某墒鞈?yīng)該是厚積薄發(fā)的，新技術(shù)滿足舊需求，舊技術(shù)滿足新需求，而非用新技術(shù)做新場(chǎng)景。信息數(shù)據(jù)是制約大模型持續(xù)訓(xùn)練的主要因素。

火山引擎汽車行業(yè)總經(jīng)理?xiàng)盍?；圖片來(lái)源：蓋世汽車

他認(rèn)為，在ChatGPT4.0出現(xiàn)之前，最大的大模型就是人的大腦，應(yīng)將外部大模型和內(nèi)部大模型結(jié)合起來(lái)，找尋可落地的場(chǎng)景。當(dāng)人或機(jī)器某一方犯錯(cuò)時(shí)，能通過(guò)人和機(jī)器共同決策，以最終結(jié)果來(lái)做出靠譜的決策。

在廣泛的應(yīng)用場(chǎng)景里，大模型遠(yuǎn)不如人類思考能力，需要通過(guò)Transformer模型、多模態(tài)的數(shù)據(jù)、規(guī)劃訓(xùn)練端平臺(tái)對(duì)大模型進(jìn)行打磨訓(xùn)練，讓其得以處理更復(fù)雜的事情。

路川認(rèn)為，要做好大模型，需要滿足以下幾個(gè)點(diǎn)：

第一點(diǎn)是基于Transformer的模型結(jié)構(gòu)；第二點(diǎn)是需要用到更多的數(shù)據(jù)，或者是用一些多模態(tài)的數(shù)據(jù)，去訓(xùn)練大模型的業(yè)務(wù)，以滿足一些復(fù)雜業(yè)務(wù)場(chǎng)景的需求；第三是計(jì)算平臺(tái)層面的支撐，大模型的訓(xùn)練需要強(qiáng)大的算力資源，傳統(tǒng)的計(jì)算模式已經(jīng)很難滿足，在訓(xùn)練端用集群的方式去構(gòu)建一個(gè)分布式的系統(tǒng)，對(duì)于大模型來(lái)說(shuō)是必須的，這樣才能有一個(gè)比較好的訓(xùn)練速度，快速迭代，讓大模型應(yīng)用在真實(shí)的業(yè)務(wù)場(chǎng)景中成為可能。

從成本的方面考量，大模型帶來(lái)的訓(xùn)練、推理、數(shù)據(jù)等方面的成本飆升是不得不考慮的問(wèn)題，以及對(duì)算法、芯片算力等方面的要求持續(xù)高漲。

楊繼峰指出，從算力形態(tài)角度大規(guī)模分布式推理平臺(tái)的形態(tài)和能力也還需要一些時(shí)間，同時(shí)下一代的專用芯片、GPU、通信問(wèn)題也都在路上。

針對(duì)這些問(wèn)題，業(yè)界持續(xù)思考解決方案。黃駿表示，座艙智能化帶來(lái)的算力缺乏問(wèn)題要求跨域融合或大算力芯片。考慮到汽車行業(yè)的計(jì)算業(yè)務(wù)規(guī)模相對(duì)較小，嵌入式NPU集成于設(shè)備中，可分擔(dān)GPU的部分工作，提供更高計(jì)算性能的同時(shí)降低功耗。嵌入式NPU的AI開發(fā)利用NPU加速AI應(yīng)用，能大幅降低硬件成本，將成為OEM在AI業(yè)務(wù)投資和單車收效中關(guān)鍵的一環(huán)。

此外，使用大模型還小模型這筆賬該怎么算？大模型的企業(yè)嘗試著用更大參數(shù)量的模型解決更多的問(wèn)題。而主機(jī)廠傾向于用更小的模型去解決特定的問(wèn)題，并且以更低的工程成本去實(shí)現(xiàn)應(yīng)用。

路川提到，如智能駕駛是一個(gè)非常復(fù)雜的場(chǎng)景，把一些業(yè)務(wù)通過(guò)一個(gè)通用的模型進(jìn)行融合，讓大模型成為車載大腦提供完善的智能服務(wù)，是未來(lái)探索的一個(gè)方向，也是未來(lái)大模型一個(gè)可能應(yīng)用的領(lǐng)域。

中科創(chuàng)達(dá)物聯(lián)網(wǎng)事業(yè)群副總裁楊新輝預(yù)測(cè)，下一個(gè)時(shí)代可能將圍繞于汽車產(chǎn)業(yè)和機(jī)器人產(chǎn)業(yè)的融合，而汽車正處于機(jī)器人和汽車機(jī)器人之間的過(guò)渡階段。未來(lái)的大模型可能在混合方面發(fā)生變化，一是在云端和邊端組合的層面，二是在大模型和小模型混合的層面。

中科創(chuàng)達(dá)物聯(lián)網(wǎng)事業(yè)群副總裁楊新輝；圖片來(lái)源：蓋世汽車

真正的挑戰(zhàn)是深入到汽車產(chǎn)業(yè)各個(gè)層面的。

“我們?cè)谕瑫r(shí)面臨著的模型層面的爆發(fā)、工程層面的爆發(fā)、應(yīng)用層面的爆發(fā)、生態(tài)層面的爆發(fā)、產(chǎn)業(yè)層面的爆發(fā)，而我們?cè)谘邪l(fā)結(jié)構(gòu)調(diào)整和組織能力調(diào)整上好像還有很長(zhǎng)的路要走?！睏罾^峰感嘆。

大模型深入賦能汽車產(chǎn)業(yè)并非可以一蹴而就，這需要相關(guān)企業(yè)持續(xù)創(chuàng)新、與時(shí)俱進(jìn)，也需要整體的汽車產(chǎn)業(yè)鏈做好迎接變革的準(zhǔn)備。

激進(jìn)與謹(jǐn)慎，蓄勢(shì)待發(fā)的產(chǎn)業(yè)鏈

大模型時(shí)代，新的商業(yè)模式正在出現(xiàn)。

無(wú)論是自動(dòng)駕駛還是智能座艙，現(xiàn)在大模型上車更多的是比較淺層的應(yīng)用，離真正的給汽車帶來(lái)翻天覆地的變化，或許還有一段距離。更直觀的感受是，整個(gè)汽車產(chǎn)業(yè)鏈正在做好迎接大模型的準(zhǔn)備。

站在車企的角度，楊繼峰指出，傳統(tǒng)的汽車產(chǎn)業(yè)鏈結(jié)構(gòu)已發(fā)生改變，跨領(lǐng)域鏈接和合作已是常態(tài)。車企需要在全新的時(shí)代找尋自己的定位，而不是基于所有業(yè)務(wù)進(jìn)行AI轉(zhuǎn)型。

不止車企，大模型帶來(lái)生態(tài)的廣泛鏈接，基于不同的分工，每一個(gè)企業(yè)都將會(huì)是大模型的共建者。

商湯絕影基于“駕、艙、云”三位一體的發(fā)展戰(zhàn)略，通過(guò)大模型向自動(dòng)駕駛和智能座艙提供賦能，實(shí)現(xiàn)駕艙一體和人機(jī)共駕等駕乘體驗(yàn)。邵昌旭介紹，商湯提出在大模型時(shí)代的解決方案，打造了全新智能座艙架構(gòu)：車端和云端為底層支撐，智能車艙大腦為核心，不同風(fēng)格的定制化數(shù)字人交互呈現(xiàn)各類智能應(yīng)用，實(shí)現(xiàn)座艙如人一般的智能。

面對(duì)大模型時(shí)代對(duì)于整車操作系統(tǒng)的新要求，中科創(chuàng)達(dá)打造了“滴水OS”整車操作系統(tǒng)，賦能大模型上車。楊新輝說(shuō)到，大模型可能會(huì)成為操作系統(tǒng)中不可或缺的組成部分，并在很大程度上改變操作系統(tǒng)的形態(tài)。

據(jù)悉，該操作系統(tǒng)能夠滿足智能駕駛在功能安全方面的需求，以及具備動(dòng)態(tài)自發(fā)、異構(gòu)融合等優(yōu)勢(shì)，并集成創(chuàng)達(dá)魔方基礎(chǔ)大模型，可實(shí)現(xiàn)多模態(tài)交互與反饋、全局智能決策支持等功能，以此提升智能駕駛和座艙體驗(yàn)。

而對(duì)于核心的算力和平臺(tái)支撐，路川透露，從數(shù)據(jù)集構(gòu)建、分布式集群訓(xùn)練平臺(tái)搭建到客戶端應(yīng)用優(yōu)化和部署，NVIDIA能為基礎(chǔ)薄弱的公司提供大模型快速構(gòu)建整合方案。NVIDIA有一整套完善的工具鏈，可以高效地幫助客戶快速構(gòu)建數(shù)據(jù)集。針對(duì)分布式訓(xùn)練平臺(tái)，NVIDIA擁有NeMo Megatron框架， SuperPOD參考架構(gòu)，可以更好地支撐客戶針對(duì)大模型的分布式訓(xùn)練任務(wù)的需求等。

“NVIDIA在很久之前就開始認(rèn)識(shí)到AI對(duì)算力的需求是飛速增長(zhǎng)的，并開始構(gòu)建GPU集群用于內(nèi)部的研發(fā)，應(yīng)用測(cè)試，從中不斷地積累相關(guān)經(jīng)驗(yàn)，并輸出給行業(yè)客戶，大模型時(shí)代的到來(lái)，更多的客戶可以依托NVIDIA技術(shù)積累，快速構(gòu)建自己的分布式訓(xùn)練平臺(tái)，可以應(yīng)用NVIDIA提供的端到端的技術(shù)方案，快速具備大模型的能力?！甭反ㄕf(shuō)到。

實(shí)際上能夠完整構(gòu)建基礎(chǔ)大模型的一定是少數(shù)企業(yè)，居高不下的成本和技術(shù)壁壘是難以翻越的一座高山。在此之上，更多行業(yè)前沿玩家，基于對(duì)行業(yè)的理解和掌握的行業(yè)數(shù)據(jù)，構(gòu)建更貼合實(shí)際場(chǎng)景的行業(yè)大模型。除此之外，還有在基礎(chǔ)大模型和行業(yè)大模型之上，開發(fā)AI應(yīng)用的企業(yè)。

楊立偉表示，由于每個(gè)大模型都有自己的側(cè)重點(diǎn)，重要的是如何建設(shè)好大模型平臺(tái)，滿足不同客戶的需求。

6月28日，火山引擎發(fā)布大模型服務(wù)平臺(tái)“火山方舟”，面向企業(yè)提供模型精調(diào)、評(píng)測(cè)、推理等全方位的平臺(tái)服務(wù)（MaaS，即Model-as-a-Service）。楊立偉提到，MaaS平臺(tái)具備的低成本、費(fèi)用低、能以一定的測(cè)試標(biāo)準(zhǔn)針對(duì)不同場(chǎng)景輸入結(jié)果，在短期內(nèi)是最有價(jià)值的平臺(tái)?；鹕揭鎽{借在工具和數(shù)據(jù)兩個(gè)層面的優(yōu)勢(shì)，能幫助車企進(jìn)行數(shù)據(jù)治理。

以上只是產(chǎn)業(yè)鏈的一角縮影。

模型時(shí)代是一個(gè)模型研究、工程研究 、計(jì)算研究、數(shù)據(jù)研究、產(chǎn)品形態(tài)、商業(yè)形態(tài)、產(chǎn)業(yè)生態(tài)、法規(guī)倫理同時(shí)爆發(fā)的時(shí)代。這給各個(gè)參與方帶來(lái)思考，如何建立大模型時(shí)代的組織架構(gòu)、研發(fā)體系、基礎(chǔ)設(shè)施等。

楊繼峰坦言，大語(yǔ)言模型并不是無(wú)所不能，不是所有知識(shí)的表達(dá)形式都是語(yǔ)言，同樣也不是把所有的業(yè)務(wù)問(wèn)題用LLM的范式解決都是最優(yōu)解。“但不管怎么樣，當(dāng)我們開始用大模型的范式思考業(yè)務(wù)轉(zhuǎn)型，用AI思維對(duì)待流程、對(duì)待數(shù)據(jù)、對(duì)待評(píng)價(jià)、甚至是對(duì)待生產(chǎn)力和生產(chǎn)關(guān)系的時(shí)候，就真正來(lái)到了一個(gè)大模型世界。”

或許接下來(lái)，產(chǎn)業(yè)內(nèi)將面臨一場(chǎng)空前激烈的競(jìng)爭(zhēng)，大模型的上車之路也將在這個(gè)過(guò)程中，持續(xù)進(jìn)化，行至終點(diǎn)，而今天，才只是開始。

返回第一電動(dòng)網(wǎng)首頁(yè) >