商湯絕影智能汽車事業(yè)群總裁王曉剛：通用人工智能下的智能汽車

“通用人工智能將打造智能汽車的‘智慧飛輪’，讓人、車和模型之間產(chǎn)生更多有效交互，打通三者之間的互動閉環(huán)，讓AI更精準(zhǔn)地理解人的需求，帶來更好的駕乘體驗(yàn)?！?商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛在2023中國電動汽車百人會智能汽車論壇上說。

上周，由中國電動汽車百人會主辦，清華大學(xué)、中國汽車工程學(xué)會、中國汽車工業(yè)協(xié)會、中國汽車技術(shù)研究中心、中國汽車工程研究院協(xié)辦的2023中國電動汽車百人會論壇在北京成功舉辦。 商湯科技聯(lián)合創(chuàng)始人王曉剛教授受邀出席會議，并發(fā)表《通用人工智能下的智能汽車》主旨演講，為人們描繪了通用人工智能(AGI)賦能人機(jī)共智的美好未來。

以下為王曉剛教授演講內(nèi)容梳理。

通用人工智能引發(fā)新一輪范式革新

新年伊始，ChatGPT 、GPT-4 掀起了通用人工智能的熱潮，這是一場新的技術(shù)革命。 非常有幸與大家一起探討通用人工智能和多模態(tài)大模型為智能汽車帶來的機(jī)遇和挑戰(zhàn)。

2022年以來，新的通用人工智能開始以更加高效的方式解決海量的開放式任務(wù)。 它更加接近人的智能，而且能夠產(chǎn)生有智慧的內(nèi)容，也帶來了新的研究范式——基于一個非常強(qiáng)大的多模態(tài)基模型，通過強(qiáng)化學(xué)習(xí)和人的反饋，不斷解鎖模型的新能力。

那么，什么是通用人工智能? 它與現(xiàn)有的人工智能系統(tǒng)有哪些區(qū)別?

其實(shí)，現(xiàn)有的人工智能系統(tǒng)也能夠接收多模態(tài)數(shù)據(jù)，但輸出的任務(wù)都是事先定義好的，若為系統(tǒng)增加一個新任務(wù)，就要對其進(jìn)行重新設(shè)計，還要采集大量樣本。

而在通用人工智能時代，人們通過輸入提示詞和多模態(tài)內(nèi)容，便可生成多模態(tài)數(shù)據(jù)。 更重要的是，它可以用自然語言方式生成任務(wù)描述，以非常靈活的方式應(yīng)對大量長尾問題和開放性任務(wù)，甚至是一些主觀的描述。

比如，在做一些特定場景的檢索任務(wù)時，一個現(xiàn)有的人工智能系統(tǒng)可能有幾十個標(biāo)簽。 商湯做過實(shí)驗(yàn)，如果用自然語言描述可能會有1萬多個詞，通過它們的組合去描述各種任務(wù)，實(shí)際上是非常強(qiáng)大且靈活的。

舉個例子，給定一張自動駕駛場景中的圖片，判斷是否需要減速。 通過現(xiàn)有的 AI系統(tǒng)，首先要做物體檢測，然后在物體框里做文字識別，最后做決策，整個過程每一個模塊都是事先定義好的任務(wù)。

而在通用人工智能技術(shù)下，給定圖像，人們只需用自然語言去問圖像問題，比如“這個圖標(biāo)是什么意思? ”“接下來應(yīng)該做什么?” 模型本身不會發(fā)生變化，輸出端通過自然語言的方式給出一系列邏輯推理，最后得出結(jié)論。 比如，它會告訴你“限速30公里”“前面100米是學(xué)校的區(qū)域”“有小孩”“應(yīng)該小心駕駛”“需將車速降到30公里以下”等操作。

可以看到，這都是一些開放式的新任務(wù)，可以對人工智能系統(tǒng)帶來非常大的變革。

從“數(shù)據(jù)飛輪”到“智慧飛輪

通用人工智能還有非常強(qiáng)的一點(diǎn)，它能夠產(chǎn)生內(nèi)容，而且是有智慧的內(nèi)容。

自動駕駛/智能汽車領(lǐng)域有“數(shù)據(jù)飛輪”說法，即模型能夠加持終端，采取高質(zhì)量的數(shù)據(jù)對模型進(jìn)行更新，然后再從終端提升數(shù)據(jù)的量和質(zhì)。

通用人工智能時代則會產(chǎn)生“智慧飛輪”，人和模型之間可以產(chǎn)生互動。 當(dāng)人們?yōu)槟Ｐ洼斎階lign With Human Intention時，雖然模型很強(qiáng)大，但它并不知道人們需要什么樣的能力，不過通過人的反饋，它就能更好地理解人需要它展示什么樣的能力而去解鎖更多的技能，同時模型為人輸出有智慧的內(nèi)容，從而激發(fā)人們更多的創(chuàng)作智慧，隨后又會產(chǎn)生新的“智慧飛輪”。

值得一提的是，AGI對算力的需求非常大。 ChatGPT具備1750億參數(shù), 需要3000~5000張A100訓(xùn)練卡，一次訓(xùn)練的成本上千萬美金。 直到今天，它的推理成本每天也高達(dá)幾百萬美金。

2021年，商湯提前布局，在上海臨港建立了人工智能計算中心(AIDC)。 作為SenseCore商湯 AI大裝置的算力基座，AIDC基于2.7萬塊GPU的并行計算系統(tǒng)實(shí)現(xiàn)了5.0 exaFLOPS的算力輸出，可支持最多20個千億參數(shù)量超大模型(以千卡并行)同時訓(xùn)練。

從2019年開始，商湯從10億參數(shù)的視覺模型研發(fā)，到今天有320億參數(shù)全球最大規(guī)模的通用視覺模型。 在NLP領(lǐng)域，商湯當(dāng)前也有接近2000億參數(shù)的大模型，有能力去訓(xùn)練1800億參數(shù)的多模態(tài)大模型。 所以，未來通用人工智能基于多模態(tài)的基模型可以做視覺感知、語言理解、內(nèi)容生成和推理決策。

通用人工智能賦能絕影駕、艙、云三位一體產(chǎn)品體系

商湯絕影是商湯旗下的智能汽車業(yè)務(wù)板塊，堅持駕、艙、云三位一體的發(fā)展策略，希望通過駕艙融合帶來更好的駕乘體驗(yàn)。

商湯AI云能夠?yàn)樽詣玉{駛提供數(shù)據(jù)閉環(huán)服務(wù)，能夠使智能座艙成為第三生活空間。 同時，AI云也為通用人工智能賦能智能駕駛和智能座艙奠定了非常強(qiáng)大的基礎(chǔ)。

在自動駕駛領(lǐng)域，BEV是當(dāng)前主流的技術(shù)路線，未來可以朝著多模態(tài)、通用智能的方向發(fā)展。

通過AIGC可生成困難樣本，在模型中輸入多模態(tài)數(shù)據(jù)，同時自動駕駛多模態(tài)大模型可以做到感知和決策一體化。 在輸出端，通過環(huán)境解碼器可對3D環(huán)境進(jìn)行重建，實(shí)現(xiàn)環(huán)境的可視化理解; 行為解碼可生成完整的路徑規(guī)劃; 同時，動機(jī)解碼器可以用自然語言描述推理的過程，進(jìn)而使自動駕駛系統(tǒng)變得可以解釋。

商湯基于多模態(tài)大模型，可做到數(shù)據(jù)的感知閉環(huán)和決策閉環(huán)。 從前端自動采集高質(zhì)量的數(shù)據(jù)，到利用大模型進(jìn)行自動化的數(shù)據(jù)標(biāo)注和產(chǎn)品檢測，能夠幾百倍地提升模型迭代的效率并降低成本。

在智能座艙板塊，通用人工智能可以使基模型具備對空間環(huán)境理解、用戶狀態(tài)感知、多模態(tài)指令解析及多輪邏輯對話、內(nèi)容生成等一系列能力，進(jìn)而賦能包括情緒感知、智能助手、基于情感的對話、創(chuàng)意內(nèi)容生成、個性交互等一系列功能，不斷地提升座艙的個性化體驗(yàn)。

同時，應(yīng)用場景也可以從上車、行車、停車、離車，進(jìn)而拓展到娛樂、辦公、購物、休息等等。

實(shí)際上，智能汽車是通用人工智能實(shí)現(xiàn)閉環(huán)的一個理想場景，人類已經(jīng)可以做到人機(jī)共駕。 未來，車和模型之間能夠產(chǎn)生更有效的互動，從而完成從人到車、到模型的互動閉環(huán)，通用人工智能可為人們提供更好的駕乘體驗(yàn)，解鎖無限的想象空間。

商湯愿與客戶及合作伙伴共同邁向通用人工智能時代!

審核編輯：湯梓紅