版權(quán)聲明:本文版權(quán)為網(wǎng)易汽車所有,轉(zhuǎn)載請(qǐng)注明出處。
網(wǎng)易汽車4月3日?qǐng)?bào)道 2023中國(guó)電動(dòng)汽車百人會(huì)論壇期間,商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛表示,智能汽車是通用人工智能實(shí)現(xiàn)閉環(huán)的一個(gè)非常好的場(chǎng)景,我們已經(jīng)有人機(jī)共駕。未來(lái)我們希望車和模型之間能夠產(chǎn)生更有效的互動(dòng),那就完成了從人到車,到模型這樣的一個(gè)互動(dòng)的閉環(huán),能夠讓通用人工智能為我們提供更好的駕乘體驗(yàn),解鎖無(wú)限的想象空間。
【資料圖】
以下為王曉剛演講實(shí)錄:
各位同仁、各位嘉賓,大家上午好!我是商湯科技王曉剛,新年伊始,像ChatGPT,還有GPT-4掀起了通用人工智能的熱潮,這是一場(chǎng)新的技術(shù)革命。今天我也是非常有幸能有這個(gè)機(jī)會(huì)跟大家一起探討,通用人工智能和多模態(tài)大模型給智能汽車帶來(lái)的機(jī)遇和挑戰(zhàn)。
從2012年開(kāi)始,過(guò)去十年,人工智能的技術(shù)革命是以深度學(xué)習(xí)不斷去突破工業(yè)應(yīng)用的紅線為起點(diǎn)的,誕生了一系列的AI+場(chǎng)景的應(yīng)用。那么基于每個(gè)場(chǎng)景都有不同的專屬的模型,其中的研發(fā)成本比較高,周期比較長(zhǎng)。
從2022年開(kāi)始,新的通用人工智能,它是以非常高效的方式去解決海量的開(kāi)放式任務(wù),更加接近人的智能,而且能夠產(chǎn)生有智慧的內(nèi)容,它也帶來(lái)了新的研究范式,即基于一個(gè)非常強(qiáng)大的多模態(tài)基模型,通過(guò)強(qiáng)化學(xué)習(xí)和人的反饋,不斷解鎖模型新的能力。
什么是通用人工智能呢?我們可以跟現(xiàn)有的人工智能系統(tǒng)做一個(gè)比較。現(xiàn)有的人工智能也能夠接收多模態(tài)的數(shù)據(jù),但是它輸出的任務(wù)都是事先定義好的。如果我想給這個(gè)系統(tǒng)去增加一個(gè)新的任務(wù),我就要對(duì)系統(tǒng)進(jìn)行重新設(shè)計(jì),還要采集大量樣本。
在通用人工智能時(shí)代,我們通過(guò)輸入提示詞和多模態(tài)內(nèi)容,它就可以去生成多模態(tài)的數(shù)據(jù),更重要的是,它可以用自然語(yǔ)言去生成對(duì)任務(wù)的描述。自然語(yǔ)言即可以用非常靈活的方式去覆蓋大量的長(zhǎng)尾問(wèn)題和開(kāi)放性的任務(wù),甚至包括一些主觀描述。
比如說(shuō),在之前我們做一些特定場(chǎng)景的檢索任務(wù)時(shí),一個(gè)人工智能系統(tǒng)可能是有幾十個(gè)標(biāo)簽。我們做過(guò)實(shí)驗(yàn),如果要是用自然語(yǔ)言描述,我們可能有一萬(wàn)多個(gè)詞,通過(guò)它們的組合去描述各種任務(wù),實(shí)際上是非常強(qiáng)大,而且是靈活的。
那么,這里面舉一個(gè)在自動(dòng)駕駛中遇到的一個(gè)例子。給定一個(gè)圖片,我們想去問(wèn)我們是否需要減速?在我們現(xiàn)有的AI的系統(tǒng)里面,我們首先要做物體的檢測(cè),能夠檢測(cè)物體框,里面做文字的識(shí)別,最后做這樣的一個(gè)決策。那么,其中所有的過(guò)程里面的每一個(gè)模塊都是事先定義好的任務(wù)。
在通用人工智能下,給定圖像,我們只需要用自然語(yǔ)言去問(wèn)這個(gè)圖像的問(wèn)題,比方說(shuō),這個(gè)圖標(biāo)是什么意思,我們應(yīng)該做什么?這個(gè)模型本身不會(huì)發(fā)生變化,它輸出就會(huì)通過(guò)自然語(yǔ)言的方式,能夠給我們一系列的這種邏輯的推理,最后給我們結(jié)論。比如說(shuō),它可以告訴我們這里面的限速是30公里每小時(shí),前面100米是學(xué)校的區(qū)域,有小孩,你應(yīng)該去小心,能夠?qū)④囁俳邓俚?0公里每小時(shí)以下等等這一些。可以看到,這都是一些開(kāi)放式的新的任務(wù),可以對(duì)我們?nèi)斯ぶ悄芟到y(tǒng)產(chǎn)生一個(gè)非常大的變革。
通用人工智能還有非常強(qiáng)的一點(diǎn),它能夠產(chǎn)生內(nèi)容,而且是有智慧的內(nèi)容。智能駕駛,或者自動(dòng)駕駛汽車?yán)锩嫖覀冇小皵?shù)據(jù)飛輪”的說(shuō)法,我們的模型能夠從駕駛終端采取高質(zhì)量的數(shù)據(jù),對(duì)模型進(jìn)行更新,然后再去從終端提升數(shù)據(jù)的量和質(zhì)。
在通用人工智能時(shí)代,它會(huì)有一個(gè)智慧的飛輪,這里面人和模型會(huì)產(chǎn)生互動(dòng),人會(huì)給模型輸入什么呢?去輸入Align With Human Intention,就是這個(gè)模型是很強(qiáng)大的,但是它其實(shí)不知道人需要它什么樣的能力。通過(guò)人的反饋,它就更好的能夠去理解人需要它展示什么樣的能力,而去解鎖這個(gè)模型更多的技能。同時(shí),這個(gè)模型給人輸出的是什么呢?是有智慧的一個(gè)內(nèi)容。我們都知道,這些內(nèi)容會(huì)激發(fā)人的各種創(chuàng)作和智慧的產(chǎn)生,所以這其中又會(huì)產(chǎn)生智慧的飛輪。
但是,AGI對(duì)算力的需求是非常大的。ChatGPT具備1750億參數(shù), 需要3000~5000張A100訓(xùn)練卡,而我們也可以看到ChatGPT一次訓(xùn)練的成本是上千萬(wàn)的美金。此外,今天它的推理的成本每天也有幾百萬(wàn)美金高昂的成本在。
商湯從2021年在上海的臨港建立了我們AIDC的超算中心,實(shí)際上是在這方面也有提前的這樣的一個(gè)布局。SenseCore AI大裝置基于2.7萬(wàn)塊GPU的并行計(jì)算系統(tǒng)實(shí)現(xiàn)了5.0 exaFLOPS的算力輸出,可支持最多20個(gè)千億參數(shù)量超大模型(以千卡并行)同時(shí)訓(xùn)練。
從2019年開(kāi)始,商湯從10億參數(shù)的視覺(jué)模型研發(fā),到今天有320億全球最大規(guī)模的通用視覺(jué)的模型。在NLP領(lǐng)域,商湯當(dāng)前也有接近2000億參數(shù)的大模型,包括亦有能力去訓(xùn)練1800億參數(shù)的多模態(tài)的模型。所以,未來(lái)通用人工智能基于多模態(tài)的基模型可以做視覺(jué)的感知,語(yǔ)言的理解、內(nèi)容的生成和決策的推理。
商湯絕影是商湯下面做智能汽車的業(yè)務(wù)板塊,我們堅(jiān)持駕艙云三位一體的發(fā)展策略。我們希望能夠通過(guò)駕艙融合,帶來(lái)更好的駕乘體驗(yàn);AI云能夠去為自動(dòng)駕駛提供數(shù)據(jù)閉環(huán)的服務(wù),能夠通過(guò)提供豐富的產(chǎn)品功能讓智能座艙成為真正的第三生活空間。同時(shí),商湯的AI云也為通用人工智能實(shí)現(xiàn)智能駕駛和智能座艙打下了非常強(qiáng)大的基礎(chǔ)。
我們可以看到,在自動(dòng)駕駛領(lǐng)域,BEV是我們當(dāng)前主流的技術(shù)路線,未來(lái)可以朝多模態(tài)、通用人工智能的方向發(fā)展。我們通過(guò)AIGC可以去生成困難的樣本,我們模型去輸入多模態(tài)的這樣的一些數(shù)據(jù)。其中,自動(dòng)駕駛多模態(tài)的大模型可以做到感知和決策的一體化,輸出則對(duì)3D的環(huán)境進(jìn)行重建實(shí)現(xiàn)環(huán)境的可視化理解,我們的行為解碼可以生成完整的路徑的規(guī)劃。同時(shí),我們動(dòng)機(jī)的解碼器可以用自然語(yǔ)言去描述我們推理的過(guò)程,進(jìn)而使我們自動(dòng)駕駛的系統(tǒng)變得可以解釋。
我們也是基于這些多模態(tài)的大模型可以做到數(shù)據(jù)的感知的閉環(huán)和決策的閉環(huán),從前端自動(dòng)的去采集高質(zhì)量的數(shù)據(jù),利用大模型自動(dòng)的數(shù)據(jù)的標(biāo)注,包括產(chǎn)品的檢測(cè),能夠幾百倍的去提升我們模型迭代的效率并降低它的成本。
在智能座艙板塊,通用人工智能使我們基模型具備空間環(huán)境的理解、用戶狀態(tài)的感知,多模態(tài)的指令,還有多輪對(duì)話,內(nèi)容生成等一系列的能力。它就可以去賦能,作為我們情緒的感知,智能助手,基于情感的對(duì)話、創(chuàng)意、內(nèi)容的生成,個(gè)性的交互等等這一系列功能,不斷地去提升我們的個(gè)性化的體驗(yàn)。也使我們的場(chǎng)景從上車、行車、停車、離車,進(jìn)而拓展到娛樂(lè)、辦公、購(gòu)物、休息,這里面有很多的可以去探索的應(yīng)用的場(chǎng)景。
實(shí)際上,智能汽車是通用人工智能實(shí)現(xiàn)閉環(huán)的一個(gè)非常好的場(chǎng)景,我們已經(jīng)有人機(jī)共駕。未來(lái)我們希望車和模型之間能夠產(chǎn)生更有效的互動(dòng),那就完成了從人到車,到模型這樣的一個(gè)互動(dòng)的閉環(huán),能夠讓通用人工智能為我們提供更好的駕乘體驗(yàn),解鎖無(wú)限的想象空間。
最后,這個(gè)月商湯也在通用人工智能方面會(huì)有我們的技術(shù)日,去介紹一系列的多模態(tài)的大模型,包括語(yǔ)言的大模型、感知的大模型等等。我們希望去與我們的客戶和合作伙伴共同邁向通用的人工智能,謝謝大家!
標(biāo)簽:
據(jù)各方數(shù)據(jù),1月31日上午10時(shí)許,深圳出品的動(dòng)畫(huà)電影《熊出沒(méi)·伴我熊芯》票房突破10億元,在首日票房、檔期票房、連續(xù)破億天數(shù)等多方面打
1月27日,攜程發(fā)布的《2023年春節(jié)旅游總結(jié)報(bào)告》顯示,今年春節(jié),深圳游客的出境游訂單量同比去年增長(zhǎng)近5倍。相較國(guó)內(nèi)熱門景點(diǎn)的人山人海,
1月27日,記者從深圳市文化廣電旅游體育局獲悉,2023年春節(jié)黃金周期間(1月21日至27日),深圳共接待游客469 25萬(wàn)人次,旅游收入31 58億元,
據(jù)深圳市春運(yùn)辦統(tǒng)計(jì),1月15日和16日連續(xù)兩天,深圳對(duì)外發(fā)送旅客人數(shù)都在48萬(wàn)左右,春運(yùn)進(jìn)入客流高峰期。1月15日,深圳春運(yùn)對(duì)外旅客發(fā)送量達(dá)
新年音樂(lè)會(huì)是觀眾喜聞樂(lè)見(jiàn)的年度重要文化品牌活動(dòng),多年來(lái)已成為深圳市民跨歲迎新的例牌項(xiàng)目。12月30日、31日晚,深圳交響樂(lè)團(tuán)將在深圳音樂(lè)
作為來(lái)深科研人員中的一員,中山大學(xué)附屬第八醫(yī)院的助理研究員郭雅婕對(duì)深圳在人才服務(wù)方面的舉措贊不絕口:我作為基礎(chǔ)研究人員,很希望自己
12月1日晚8點(diǎn),2023年故宮年票正式開(kāi)售。相比于去年,今年購(gòu)票順暢了許多。據(jù)了解,2022年故宮年票發(fā)售時(shí),因短時(shí)間內(nèi)購(gòu)買年票人數(shù)過(guò)多,曾
昨日,冷空氣到達(dá),廣州氣溫逐步下降。據(jù)商超方面預(yù)測(cè),隨著氣溫的逐漸下降,市民對(duì)于御寒類商品消費(fèi)需求有所上升,不少?gòu)V州商超準(zhǔn)備了有關(guān)
小井蓋、大民生。今年以來(lái),深圳開(kāi)展全市窨井蓋專項(xiàng)治理工作成效顯著。截至11月20日,全市共排查窨井蓋約350萬(wàn)個(gè),發(fā)現(xiàn)存在問(wèn)題的窨井蓋約3
備受關(guān)注的汕汕(汕頭至汕尾)鐵路汕頭站及站區(qū)工程近日傳出最新動(dòng)態(tài):項(xiàng)目已順利完成工程招標(biāo)工作,由中鐵建設(shè)集團(tuán)有限公司中標(biāo)承建。目前,
世界播報(bào):青島稅務(wù):出口退稅賦動(dòng)能
半島網(wǎng)4月3日訊(記者李京媛通訊員胡丹青)日前,國(guó)家稅務(wù)總局青島市李滄區(qū)稅務(wù)局開(kāi)展出口退稅及年度核銷業(yè)務(wù)線上專場(chǎng)培訓(xùn),落實(shí)國(guó)家支持出口
市立醫(yī)院:眼皮爬滿“蟲(chóng)” 刀到瘤除
半島網(wǎng)4月3日訊(記者李京媛通訊員謝小真)對(duì)于張女士(化名)來(lái)說(shuō),照鏡子是一件“鬧心事”:眼皮上的黃色突起,像一條條蟲(chóng)子,不忍直視……
開(kāi)展“回頭看”,推進(jìn)監(jiān)督閉環(huán),市北
3月30日,街道應(yīng)急辦約談恒泰勝道運(yùn)動(dòng)城負(fù)責(zé)人。會(huì)上通報(bào)了前期市安全生產(chǎn)督導(dǎo)組“回頭看”中發(fā)現(xiàn)的問(wèn)題,并對(duì)企業(yè)的安全生產(chǎn)整改情況進(jìn)行了復(fù)
愛(ài)心義診送健康,貼心服務(wù)“零距離”
為提高轄區(qū)居民健康水平,近期臺(tái)東街道通過(guò)開(kāi)展義診、公益講堂等一系列豐富多彩的活動(dòng),為居民送去貼心服務(wù)和健康知識(shí)。眼科義診進(jìn)社區(qū)服務(wù)為
天天播報(bào):青島地鐵9號(hào)線再傳捷報(bào)!城
3月31日,青島地鐵9號(hào)線建設(shè)再傳捷報(bào),城子站首幅地下連續(xù)墻順利澆筑完成。該地下連續(xù)墻也是9號(hào)線首個(gè)施工的地連墻,自此城子站正式進(jìn)入車站圍
焦點(diǎn)!第12屆壹基金藍(lán)色行動(dòng)啟動(dòng) 助
中新網(wǎng)深圳4月3日電4月2日是世界孤獨(dú)癥日。深圳壹基金公益基金會(huì)連續(xù)第12年啟動(dòng)壹基金藍(lán)色行動(dòng)公益倡導(dǎo)活動(dòng),以“壹家人,不孤獨(dú)”為主題,聯(lián)
王筱宇_關(guān)于王筱宇介紹
王筱宇,關(guān)于王筱宇介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、王筱宇,北京吉利大學(xué)教授。2、公開(kāi)發(fā)表論文,《我國(guó)農(nóng)村金融體制的現(xiàn)實(shí)困境和
全球頭條:王筱倩_關(guān)于王筱倩介紹
王筱倩,關(guān)于王筱倩介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、王筱倩,女,博士,揚(yáng)州大學(xué)建筑科學(xué)與工程學(xué)院講師。2、。關(guān)于王筱倩到此分享
王筠_關(guān)于王筠介紹
王筠,關(guān)于王筠介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、王筠(1784-1854年),字貫山,號(hào)箓友,山東安丘縣(今山東省安丘市)人,清代語(yǔ)
全球觀焦點(diǎn):湖北襄陽(yáng):全面推行二手
湖北襄陽(yáng):全面推行二手房“帶押過(guò)戶”
王筱月_關(guān)于王筱月介紹
王筱月,關(guān)于王筱月介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、王筱月,1993年9月6日出生于重慶市,中國(guó)內(nèi)地流行樂(lè)女歌手。2、2014年4月,參加19
近四百萬(wàn)粉絲 UP 主回應(yīng) B 站停
多位UP主密集地公開(kāi)宣布暫停更新,大部分UP主表示平臺(tái)收益減少、收支難以平衡是停止更新的主要原因 近百萬(wàn)粉絲的知識(shí)領(lǐng)域UP主圖靈的貓對(duì)第一財(cái)
今亮點(diǎn)!“警營(yíng)開(kāi)放日”活動(dòng)別開(kāi)生面
文 羊城晚報(bào)全媒體記者鄭達(dá)通訊員陳瑰琦“各位老師、小朋友們,大家好!”為全方位展現(xiàn)公安隊(duì)伍新風(fēng)貌、新?lián)?dāng)、新作為,提高師生安全防范意識(shí)
天天微頭條丨舉報(bào)電話已公開(kāi)!惠州法
南都訊記者郭秋成2023年4月起至2023年9月,惠州市中級(jí)人民法院將在全市開(kāi)展“惠州執(zhí)行風(fēng)暴2023”專項(xiàng)行動(dòng),嚴(yán)厲打擊逃避執(zhí)行、規(guī)避執(zhí)行、阻礙
環(huán)球新資訊:進(jìn)出站點(diǎn)“多等三秒”溫
公交車進(jìn)站停穩(wěn)后,駕駛員默念三秒后再開(kāi)門;所有乘客上下車完畢后,駕駛員再次默念三秒后才關(guān)門起步……4月2日,城運(yùn)控股交運(yùn)溫馨巴士608路隊(duì)
字母哥:我專注于讓球隊(duì)變得更好 而
直播吧4月3日訊?今日NBA常規(guī)賽,雄鹿在主場(chǎng)以117-104輕取76人。賽后,字母哥接受了記者采訪。他表示自己并沒(méi)有專注于MVP,而是專注于雄鹿整體
世界微速訊:王筠權(quán)_關(guān)于王筠權(quán)介紹
王筠權(quán),關(guān)于王筠權(quán)介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、王筠權(quán),男,漢族。2、1957年10月出生,四川閬中人,研究生學(xué)歷。關(guān)于王筠權(quán)到
麥基:我們需要贏得接下來(lái)的每一場(chǎng)勝
直播吧4月3日訊?今天,NBA常規(guī)賽獨(dú)行俠130-132加時(shí)不敵老鷹,麥基賽后接受了媒體采訪。談到本場(chǎng)失利,麥基表示:“這真的很傷,我們一直在全
當(dāng)前報(bào)道:拼多多小二再次怒斥炸店行
拼多多小二在朋友圈表示,有組織有預(yù)謀的「打砸」行為仍在持續(xù),平臺(tái)「百億補(bǔ)貼」的店鋪和商品成為攻擊的主要目標(biāo) 3月28日起,拼多多平臺(tái)幾
全球短訊!羅蘭·巴爾特“中性”思想
作者:杜寧馨(中國(guó)人民大學(xué)文學(xué)院)在法國(guó)20世紀(jì)的后現(xiàn)代理論中,對(duì)禪道思想的發(fā)現(xiàn)和借用成為法國(guó)思想家反抗“邏格斯中心主義”和“話語(yǔ)霸權(quán)
衛(wèi)子夫的結(jié)局為什么那么慘?衛(wèi)子夫死
衛(wèi)子夫結(jié)局為什么那么慘?衛(wèi)子夫做了38年皇后,本應(yīng)當(dāng)享受富貴終老,但最后卻因?yàn)槭艿轿仔M之禍的牽連,落得橫死的結(jié)局。衛(wèi)子夫是自殺而死。當(dāng)時(shí)
上海政法大學(xué)是211還是985學(xué)校?上海
上海政法大學(xué)是211還是985學(xué)校?上海政法學(xué)院不是985也不是211大學(xué)。上海政法學(xué)院(Shanghai University of Political Science and Law
火燒圓明園發(fā)生在哪一場(chǎng)戰(zhàn)爭(zhēng)中?火燒
火燒圓明園發(fā)生在哪一場(chǎng)戰(zhàn)爭(zhēng)中?火燒圓明園是第二次鴉片戰(zhàn)爭(zhēng)中發(fā)生的。 咸豐十年(1860年)英法聯(lián)軍攻占北京后,占據(jù)圓明園。中國(guó)守軍寡不敵眾
精彩看點(diǎn):戴格諾特:如果球隊(duì)保持這
直播吧4月3日訊?今日NBA常規(guī)賽,雷霆主場(chǎng)118-128不敵太陽(yáng)。賽后,雷霆主帥戴格諾特接受了記者采訪。談到球隊(duì)表現(xiàn),戴格諾特講道:“我們常規(guī)
天天關(guān)注:即將完工!高明這個(gè)片區(qū)改
住在河江片區(qū)的街坊發(fā)現(xiàn)了嗎??jī)?nèi)街巷改造工程即將完工目前已完成工程量的90%改造后,有哪些變化?一起來(lái)看看高明區(qū)內(nèi)街巷改造工程河江區(qū)域在20
今日快看!網(wǎng)簽457套,4月2日佛山樓市
4月2日新房+存量房合網(wǎng)簽457套,其中住宅203套(一手住宅130套)!新房網(wǎng)簽量最高的是順德區(qū)205套,合計(jì)10958㎡,南海區(qū)網(wǎng)簽下滑明顯;二手房成交排行
訊息:王符《潛夫論》釋讀_關(guān)于王符
王符《潛夫論》釋讀,關(guān)于王符《潛夫論》釋讀介紹這個(gè)很多人還不知道,我們一起來(lái)看看!1、《王符《潛夫論》釋讀》是(東漢)王符創(chuàng)作的現(xiàn)當(dāng)代
環(huán)球報(bào)道:詹姆斯:我們有很多進(jìn)攻火
直播吧4月3日訊?今日NBA常規(guī)賽,湖人在客場(chǎng)以134-109大勝火箭,賽后,詹姆斯接受了記者采訪。談到自己及球隊(duì)整體表現(xiàn),詹姆斯說(shuō)道:“今天我
警惕食用河豚魚(yú)、誤食藍(lán)環(huán)章魚(yú)引發(fā)食
河豚魚(yú)、藍(lán)環(huán)章魚(yú)均含有致命河豚毒素,食用會(huì)引發(fā)食物中毒,嚴(yán)重的情況下會(huì)致人死亡。為減少類似事件的發(fā)生,廣東省市場(chǎng)監(jiān)管局發(fā)布食品安全風(fēng)
美太空發(fā)展局發(fā)射首批低軌道衛(wèi)星,主
美國(guó)天軍下屬的太空發(fā)展局(SDA)的「分布式作戰(zhàn)人員太空架構(gòu)」首批衛(wèi)星發(fā)射成功 美國(guó)當(dāng)?shù)貢r(shí)間4月2日,SpaceX公司使用「獵鷹」9火箭將太