博覽會上,商湯絕影基于以座艙大腦為核心的全新智能座艙架構(gòu),首次全方位展示了智能座艙大模型產(chǎn)品體系,將安全舒適、極簡交互以及個性懂你的智能座艙體驗(yàn)帶到全球消費(fèi)者面前。IAA MOBILITY 2023商湯絕影展臺(展位號:A2館D30)商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家、絕影智能汽車事業(yè)群總裁王曉剛作為中國汽車供應(yīng)鏈杰出代表,受邀參加IAA首次舉辦的中國媒體溝通會,同時還在車展期間帶來《通用人工智能時代下的智能汽車》的主題演講。
王曉剛表示:“商湯絕影自誕生起就蘊(yùn)含著國際化的基因,在多年的創(chuàng)新與實(shí)踐中逐步發(fā)展成為駕、艙、云三位一體的架構(gòu)體系,如今走向全球恰逢其時。此次車展可以說是AGI時代一個令人興奮的新起點(diǎn),我們期待將長期沉淀的大模型技術(shù)能力和量產(chǎn)經(jīng)驗(yàn)帶給全球客戶,讓智能座艙變成暖心懂你的好管家,讓智能駕駛變成安全可靠的老司機(jī),共同開啟人機(jī)共駕的新體驗(yàn)。”
自2016年與本田合作以來,7年來商湯絕影已與超過30家國內(nèi)外新勢力車企、傳統(tǒng)車企和合資車企強(qiáng)強(qiáng)聯(lián)合,累計(jì)前裝定點(diǎn)數(shù)量已超3600萬臺。
▎大模型加持座艙大腦,打造“懂你”的管家式體驗(yàn)
傳統(tǒng)智能座艙大多只能提供預(yù)設(shè)功能,決策和控制均基于規(guī)則,難以進(jìn)行差異化的服務(wù),也無法隨著用戶的使用而進(jìn)化。
大模型強(qiáng)大的認(rèn)知理解、邏輯思維能力配合絕影團(tuán)隊(duì)打造的專屬記憶模塊,可以將離散的單點(diǎn)功能串聯(lián)在一起,把“懂你”的管家式體驗(yàn)帶進(jìn)現(xiàn)實(shí)。
在今年4月上海車展期間,商湯絕影首次展示了“大模型上車”的人性化體驗(yàn)。不到半年,商湯絕影完成了以座艙大腦為核心的架構(gòu)升級,并將智能座艙大模型產(chǎn)品體系帶到博覽會現(xiàn)場。
商湯絕影智能座艙大模型產(chǎn)品體系以車端多模態(tài)感知和云端大模型服務(wù)作為基礎(chǔ),以車艙大腦作為核心,結(jié)合安全、娛樂、教育、效率等用戶可感知場景設(shè)計(jì),并通過數(shù)字人作為用戶交互窗口,打造“更懂你、有思想、有邏輯”的車載管家。
比如:
-
健康問診:利用車內(nèi)的視覺健康檢測技術(shù),結(jié)合醫(yī)療垂域模型,快速處理車上應(yīng)急情況;
-
旅游攻略:通過自然語言準(zhǔn)確理解用戶意圖,進(jìn)行旅游推薦和規(guī)劃,并完成地圖、酒店等服務(wù)的生態(tài)打通,讓旅游更省心;
-
兒童模式:可為不同年齡段的孩子們提供有趣的故事伴讀和互動問答,還能和孩子們共讀古詩詞、共創(chuàng)故事,引導(dǎo)和開發(fā)兒童想象力,讓全家出游充滿溫馨氛圍;
-
AI說明書:“AI說明書”可借助大模型的長文本理解等能力,讓用戶只需通過自然語言與系統(tǒng)交流,就能方便獲取車輛使用說明;
-
疲勞緩解:DMS系統(tǒng)感知到用戶疲勞以后,大模型可以根據(jù)用戶的使用習(xí)慣和當(dāng)前環(huán)境推薦不同的系統(tǒng)操作來緩解,比如推薦音樂或者聊些用戶感興趣的話題;
-
新聞概要:系統(tǒng)可以自動搜索和總結(jié)用戶感興趣的新聞,在用戶上車場景做快速的介紹;
-
角色切換:大模型可以模擬不同的用戶角色與車內(nèi)用戶進(jìn)行交流,或嚴(yán)肅或活潑,非常適合兒童的童趣對話;
-
隔空作畫:結(jié)合座艙視覺感知系統(tǒng)捕捉手部位置,生成繪畫草圖,利用大模型能力根據(jù)草圖直接生成符合用戶意圖的畫作。
-
與國內(nèi)車企緊密合作,將各種遮擋、眼睛反光、頭姿視線不一致、不同坐姿、小眼睛大角度等長尾問題的誤報率降至萬分之一,到達(dá)行業(yè)領(lǐng)先水平。
-
通過歐盟DDAW(駕駛員嗜睡和注意力警告)認(rèn)證,且測試結(jié)果遠(yuǎn)高于DDAW的法規(guī)要求,并達(dá)到Euro NCAP(歐洲新車安全評鑒協(xié)會)法規(guī)標(biāo)準(zhǔn),為合作車型在歐洲上市保駕護(hù)航。
▎全球之旅率先啟程,助力蔚來、高合等車企進(jìn)軍國際市場作為具有國際化基因的智能汽車時代通用人工智能核心供應(yīng)商,商湯絕影的歐洲之旅已先于本次博覽會啟程。
目前,商湯絕影的定點(diǎn)車型中有近20款海外車型,已助力蔚來、高合等國內(nèi)知名汽車品牌進(jìn)軍國際市場。
蔚來在歐洲售賣的全系5款車型已全部搭載商湯絕影的多項(xiàng)AI技術(shù)。比如,商湯絕影Face ID技術(shù)可以在用戶落座后,一步到位將各項(xiàng)個性化設(shè)置調(diào)整為用戶的個人偏好。當(dāng)感知到艙內(nèi)乘員時,系統(tǒng)還會自動調(diào)節(jié)空調(diào)風(fēng)向,營造更智能舒適的艙內(nèi)環(huán)境。兒童關(guān)懷&兒童遺忘檢測系統(tǒng)還可在感知到兒童意外留置車內(nèi)時,及時反饋給NOMI語音助手,暖心守護(hù)家人安全。
高合HiPhi X豪華超跑SUV可通過B柱驗(yàn)證駕駛員身份,讓用戶無感上車,解放雙手。 高合HiPhi Z豪華純電超跑GT則同時搭載了DMS駕駛員感知系統(tǒng)與OMS乘員感知系統(tǒng),不僅可及時預(yù)警駕駛員疲勞分心狀態(tài),還可智能感知乘員手勢進(jìn)行美顏拍照,一路守護(hù)駕乘安全的同時豐富車載娛樂體驗(yàn)。除了智能座艙,商湯絕影作為國內(nèi)第一批率先激活L2++級別自動駕駛量產(chǎn)的服務(wù)商,也在大模型的加持下,實(shí)現(xiàn)了核心技術(shù)的再度突破。商湯聯(lián)合團(tuán)隊(duì)提出的UniAD(Unified Autonomous Driving)自動駕駛通用算法框架獲得2023年度CVPR最佳論文,首次將檢測、跟蹤、建圖、預(yù)測及規(guī)劃整合到一個基于 Transformer 的端到端網(wǎng)絡(luò)框架下,實(shí)現(xiàn)多目標(biāo)追蹤準(zhǔn)確率提升20%、車道線預(yù)測準(zhǔn)確率提升30%、目標(biāo)軌跡預(yù)測誤差下降38%、規(guī)劃誤差下降28%。新算法的量產(chǎn)預(yù)計(jì)將于2023年四季度準(zhǔn)備就緒,進(jìn)一步提高絕影自動駕駛產(chǎn)品的行業(yè)競爭力。
今年上半年,商湯絕影成績亮眼,量產(chǎn)業(yè)務(wù)同比增長5.7倍,量產(chǎn)交付數(shù)量達(dá)到39萬臺車,新增定點(diǎn)數(shù)量達(dá)500多萬臺,累計(jì)定點(diǎn)車型160多款。
德國是現(xiàn)代汽車的發(fā)祥地,商湯絕影將以IAA MOBILITY為舞臺,推動大模型“脫虛向?qū)崱保c全球車企一同打開智能汽車的無盡想象空間,推動駕乘體驗(yàn)躍遷升級。
相關(guān)閱讀,戳這里
《商湯絕影智能汽車事業(yè)群總裁王曉剛:通用人工智能下的智能汽車》
《商湯絕影與深圳前海管理局、巴士集團(tuán)達(dá)成戰(zhàn)略合作》
原文標(biāo)題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產(chǎn)品體系
文章出處:【微信公眾號:商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
-
商湯科技
+關(guān)注
關(guān)注
8文章
518瀏覽量
36132
原文標(biāo)題:商湯絕影“亮劍”慕尼黑車展,首秀智能座艙大模型產(chǎn)品體系
文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
相關(guān)推薦
評論