色哟哟视频在线观看-色哟哟视频在线-色哟哟欧美15最新在线-色哟哟免费在线观看-国产l精品国产亚洲区在线观看-国产l精品国产亚洲区久久

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Nauto的“ADAS+DMS”的融合模型

Astroys ? 來源:Astroys ? 2023-05-30 11:11 ? 次閱讀

隨著DMS即將廣泛采用,初創(chuàng)公司Nauto看到了一個機會,通過融合艙外和艙內(nèi)攝像頭的數(shù)據(jù),將其AI算法出售給OEM。Nauto是否真的在正確的時間推出了正確的技術(shù)呢?

許多車廠已經(jīng)在多款車型上采用了ADAS,搭載多個攝像頭。同時,車廠也在搭載DMS,用攝像頭監(jiān)控車內(nèi)人類駕駛員的行為。

但這兩個系統(tǒng)從來都不是一起工作的。ADAS和DMS由不同的供應(yīng)商開發(fā),兩個系統(tǒng)間的數(shù)據(jù)也無法互相關(guān)聯(lián)(雖然說的不是一回事,但我總是能想起小鵬車主下跪刷臉是怎么回事……)。

加州Palo Alto的初創(chuàng)公司Nauto,希望改變這一情況。通過一個平臺,融合車輛外部和內(nèi)部生成的數(shù)據(jù),Nauto相信它將有助于提升道路與駕駛安全。

Nauto的創(chuàng)始人兼CEO Stefan Heck解釋說,“消費者反饋顯示,許多駕駛員對ADAS或DMS經(jīng)常發(fā)出的誤報感到惱火。這代表行業(yè)還沒有做對這一點。”

數(shù)據(jù)融合

從2015年起,Nauto就一直在用艙內(nèi)攝像頭監(jiān)控商業(yè)車隊駕駛員的行為。同時,Nauto也一直用艙外攝像頭監(jiān)控道路。這項研究收集了有關(guān)行人、騎自行車的人和其他車輛行為的知識。它捕獲了許多險些發(fā)生、緊急避險和高風險事件的場景。

通過結(jié)合艙外和艙內(nèi)攝像頭的數(shù)據(jù),Nauto看到了駕駛員分心行為和道路上實時發(fā)生的風險之間的關(guān)聯(lián)。該公司表示,它已經(jīng)分析了“數(shù)十億的數(shù)據(jù)點”,并開發(fā)了“可以預(yù)測、防止和減少高風險事件的算法。”

800個車隊

當Heck創(chuàng)立Nauto時,科技行業(yè)對完全自動駕駛汽車(AV)充滿了期待。當時人們都在預(yù)測,AV的大量涌現(xiàn)意味著計算機駕駛員不僅將取代人類出租車和卡車司機,而且還會使街道更加安全。

與眾不同的是,Heck一直專注于幫助人們更好地駕駛,而不是取代他們。Nauto表示,其原始使命是為期八年,目的是為車隊駕駛員提供預(yù)防碰撞的能力。

將Nauto與大多數(shù)其他AV初創(chuàng)公司區(qū)分開來的是兩種商業(yè)實踐:首先,與商業(yè)車隊服務(wù)運營商建立合作關(guān)系;其次,專注于后市場以啟動Nauto平臺的部署。

Heck說,最初,Nauto強調(diào)的是艙內(nèi)發(fā)生的場景。但在這個過程中,Nauto也收集了艙外的風險數(shù)據(jù),例如追尾、斑馬線上的行人、信號燈和停車標識。

在開發(fā)AI算法來預(yù)測高風險事件時,Nauto采用了基于深度學習的方法,使用從800個商業(yè)車隊收集的數(shù)據(jù)。Heck估計,800個車隊相當于200,000名司機,車輛總數(shù)稍微少一些。

Nauto 學到了什么?

對于從200,000名車隊駕駛員收集的數(shù)據(jù),Heck說,“所有碰撞事故的70%都是由駕駛員不注意引起的。比如使用手機、吃東西、低頭做別的事或困倦,導致了分心。”

這都讓Heck感到驚訝。他解釋說,這意味著“整個汽車行業(yè)歷來都只專注于那余下的30%,而忽視了由艙內(nèi)引發(fā)的70%的風險。”

Heck稱駕駛員分心是“流行病”。盡管有這樣的證據(jù),但車內(nèi)監(jiān)控仍然是一個相對新的功能。當Euro NCAP開始評估能有效檢測疲勞和分心的DMS時,汽車OEM們才開始有動力接受DMS。

安全專家們越來越認為,來自DMS的準確信息對安全至關(guān)重要。因為具有可脫手自動駕駛的車輛正在陸續(xù)推出。

當車廠允許人類駕駛員放開方向盤時,DMS是一個后備方案,它能準確地顯示出當計算機駕駛員需要接管方向盤時,人類司機正在做什么。

Nauto的路線圖

八年過去了,Nauto在車隊領(lǐng)域中取得了突破。Nauto的技術(shù)已被用于監(jiān)控商業(yè)車隊駕駛員以提高安全性。

那么,接下來會是什么呢?Heck說,Nauto的路線圖上有四件事。

首要的是“融合”。

Nauto正在努力融合車輛的外部和內(nèi)部風險,創(chuàng)建一個“在駕駛監(jiān)控之上的下一級能力”。

Heck覺得車廠對有效的DMS越來越感興趣,而這正是Nauto的機會。

Heck說,內(nèi)外攝像頭數(shù)據(jù)的融合產(chǎn)生了全面的安全光譜。“如果我們知道駕駛員分心了,我們會在碰撞之前更早介入。”他稱這是“一種新能力”,因為像前方碰撞預(yù)警這樣的ADAS功能通常獨立于DMS運行。

a6290f3e-fe81-11ed-90ce-dac502259ad0.png

其次,Nauto的產(chǎn)品之前大部分在售后市場銷售,但即將進入OEM車輛。可以從BrightDrop獲得集成了Nauto的電動送貨車。Heck表示,Navistar正在推出搭載了Nauto的商用卡車,“在接下來的幾個月里還有更多的合作伙伴。”

第三,Nauto正在研究集成的保險模型。“我們有一個合作伙伴關(guān)系,任何公用事業(yè)公司只要有合適的保險供應(yīng)商,就可以有效地免費獲取Nauto。”Heck提到了Nauto與英國最大的商業(yè)保險公司Aviva的試點項目。Nauto的下一個目標是美國。

Heck表示,公司的下一個目標是讓Nauto設(shè)計到乘用車中。盡管尚未宣布,但計劃是“首先將Nauto集成到輕型商用車、貨車和皮卡中……然后擴展到其它車型。”

硬件構(gòu)成

任何好的AI算法都需要優(yōu)秀的硬件,即合適的攝像頭和計算單元。那么,Nauto的售后市場平臺的硬件構(gòu)成是什么呢?

Nauto平臺的艙外攝像頭采用了Sony圖像傳感器,而艙內(nèi)攝像頭則是Omnivision的圖像傳感器。計算單元采用了Qualcomm Snapdragon 845,集成了高端GPUDSP和8個Arm內(nèi)核。

Heck說,Nauto在Snapdragon上運行的艙內(nèi)和艙外算法最高可達每秒15幀。Nauto在Snapdragon的Arm內(nèi)核上運行其融合模型。

Nauto平臺可從OBD端口獲取數(shù)據(jù),使Nauto能夠讀取剎車位置、安全氣囊部署和其他車內(nèi)機械裝置。Nauto從GPS傳感器和多普勒接收車輛位置和速度數(shù)據(jù),然后融合所有數(shù)據(jù)。

當被問到這是如何工作時,Heck說:“我們會查看你面前是否有威脅,你正在以多快的速度行駛,你是否正在轉(zhuǎn)彎,以及你是否已經(jīng)在剎車。然后我們會監(jiān)控你的注意力狀態(tài)。如果你在保持專注,并且已經(jīng)開始剎車,我們不會干擾,因為我們知道你已經(jīng)看到了威脅,并且已經(jīng)在應(yīng)對它。但如果你正在加速或保持速度不變,而你面前有威脅,而你正在看手機或喝咖啡,那么我們會警告你并進行干預(yù)。”

那么,如果OEM想要在他們的車輛中使用Nauto,他們需要添加什么呢?

車輛應(yīng)該有一個200-500MP的艙外攝像頭,Heck說:“低于720P,就很困難了。如果沒有艙內(nèi)攝像頭顯然是個問題。但是,好在現(xiàn)在每個車廠都在考慮在他們的新車中增加DMS。”

大多數(shù)車輛已經(jīng)有了GPS和LTE。但是算力呢?

Heck承認,這個特性的差別很大。對于使用Intel/Mobileye的車輛,Nauto運行在Xeon上。對于部署了Qualcomm高端汽車平臺的其他車輛,則沒有問題。Heck指出,現(xiàn)在只有少數(shù)OEM使用Nvidia。Nauto已經(jīng)在Nvidia上進行了測試,但尚未部署。

關(guān)于Nauto的融合模型所需的處理能力,Heck表示:“這不是一個黑白分明的問題,因為算法的不同部分消耗的計算量不同……一般來說,它需要幾個TOPS。”

通過在AV堆棧上增加Nauto的融合模型,汽車OEM能獲得什么呢?Heck表示,Nauto可以為人類駕駛員提供更細顆粒度的安全介入。

“你看到一個行人正在你面前過馬路。如果你看著前方道路卻沒有做出反應(yīng),那就是……典型的行人碰撞預(yù)警的場景。所以,這種情況下我們只會在碰撞前約三秒鐘才介入。但如果你正在看手機,根本沒看行人,我們可能會在碰撞前四秒介入。而如果你已經(jīng)開始剎車,然后,也在看行人,那么,我們就不會介入。”

Heck說,融合的目標是“稀疏但有效地介入。”

當Nauto供應(yīng)售后市場產(chǎn)品時,它也提供了它開發(fā)的所有ADAS和DMS軟件部分。

但對于OEM車輛,所有的軟件部分都是“可選的”。例如,如果OEM更喜歡Mobileye的ADAS系統(tǒng)和Seeing Machines的DMS,那沒問題。OEM需要做的就是在他們的堆棧上添加Nauto更安全的融合模型。Nauto的模型可以授權(quán)。

競爭

盡管市面上還沒有ADAS+DMS融合模型,但Nauto可能不會長時間保持優(yōu)勢。

一些DMS技術(shù)供應(yīng)商正在他們的DMS算法中研發(fā)融合模型。

然而,Heck強調(diào)了Nauto的領(lǐng)先地位。“我們是行業(yè)先驅(qū),我們擁有一些非常基本的關(guān)于內(nèi)外融合的專利。”他沒有詳細說明,但補充說,“想要繞過這一點將會很困難。”

大數(shù)據(jù)也是Nauto的明顯優(yōu)勢。因為Nauto起初在商用車隊中開始運營,積累了關(guān)于內(nèi)外關(guān)系的數(shù)據(jù)。Heck表示,Nauto的大部分競爭對手要么“只關(guān)注艙內(nèi),要么只關(guān)注艙外,他們從未同時關(guān)注過兩者。”

接著是行駛里程。比起Waymo積累的2000萬英里(這是所有自動駕駛公司中最高的),Nauto已經(jīng)行駛了30億英里。

最后,因為Nauto一直與車隊合作,Heck說:“我們實際上知道其中涉及的經(jīng)濟風險。我們不僅會看它是否會導致碰撞,還會看碰撞的嚴重程度,以及會造成多大的損失。”

這種知識,在一個可預(yù)見的危險情況下,將促使Nauto的技術(shù)提前介入。另一方面,在較不危險的情況下,Nauto可以給予駕駛員更多的自由裁量權(quán)。Heck相信,管理這些變量最終可能會決定融合模型的用戶接受度。

Nauto已經(jīng)進行了三輪融資,擁有約150名員工,其中三分之一是合同工。雖然尚未盈利,但Heck表示Nauto還處于“成長階段”,可能在幾年后進行IPO。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 攝像頭
    +關(guān)注

    關(guān)注

    60

    文章

    4851

    瀏覽量

    95932
  • adas
    +關(guān)注

    關(guān)注

    309

    文章

    2187

    瀏覽量

    208720
  • 自動駕駛
    +關(guān)注

    關(guān)注

    784

    文章

    13877

    瀏覽量

    166629

原文標題:Nauto的“ADAS+DMS”的融合模型

文章出處:【微信號:Astroys,微信公眾號:Astroys】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    商湯科技推出“日日新”融合模型

    剛剛,商湯正式推出“日日新”融合模型,領(lǐng)先實現(xiàn)原生融合模態(tài),深度推理能力與多模態(tài)信息處理能力均大幅提升,并在兩大權(quán)威評測榜單奪得第一,成為“雙冠王”。
    的頭像 發(fā)表于 01-10 15:59 ?162次閱讀

    守護駕駛安全,駕駛員監(jiān)控系統(tǒng)DMS應(yīng)用解決方案

    汽車駕駛員監(jiān)控系統(tǒng)又稱DMS,是一種集中在車輛中的技術(shù),用于實時跟蹤和評估駕駛員狀態(tài)及駕駛行為。隨著汽車產(chǎn)業(yè)智能化轉(zhuǎn)型,整合AI技術(shù)的DMS逐漸成為主流,AI模型通過大量數(shù)據(jù)進行持續(xù)訓練,使得駕駛
    的頭像 發(fā)表于 12-19 17:28 ?860次閱讀
    守護駕駛安全,駕駛員監(jiān)控系統(tǒng)<b class='flag-5'>DMS</b>應(yīng)用解決方案

    國產(chǎn)硅振替換SiTime應(yīng)用于汽車DMS,相位抖動低于350fs

    國產(chǎn)硅振替換SiTime應(yīng)用于汽車DMS,相位抖動低于350fs
    的頭像 發(fā)表于 12-16 09:52 ?139次閱讀
    國產(chǎn)硅振替換SiTime應(yīng)用于汽車<b class='flag-5'>DMS</b>,相位抖動低于350fs

    智駕軟件冒煙測試之測試管理軟件解決方案#ADAS #自動駕駛 #冒煙測試

    adas
    北匯信息POLELINK
    發(fā)布于 :2024年09月29日 13:41:46

    MXoptiCal-簡化精密測量-只需幾個步驟即可實現(xiàn)一致的目標測量#ADAS

    adas
    北匯信息POLELINK
    發(fā)布于 :2024年09月20日 10:16:32

    減少基于攝像頭的駕駛員監(jiān)控系統(tǒng)(DMS)的布線量

    電子發(fā)燒友網(wǎng)站提供《減少基于攝像頭的駕駛員監(jiān)控系統(tǒng)(DMS)的布線量.pdf》資料免費下載
    發(fā)表于 08-28 10:26 ?1次下載
    減少基于攝像頭的駕駛員監(jiān)控系統(tǒng)(<b class='flag-5'>DMS</b>)的布線量

    ADAS功能安全HiL仿真測試系統(tǒng)介紹#ADAS #VTHiL

    adas
    北匯信息POLELINK
    發(fā)布于 :2024年08月03日 20:07:34

    ADAS系統(tǒng)組成簡介#ADAS

    adas
    北匯信息POLELINK
    發(fā)布于 :2024年08月03日 20:05:37

    LeddarTech和Immervision達成合作,加速ADAS和AD感知模型訓練

    近日,汽車技術(shù)領(lǐng)域的兩家領(lǐng)軍企業(yè)LeddarTech和Immervision宣布達成合作,共同推動高級駕駛輔助系統(tǒng)(ADAS)和自動駕駛(AD)感知模型訓練的發(fā)展。
    的頭像 發(fā)表于 05-11 10:44 ?405次閱讀

    LeddarTech 和 Immervision 聯(lián)合宣布 合作加速 ADAS 和 AD 感知模型訓練

    宣布了一項合作,旨在簡化感知模型訓練過程,使其更快、更具成本效益并減少數(shù)據(jù)密集度。LeddarTech 是一家汽車軟件公司,為高級駕駛輔助系統(tǒng)?(ADAS) 和自動駕駛?(AD) 和停車應(yīng)用,提供
    的頭像 發(fā)表于 05-09 10:54 ?597次閱讀
    LeddarTech 和 Immervision 聯(lián)合宣布 合作加速 <b class='flag-5'>ADAS</b> 和 AD 感知<b class='flag-5'>模型</b>訓練

    英特爾開發(fā)套件『哪吒』在Java環(huán)境實現(xiàn)ADAS道路識別演示 | 開發(fā)者實戰(zhàn)

    本文使用來自O(shè)penModelZoo的預(yù)訓練的road-segmentation-adas-0001模型ADAS代表高級駕駛輔助服務(wù)。該模型識別四個類別:背景、道路、路緣和標記。硬件
    的頭像 發(fā)表于 04-29 08:07 ?607次閱讀
    英特爾開發(fā)套件『哪吒』在Java環(huán)境實現(xiàn)<b class='flag-5'>ADAS</b>道路識別演示 | 開發(fā)者實戰(zhàn)

    車載智能終端設(shè)備ADAS|DMS_智能汽車行車記錄儀方案

    內(nèi)容。另外,它還支持雙TF卡音視頻存儲、4G網(wǎng)絡(luò)實時視頻傳輸以及北斗/GPS定位功能。更重要的是,它內(nèi)置了主動安全算法,可以實現(xiàn)安全駕駛預(yù)警功能。因此,這款ADAS/DMS車載智能終端廣泛應(yīng)用于網(wǎng)約車
    的頭像 發(fā)表于 04-23 19:54 ?823次閱讀
    車載智能終端設(shè)備<b class='flag-5'>ADAS</b>|<b class='flag-5'>DMS</b>_智能汽車行車記錄儀方案

    英特爾開發(fā)套件在Java環(huán)境實現(xiàn)ADAS道路識別演示

    本文使用來自O(shè)pen Model Zoo的預(yù)訓練的 road-segmentation-adas-0001模型ADAS 代表高級駕駛輔助服務(wù)。該模型識別四個類別:背景、道路、路緣和標
    的頭像 發(fā)表于 04-20 10:32 ?597次閱讀
    英特爾開發(fā)套件在Java環(huán)境實現(xiàn)<b class='flag-5'>ADAS</b>道路識別演示

    TC系列可以做ADAS嗎?

    TC系列可以做ADAS嗎?
    發(fā)表于 02-06 08:22

    請問ADAS實際道路在線評測系統(tǒng)需要采集什么數(shù)據(jù)?

    ADAS實際道路在線評測系統(tǒng)需要采集什么數(shù)據(jù)?
    發(fā)表于 02-01 06:01
    主站蜘蛛池模板: 涩涩免费视频软件| 妓女嫖客叫床粗话对白| 草莓视频在线看免费高清观看 | 国产成人精品免费视频下载| 国产人妻XXXX精品HD电影| 久久久综合中文字幕久久| 欧美色图一区二区三区| 亚洲免费视频观看| xxx性欧美在线观看| 果冻传媒AV精品一区| 免费网站在线观看国产v片| 十大禁止安装的黄台有风险| 最新毛片网| 黑人干亚洲人| 拔萝卜在线高清观看视频| 和姐姐做插得很深| 日本二区三区欧美亚洲国| 影音先锋xfplay影院av| 国产午夜人做人免费视频中文| 日本午夜视频在线| 99视频精品在线| 久久亚洲伊人| 久久免费看少妇高潮A片2012| 小学生偷拍妈妈视频遭性教育 | 亚洲 日韩 国产 中文视频| 99热久这里都是精品小草| 日本内射精品一区二区视频| 精品亚洲国产熟女福利自在线| 十分钟视频影院免费| 99久久免费精品国产| 久久精品国产清白在天天线| 亚州综合网| 国产精品色欲AV亚洲三区软件| 青青伊人国产| xxx日本高清视频hd| 青娱乐极品视觉盛宴av| free18sex性自拍裸舞| 欧美亚洲国内日韩自拍视频| a级全黄试频试看30分钟| 青草久久影院| 第七色男人天堂|