電子發燒友網報道(文/李彎彎)事件相機最早誕生于1990年,那時候,許多研究人員探討動物感知環境的方式,發現對變化更為敏感,所以設計出了實驗室用的事件相機。2008年,誕生了第一款商用的事件相機。如今國內外都有企業和機構進行事件相機的研究。
事件相機的工作原理和優勢
傳統相機,無論是CMOS傳感器,還是CCD傳感器,亦或是RGBD相機,都有一個參數:幀率。它們是以恒定的頻率拍攝獲取圖像。這樣,即使幀率能夠達到1KHz,那也具有1ms的延時。所以傳統相機存在一定的延遲問題。 此外,傳統相機需要通過一定時間的曝光,使感光器件積累一定的光子,那么在曝光時間之內如果物體在高速運動,則會產生模糊,這也是傳統相機的一個問題。 另外,傳統相機的攻臺范圍較低,具體表現為在光線極差或者亮度極高時,相機獲取的信息有限。這些問題極大的限制了傳統相機在一些應用場景中的應用。 而事件相機則可以很好的解決這些問題。事件相機,也稱神經形態像機,或動態視覺傳感器(DVS,Dynamic Vision Sensor),是一種能夠響應局部亮度變化的成像傳感器。 事件相機不像常規相機那樣使用快門捕獲圖像。相反,事件相機中的每個像素都獨立且異步地運行,并在發生亮度變化時輸出這些變化,否則保持沉默。 下圖可以非常形象的展示出事件相機和傳統相機在工作原理上的不同。左側:假設拍攝的是一個圓盤轉動(圓盤此時逆時針轉動一段時間然后停止)。右側:上面是傳統相機,圓盤停止時,標準相機輸出不間斷,然而這些信息其實不是我們關注信息。下面是事件相機,其輸出信息為亮度動態變化的位置,并且當圖片無變化時即為 no events,無輸出。 此前有業內人士對電子發燒友表示,基于這樣的工作原理,事件相機有幾個典型的特點:一是它的動態范圍非常高,可以達到140dB;二是因為它只輸出有效信息,不輸出無效信息,它的數據量非常小;三是它的速度非常快,可以達到1/10000s,甚至更高。 因為這些特點,事件相機可適用于傳統相機難以解決的一些場景中。比如城區場景中的鬼探頭,傳統相機在面對橫向的鬼探頭場景時,無法快速做出反應,而事件相機可以更快感知到危險信號;再比如高速場景下的避障,車輛在高速上快速行駛時,遇到前方路面有一個輪胎,傳統相機不能及時做出反應,事件相機可以依靠低時延優勢,快速識別并做出避障的動作。事件相機的研究企業和應用目前,不少公司都在致力于事件相機的發展,包括iniVation、prophesee(普諾飛思)、索尼(收購Insightness)、芯侖光電(韋爾股份子公司)、銳思智芯(Alpsentek)等。 iniVation起源于瑞士,由基于事件視覺的發明者創立。該公司已經推出多款產品,熱門型號包括:DAVIS346 Color / Mono、DVXplorer、DVXplorer Lite / Mini、Stereo Kit等。 iniVation的動態視覺平臺可為諸多應用和行業提供支持和解決方案,包括物聯網(超低功耗監控和智慧城市)、自動駕駛(車輛測距、SLAM和乘員監控)、機器人技術(場景理解與定位)、工業視覺(過程監控和基礎設施檢測)等。 Prophesee于2014年成立于法國巴黎,專注于神經擬態視覺傳感技術,目前基于事件的視覺技術推出多款傳感器。其研發的普諾飛思原視覺(Metavision)傳感器可應用于手機、自動駕駛、工業自動化、物聯網、AR/VR、醫療設備等領域。 比如在智能駕駛領域,Xperi旗下子公司DTS基于普諾飛思原視覺(Metavision)傳感技術提供的事件數據,開發了基于神經擬態視覺系統的駕駛員監控解決方案(DMS),提供了更優的微光性能,以及新的檢測功能,如眼跳或微表情檢測等。再比如,高級駕駛輔助軟件開發商Terranet AB與梅賽德斯-奔馳共同開發的VoxelFlow傳感器,采用了普諾飛思原視覺(Metavision)傳感器,可掃描車輛周圍半徑為40米的區域,反應時間為3毫秒。 銳思智芯成立于2019年,擁有一支兼備芯片、算法、軟件和硬件研發經驗與能力的團隊,核心專家來自全球頂尖機構。在高端視覺傳感器領域擁有超過16年的技術積累,在事件相機領域擁有超過8年的研究經驗。 2021年10月,銳思智芯(Alpsentek)發布了首款融合仿生事件視覺傳感器芯片——ALPIX-Pilatus(簡稱 ALPIX-P)。專為機器感知設計的傳感器,可廣泛應用于機器人、智能手機、無人駕駛、無人機、安防等場景。 ALPIX-P 采用銳思智芯自主研發的 Hybrid Vision融合式仿生事件視覺傳感技術,即將仿生事件視覺技術與傳統圖像傳感技術在像素級別進行融合。芯片可以在傳統圖像傳感器模式和仿生事件相機模式之間快速切換,實現事件相機與 CIS 相機功能 “二合一”。 在圖像模式下,ALPIX-P 是一款最高幀率為 120 幀的全局曝光傳感器,其圖像質量與現有的商化的 CIS 輸出的圖像質量一致,兼容現有成熟的視覺系統。在仿生事件相機模式下,ALPIX-P 具有超高幀率,高有效信息占比,大動態范圍的特點。
小結 事件相機的核心是神經擬態,神經擬態技術最早源于瑞士蘇黎世聯邦理工學院(ETH Zurich)。目前研究的企業主要有兩個方向,一是傳感器,即事件相機,就是文章提到的幾家公司;另一個是神經擬態計算,主要是SoC芯片,如九天睿芯、時識科技。目前從兩個方向來看,神經擬態在產品和應用上都有不錯的進展。 ?
聲明:本文由電子發燒友原創,轉載請注明以上來源。如需入群交流,請添加微信elecfans999,投稿爆料采訪需求,請發郵箱huangjingjing@elecfans.com。 更多熱點文章閱讀
- 車載大屏產業鏈分析,主要玩家都有誰?
- 谷歌3D全息電話亭,顛覆現有視頻通話!宛如真人面對面
- 富士康Model B/V正式發布,ALL IN電動車代工,全產業鏈布局格局顯現
- 半導體TOP 10廠商股價集體腰斬,臺積電再傳危機信號
- 2026年交付!索尼造車終于塵埃落定,本田成代工廠
原文標題:?事件相機的工作原理和應用場景
文章出處:【微信公眾號:電子發燒友網】歡迎添加關注!文章轉載請注明出處。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
相機
+關注
關注
4文章
1358瀏覽量
53721
原文標題:?事件相機的工作原理和應用場景
文章出處:【微信號:elecfans,微信公眾號:電子發燒友網】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
系統放大器的技術原理和應用場景
系統放大器是一種重要的電子設備,其技術原理和應用場景都具有一定的專業性和廣泛性。以下是對系統放大器的技術原理和應用場景的詳細介紹:一、技術原理系統放大器的工作原理基于電子器件的非線性特性,通過控制
發表于 11-18 14:46
實時示波器的技術原理和應用場景
實時示波器是一種高性能的電子測量儀器,其技術原理和應用場景對于電子工程和通信技術領域具有重要意義。以下是對實時示波器的技術原理和應用場景的詳細解釋:一、技術原理實時示波器的工作原理基于電子束在熒光屏
發表于 10-23 14:22
超聲波測厚儀的技術原理和應用場景
超聲波測厚儀的技術原理和應用場景詳細如下:技術原理超聲波測厚儀利用超聲波脈沖反射原理來測量材料的厚度。具體工作原理如下:
發射超聲波脈沖:測厚儀的探頭(也稱為換能器)向被測物體發射一束高頻超聲波脈沖
發表于 09-27 15:06
UPS的工作原理及應用場景
介紹UPS的定義與功能、工作原理以及廣泛的應用場景。 一、定義與功能 持續供電:UPS能夠在市電中斷或不穩定時,依靠內置的電池組為連接的設備提供穩定的電力,從而確保這些設備不因外部電力問題而停機。 穩定輸出:除了提供備用電力,UPS還能通過其高精度的逆變器技術,
自舉電路的工作原理和應用場景
自舉電路,也稱為升壓電路,是一種利用電子元件(如二極管、電容、電感等)的特性,通過特定的電路配置來實現電壓升高的電路。其工作原理復雜而精妙,涉及電子元件的充放電過程、電壓疊加以及能量轉換等多個方面。
UART協議的工作原理和應用場景
UART(Universal Asynchronous Receiver/Transmitter,通用異步收發傳輸器)協議是一種廣泛使用的串行通信協議,它允許計算機與外部設備之間通過串行接口進行數據傳輸。以下是對UART協議的詳細解析,包括其定義、工作原理、數據幀結構、優缺點以及應
電壓繼電器的分類、工作原理、結構特點和應用場景
電壓繼電器是一種用于監測和控制電壓的電氣設備,廣泛應用于電力系統、工業自動化、通信設備等領域。根據其工作原理、結構特點和應用場景的不同,電壓繼電器可以分為多種類型。 一、電壓繼電器的分類 按工作原理
中間繼電器的工作原理、特點、應用場景
中間繼電器(Middle Relay)是一種常見的電氣設備,其主要作用是擴大控制線路中的觸點數量,提高控制線路的靈活性和可靠性。本文將詳細介紹中間繼電器的工作原理、特點、應用場景以及如何正確
差分放大器的工作原理和應用場景
差分放大器,作為電子領域中的一種重要設備,廣泛應用于各種電子設備中。其獨特的工作原理和結構使得它在信號處理、噪聲抑制等方面具有顯著的優勢。本文將對差分放大器進行詳細的介紹,包括其定義、結構、工作原理、性能分析、應用場景以及未來發
電流表的工作原理和應用場景
在電學和電子工程領域,電流表無疑是一種不可或缺的測量工具。從基礎電路分析到復雜的電力系統監測,再到高精度的實驗測量,電流表都發揮著至關重要的作用。本文將對電流表進行詳細的介紹,包括其工作原理、類型、規格型號、應用場景以及誤差分析等方面,以期為讀者提供全面的了解和認識。
電力線路行波故障判定裝置的工作原理|技術指標|使用場景
接下來,深圳鼎信智慧科技跟大家科普我們電力線路行波故障判定裝置DX-WPS100-GZ03(配網行波故障預警與定位)的工作原理、技術指標、使用場景: 電力線路行波故障判定裝置的工作原理基于行波理論
車間數據采集網關的工作原理和應用場景
在智能制造日益盛行的今天,車間數據采集作為整個生產流程中的關鍵環節,其重要性愈發凸顯。數據采集網關作為這一環節的核心設備,扮演著承上啟下的重要角色。本文旨在深入探討車間數據采集網關的工作原理和應用場景
AG32VF-MIPI應用場景
用于工業顯示、視頻拼接、硅基OLED、工業相機等領域。
MIPI接口技術的工作原理是基于串行數據傳輸,具備高速傳輸、低功耗、小尺寸、高可靠性和靈活性等主要特點。
AG32VF-MIPI系列在AG32平臺
發表于 01-22 08:56
評論