當前的自動駕駛和輔助駕駛系統中,激光雷達和毫米波雷達等傳感器已經屢見不鮮,但圖像傳感器主攻的攝像頭視覺系統依然未被任何一家車廠拋棄。反觀特斯拉,更是一直堅持純視覺方案。那么圖像傳感器究竟有何優勢,又是如何解決自動駕駛帶來的挑戰的?
不同位置的汽車圖像傳感器
單從傳感器數量上來看,圖像傳感器無疑是ADAS和AD應用中用在車身上最多的傳感器,遍布車身各個位置。但在像素、動態范圍等參數上,這些圖像傳感器往往不會統一,那么它們的位置是如何決定其配置的呢?安森美(onsemi)中國汽車市場現場應用經理陳力答道,遠距離攝像頭例如前視/后視,要求高靈敏度,高動態范圍,抑制LED閃爍和高像素數,以滿足長距離小障礙物探測需要,目前常用8百萬像素;而近距離攝像頭例如環視,要求高靈敏度,中等動態范圍和中等像素數,主要探測車身周圍的場景,目前常用到2~3百萬像素;如果是抓拍高速運動場景的攝像頭,則需要考慮采用全局快門圖像傳感器。
除了車外用于ADAS和AD的圖像傳感器外,用于環視和監控的傳統攝像頭應用也要用到圖像傳感器,但它們的參數需求同樣存在差異。環視攝像頭為人眼視覺+低速應用,ADAS是機器視覺+高速應用。后者強調傳感器的功能安全,低照性能,動態范圍,空間解析力和抗LED閃爍功能要求。
車內監控也分駕駛員監控(DMS)和乘客監控(OMS),出于安全考慮,歐盟和中國均出臺了相關政策,強制要求部分商用車型中裝配DMS系統。OMS系統雖然面世不算久,但在安全帶檢測、車內乘客滯留提醒等應用上同樣起到至關重要的作用。這兩大車內監控系統中,DMS側重于機器視覺,需要時刻關注駕駛員的狀態,因此往往用到黑白的全局快門圖像傳感器。而OMS則側重于記錄功能,可用彩色或RGB-IR的滾動快門傳感器。
LED閃爍問題如何抑制
汽車圖像傳感器最常見的挑戰之一就是LED閃爍抑制(LFM),就像人眼對于LED屏幕的閃爍的感知一樣,如今的手機常常用到DC調光和PWM的方案。而汽車圖像傳感器就像是車上的眼睛,對車外的LED光線同樣會有所感應,那么汽車圖像傳感器又是如何解決LFM問題,改變車燈的頻率有沒有可能改善LED閃爍呢?
陳力給出了這一問題的解釋:采用DC調光方式的LED沒有閃爍的問題,此時LED一直常亮,僅通過調幅來調節亮度,整個過程中燈并沒有熄滅的狀態; 而另外一種更常見的LED燈是PWM調頻驅動方式,即以一種一明一暗的光脈沖方式在照明,脈沖閃爍頻率從幾十到幾百赫茲都有可能,這種閃爍是照明場景客觀存在的現象,雖然人眼通常看不到,但能被圖像傳感器所感知。從某種角度來說,圖像傳感器輸出的結果更客觀真實,而眼睛反倒欺騙了你。光脈沖的閃爍頻率取決于PWM頻率,其亮度取決于占空比,不同LED燈通常頻率也不同。抑制LED閃爍常見的方法是增大曝光時間,曝光時間越長,每行像素能抓到更多光脈沖,從而削弱了閃爍的強度,但曝光時間越長,帶來的運動模糊也越明顯。同理,增加LED燈的頻率也可以減小LED閃爍,但LED燈頻率往往不可控,實際場景中,LED閃爍不僅僅出現在車燈上,環境中的LED照明都存在類似閃爍,例如信號燈,廣告燈等等。
高動態范圍(HDR)和超級曝光
動態范圍在汽車圖像傳感器上有著非常高的要求,真實世界場景下的動態范圍極端情況下可以達到140 dB,所以這類產品往往都要做到120 dB以上,目前傳統HDR采用的多重曝光合并方式會產生高速運動偽影的現象,這對ADAS應用中的算法提出了一定要求。
為了解決同時做到LFM和HDR又能保證成像質量的挑戰,安森美的Hayabusa系列汽車圖像傳感器采用了超級曝光像素的技術。通過擴展像素容量,可以做到長時間曝光捕捉脈沖光而不會過飽和,并將動態范圍擴展至線性像素容量的5倍。Hayabusa只需單次曝光就能在兼顧LFM的情況下實現95 dB的動態范圍。陳力提到,在多次曝光合并技術基礎上,傳統像素需要3次曝光來實現120 dB的動態范圍,而Hayabusa只需要兩次曝光合并就可以實現120 dB的動態范圍,大大改善了運動偽影問題。與大小像素技術相比,超級曝光沒有兩種像素結構帶來的巨大的光學設計挑戰,即邊緣像素性能急劇惡化和嚴重的像素間串擾,也不會因為校準和去噪而導致細節與分辨率的損失。
結語
面對其他高性能傳感器的競爭,圖像傳感器憑借其成本、大小等優勢依然牢牢占據著汽車市場。這一視覺方案憑借LFM和HDR等特性,以及超級曝光等技術的創新,依然在其弱項上進行突破,適配更多的駕駛場景。
不同位置的汽車圖像傳感器
車身上不同位置的圖像傳感器 / 安森美
單從傳感器數量上來看,圖像傳感器無疑是ADAS和AD應用中用在車身上最多的傳感器,遍布車身各個位置。但在像素、動態范圍等參數上,這些圖像傳感器往往不會統一,那么它們的位置是如何決定其配置的呢?安森美(onsemi)中國汽車市場現場應用經理陳力答道,遠距離攝像頭例如前視/后視,要求高靈敏度,高動態范圍,抑制LED閃爍和高像素數,以滿足長距離小障礙物探測需要,目前常用8百萬像素;而近距離攝像頭例如環視,要求高靈敏度,中等動態范圍和中等像素數,主要探測車身周圍的場景,目前常用到2~3百萬像素;如果是抓拍高速運動場景的攝像頭,則需要考慮采用全局快門圖像傳感器。
安森美中國汽車市場現場應用經理陳力 / 安森美
除了車外用于ADAS和AD的圖像傳感器外,用于環視和監控的傳統攝像頭應用也要用到圖像傳感器,但它們的參數需求同樣存在差異。環視攝像頭為人眼視覺+低速應用,ADAS是機器視覺+高速應用。后者強調傳感器的功能安全,低照性能,動態范圍,空間解析力和抗LED閃爍功能要求。
車內監控也分駕駛員監控(DMS)和乘客監控(OMS),出于安全考慮,歐盟和中國均出臺了相關政策,強制要求部分商用車型中裝配DMS系統。OMS系統雖然面世不算久,但在安全帶檢測、車內乘客滯留提醒等應用上同樣起到至關重要的作用。這兩大車內監控系統中,DMS側重于機器視覺,需要時刻關注駕駛員的狀態,因此往往用到黑白的全局快門圖像傳感器。而OMS則側重于記錄功能,可用彩色或RGB-IR的滾動快門傳感器。
LED閃爍問題如何抑制
汽車圖像傳感器最常見的挑戰之一就是LED閃爍抑制(LFM),就像人眼對于LED屏幕的閃爍的感知一樣,如今的手機常常用到DC調光和PWM的方案。而汽車圖像傳感器就像是車上的眼睛,對車外的LED光線同樣會有所感應,那么汽車圖像傳感器又是如何解決LFM問題,改變車燈的頻率有沒有可能改善LED閃爍呢?
有無LFM的對比 / 安森美
陳力給出了這一問題的解釋:采用DC調光方式的LED沒有閃爍的問題,此時LED一直常亮,僅通過調幅來調節亮度,整個過程中燈并沒有熄滅的狀態; 而另外一種更常見的LED燈是PWM調頻驅動方式,即以一種一明一暗的光脈沖方式在照明,脈沖閃爍頻率從幾十到幾百赫茲都有可能,這種閃爍是照明場景客觀存在的現象,雖然人眼通常看不到,但能被圖像傳感器所感知。從某種角度來說,圖像傳感器輸出的結果更客觀真實,而眼睛反倒欺騙了你。光脈沖的閃爍頻率取決于PWM頻率,其亮度取決于占空比,不同LED燈通常頻率也不同。抑制LED閃爍常見的方法是增大曝光時間,曝光時間越長,每行像素能抓到更多光脈沖,從而削弱了閃爍的強度,但曝光時間越長,帶來的運動模糊也越明顯。同理,增加LED燈的頻率也可以減小LED閃爍,但LED燈頻率往往不可控,實際場景中,LED閃爍不僅僅出現在車燈上,環境中的LED照明都存在類似閃爍,例如信號燈,廣告燈等等。
高動態范圍(HDR)和超級曝光
動態范圍在汽車圖像傳感器上有著非常高的要求,真實世界場景下的動態范圍極端情況下可以達到140 dB,所以這類產品往往都要做到120 dB以上,目前傳統HDR采用的多重曝光合并方式會產生高速運動偽影的現象,這對ADAS應用中的算法提出了一定要求。
超級曝光像素與大小像素的對比 / 安森美
為了解決同時做到LFM和HDR又能保證成像質量的挑戰,安森美的Hayabusa系列汽車圖像傳感器采用了超級曝光像素的技術。通過擴展像素容量,可以做到長時間曝光捕捉脈沖光而不會過飽和,并將動態范圍擴展至線性像素容量的5倍。Hayabusa只需單次曝光就能在兼顧LFM的情況下實現95 dB的動態范圍。陳力提到,在多次曝光合并技術基礎上,傳統像素需要3次曝光來實現120 dB的動態范圍,而Hayabusa只需要兩次曝光合并就可以實現120 dB的動態范圍,大大改善了運動偽影問題。與大小像素技術相比,超級曝光沒有兩種像素結構帶來的巨大的光學設計挑戰,即邊緣像素性能急劇惡化和嚴重的像素間串擾,也不會因為校準和去噪而導致細節與分辨率的損失。
結語
面對其他高性能傳感器的競爭,圖像傳感器憑借其成本、大小等優勢依然牢牢占據著汽車市場。這一視覺方案憑借LFM和HDR等特性,以及超級曝光等技術的創新,依然在其弱項上進行突破,適配更多的駕駛場景。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
電動車
+關注
關注
73文章
3028瀏覽量
114457 -
圖像傳感器
+關注
關注
68文章
1916瀏覽量
129649
發布評論請先 登錄
相關推薦
CMOS傳感器的圖像處理能力
隨著科技的飛速發展,圖像處理技術已經成為我們日常生活中不可或缺的一部分。CMOS傳感器作為圖像捕捉的核心,其圖像處理能力直接影響到成像質量。 CMOS
CMOS與傳統傳感器的成本比較
的圖像傳感器,它將圖像捕捉和信號處理集成在同一芯片上。 優勢 :包括低功耗、低成本、集成度高、速度快等。 傳統傳感器概述 定義與原理 :傳統傳感器
CMOS圖像傳感器的優缺點
CMOS圖像傳感器的優點 1. 成本效益 CMOS圖像傳感器的生產成本相對較低。由于CMOS技術與半導體制造工藝兼容,可以在同一生產線上制造,這降低了制造成本。此外,CMOS
電動車用萬能控制器不用霍爾可以嗎
電動車的控制器是電動車系統中非常重要的一個部件,它負責控制電機的啟動、運行、停止以及速度調節等功能。霍爾傳感器(Hall sensor)是控制器
索尼圖像傳感器芯片有哪些
索尼(Sony)是全球領先的圖像傳感器制造商之一,其產品廣泛應用于數碼相機、智能手機、監控攝像頭等多個領域。索尼的圖像傳感器技術一直處于行業領先地位,不斷推出創新的產品和技術。 一、索
圖像傳感器的參數有哪些
圖像傳感器是現代電子設備中不可或缺的組成部分,廣泛應用于手機、相機、監控系統、醫療成像、工業檢測等領域。它負責將光信號轉換為電信號,從而實現圖像的捕獲和處理。 一、圖像
圖像傳感器的探測能力與哪些因素有關
圖像傳感器的探測能力與相關因素 圖像傳感器是現代電子成像系統中的核心部件,它能夠將光信號轉換為電信號,進而生成數字圖像。隨著科技的不斷進步,
圖像傳感器的原理是什么?
圖像傳感器是一種將光信號轉換為電信號的設備,廣泛應用于攝影、視頻監控、醫學成像、天文觀測等領域。圖像傳感器的原理涉及到光電效應、電荷存儲、信號放大、模數轉換等多個方面。 一、
圖像傳感器是依靠什么感光的
圖像傳感器是一種將光學圖像轉換成電子信號的設備,廣泛應用于數字攝影、視頻監控、醫學成像、天文觀測等領域。圖像傳感器的工作原理基于光的感光性,
常用遙感傳感器中成像的傳感器是什么
常用遙感傳感器中成像的傳感器主要包括以下幾類: 一、光學成像傳感器 多波段掃描儀 :多波段掃描儀是一種重要的光學成像傳感器,它能夠同時獲取多個波段的
簡單認識CMOS圖像傳感器
CMOS(Complementary Metal-Oxide-Semiconductor)圖像傳感器,中文學名為互補金屬氧化物半導體圖像傳感器,是一種典型的固體成像
未來已來,多傳感器融合感知是自動駕駛破局的關鍵
數據,與現有主流AI計算平臺完全兼容,它可以復用已有的圖像數據樣本,免除了產品的神經網絡訓練數據需要完全重新采集的困擾。
“多維像素”數據組合示意圖
昱感微的融合感知技術采用最前沿的 多傳感器前
發表于 04-11 10:26
指紋傳感器的定義 指紋傳感器的應用
傳感器通常由感光器件、圖像處理器、模式匹配引擎和存儲設備組成,它能夠以高精度和高速度驗證和識別指紋。 指紋傳感器的應用非常廣泛,從安全領域到移動設備,以及各種社會和商業場景。以下是指紋
評論