當(dāng)前的自動(dòng)駕駛和輔助駕駛系統(tǒng)中,激光雷達(dá)和毫米波雷達(dá)等傳感器已經(jīng)屢見(jiàn)不鮮,但圖像傳感器主攻的攝像頭視覺(jué)系統(tǒng)依然未被任何一家車廠拋棄。反觀特斯拉,更是一直堅(jiān)持純視覺(jué)方案。那么圖像傳感器究竟有何優(yōu)勢(shì),又是如何解決自動(dòng)駕駛帶來(lái)的挑戰(zhàn)的?
不同位置的汽車圖像傳感器
單從傳感器數(shù)量上來(lái)看,圖像傳感器無(wú)疑是ADAS和AD應(yīng)用中用在車身上最多的傳感器,遍布車身各個(gè)位置。但在像素、動(dòng)態(tài)范圍等參數(shù)上,這些圖像傳感器往往不會(huì)統(tǒng)一,那么它們的位置是如何決定其配置的呢?安森美(onsemi)中國(guó)汽車市場(chǎng)現(xiàn)場(chǎng)應(yīng)用經(jīng)理陳力答道,遠(yuǎn)距離攝像頭例如前視/后視,要求高靈敏度,高動(dòng)態(tài)范圍,抑制LED閃爍和高像素?cái)?shù),以滿足長(zhǎng)距離小障礙物探測(cè)需要,目前常用8百萬(wàn)像素;而近距離攝像頭例如環(huán)視,要求高靈敏度,中等動(dòng)態(tài)范圍和中等像素?cái)?shù),主要探測(cè)車身周圍的場(chǎng)景,目前常用到2~3百萬(wàn)像素;如果是抓拍高速運(yùn)動(dòng)場(chǎng)景的攝像頭,則需要考慮采用全局快門圖像傳感器。
除了車外用于ADAS和AD的圖像傳感器外,用于環(huán)視和監(jiān)控的傳統(tǒng)攝像頭應(yīng)用也要用到圖像傳感器,但它們的參數(shù)需求同樣存在差異。環(huán)視攝像頭為人眼視覺(jué)+低速應(yīng)用,ADAS是機(jī)器視覺(jué)+高速應(yīng)用。后者強(qiáng)調(diào)傳感器的功能安全,低照性能,動(dòng)態(tài)范圍,空間解析力和抗LED閃爍功能要求。
車內(nèi)監(jiān)控也分駕駛員監(jiān)控(DMS)和乘客監(jiān)控(OMS),出于安全考慮,歐盟和中國(guó)均出臺(tái)了相關(guān)政策,強(qiáng)制要求部分商用車型中裝配DMS系統(tǒng)。OMS系統(tǒng)雖然面世不算久,但在安全帶檢測(cè)、車內(nèi)乘客滯留提醒等應(yīng)用上同樣起到至關(guān)重要的作用。這兩大車內(nèi)監(jiān)控系統(tǒng)中,DMS側(cè)重于機(jī)器視覺(jué),需要時(shí)刻關(guān)注駕駛員的狀態(tài),因此往往用到黑白的全局快門圖像傳感器。而OMS則側(cè)重于記錄功能,可用彩色或RGB-IR的滾動(dòng)快門傳感器。
LED閃爍問(wèn)題如何抑制
汽車圖像傳感器最常見(jiàn)的挑戰(zhàn)之一就是LED閃爍抑制(LFM),就像人眼對(duì)于LED屏幕的閃爍的感知一樣,如今的手機(jī)常常用到DC調(diào)光和PWM的方案。而汽車圖像傳感器就像是車上的眼睛,對(duì)車外的LED光線同樣會(huì)有所感應(yīng),那么汽車圖像傳感器又是如何解決LFM問(wèn)題,改變車燈的頻率有沒(méi)有可能改善LED閃爍呢?
陳力給出了這一問(wèn)題的解釋:采用DC調(diào)光方式的LED沒(méi)有閃爍的問(wèn)題,此時(shí)LED一直常亮,僅通過(guò)調(diào)幅來(lái)調(diào)節(jié)亮度,整個(gè)過(guò)程中燈并沒(méi)有熄滅的狀態(tài); 而另外一種更常見(jiàn)的LED燈是PWM調(diào)頻驅(qū)動(dòng)方式,即以一種一明一暗的光脈沖方式在照明,脈沖閃爍頻率從幾十到幾百赫茲都有可能,這種閃爍是照明場(chǎng)景客觀存在的現(xiàn)象,雖然人眼通??床坏剑鼙粓D像傳感器所感知。從某種角度來(lái)說(shuō),圖像傳感器輸出的結(jié)果更客觀真實(shí),而眼睛反倒欺騙了你。光脈沖的閃爍頻率取決于PWM頻率,其亮度取決于占空比,不同LED燈通常頻率也不同。抑制LED閃爍常見(jiàn)的方法是增大曝光時(shí)間,曝光時(shí)間越長(zhǎng),每行像素能抓到更多光脈沖,從而削弱了閃爍的強(qiáng)度,但曝光時(shí)間越長(zhǎng),帶來(lái)的運(yùn)動(dòng)模糊也越明顯。同理,增加LED燈的頻率也可以減小LED閃爍,但LED燈頻率往往不可控,實(shí)際場(chǎng)景中,LED閃爍不僅僅出現(xiàn)在車燈上,環(huán)境中的LED照明都存在類似閃爍,例如信號(hào)燈,廣告燈等等。
高動(dòng)態(tài)范圍(HDR)和超級(jí)曝光
動(dòng)態(tài)范圍在汽車圖像傳感器上有著非常高的要求,真實(shí)世界場(chǎng)景下的動(dòng)態(tài)范圍極端情況下可以達(dá)到140 dB,所以這類產(chǎn)品往往都要做到120 dB以上,目前傳統(tǒng)HDR采用的多重曝光合并方式會(huì)產(chǎn)生高速運(yùn)動(dòng)偽影的現(xiàn)象,這對(duì)ADAS應(yīng)用中的算法提出了一定要求。
為了解決同時(shí)做到LFM和HDR又能保證成像質(zhì)量的挑戰(zhàn),安森美的Hayabusa系列汽車圖像傳感器采用了超級(jí)曝光像素的技術(shù)。通過(guò)擴(kuò)展像素容量,可以做到長(zhǎng)時(shí)間曝光捕捉脈沖光而不會(huì)過(guò)飽和,并將動(dòng)態(tài)范圍擴(kuò)展至線性像素容量的5倍。Hayabusa只需單次曝光就能在兼顧LFM的情況下實(shí)現(xiàn)95 dB的動(dòng)態(tài)范圍。陳力提到,在多次曝光合并技術(shù)基礎(chǔ)上,傳統(tǒng)像素需要3次曝光來(lái)實(shí)現(xiàn)120 dB的動(dòng)態(tài)范圍,而Hayabusa只需要兩次曝光合并就可以實(shí)現(xiàn)120 dB的動(dòng)態(tài)范圍,大大改善了運(yùn)動(dòng)偽影問(wèn)題。與大小像素技術(shù)相比,超級(jí)曝光沒(méi)有兩種像素結(jié)構(gòu)帶來(lái)的巨大的光學(xué)設(shè)計(jì)挑戰(zhàn),即邊緣像素性能急劇惡化和嚴(yán)重的像素間串?dāng)_,也不會(huì)因?yàn)樾?zhǔn)和去噪而導(dǎo)致細(xì)節(jié)與分辨率的損失。
結(jié)語(yǔ)
面對(duì)其他高性能傳感器的競(jìng)爭(zhēng),圖像傳感器憑借其成本、大小等優(yōu)勢(shì)依然牢牢占據(jù)著汽車市場(chǎng)。這一視覺(jué)方案憑借LFM和HDR等特性,以及超級(jí)曝光等技術(shù)的創(chuàng)新,依然在其弱項(xiàng)上進(jìn)行突破,適配更多的駕駛場(chǎng)景。
不同位置的汽車圖像傳感器

車身上不同位置的圖像傳感器 / 安森美
單從傳感器數(shù)量上來(lái)看,圖像傳感器無(wú)疑是ADAS和AD應(yīng)用中用在車身上最多的傳感器,遍布車身各個(gè)位置。但在像素、動(dòng)態(tài)范圍等參數(shù)上,這些圖像傳感器往往不會(huì)統(tǒng)一,那么它們的位置是如何決定其配置的呢?安森美(onsemi)中國(guó)汽車市場(chǎng)現(xiàn)場(chǎng)應(yīng)用經(jīng)理陳力答道,遠(yuǎn)距離攝像頭例如前視/后視,要求高靈敏度,高動(dòng)態(tài)范圍,抑制LED閃爍和高像素?cái)?shù),以滿足長(zhǎng)距離小障礙物探測(cè)需要,目前常用8百萬(wàn)像素;而近距離攝像頭例如環(huán)視,要求高靈敏度,中等動(dòng)態(tài)范圍和中等像素?cái)?shù),主要探測(cè)車身周圍的場(chǎng)景,目前常用到2~3百萬(wàn)像素;如果是抓拍高速運(yùn)動(dòng)場(chǎng)景的攝像頭,則需要考慮采用全局快門圖像傳感器。

安森美中國(guó)汽車市場(chǎng)現(xiàn)場(chǎng)應(yīng)用經(jīng)理陳力 / 安森美
除了車外用于ADAS和AD的圖像傳感器外,用于環(huán)視和監(jiān)控的傳統(tǒng)攝像頭應(yīng)用也要用到圖像傳感器,但它們的參數(shù)需求同樣存在差異。環(huán)視攝像頭為人眼視覺(jué)+低速應(yīng)用,ADAS是機(jī)器視覺(jué)+高速應(yīng)用。后者強(qiáng)調(diào)傳感器的功能安全,低照性能,動(dòng)態(tài)范圍,空間解析力和抗LED閃爍功能要求。
車內(nèi)監(jiān)控也分駕駛員監(jiān)控(DMS)和乘客監(jiān)控(OMS),出于安全考慮,歐盟和中國(guó)均出臺(tái)了相關(guān)政策,強(qiáng)制要求部分商用車型中裝配DMS系統(tǒng)。OMS系統(tǒng)雖然面世不算久,但在安全帶檢測(cè)、車內(nèi)乘客滯留提醒等應(yīng)用上同樣起到至關(guān)重要的作用。這兩大車內(nèi)監(jiān)控系統(tǒng)中,DMS側(cè)重于機(jī)器視覺(jué),需要時(shí)刻關(guān)注駕駛員的狀態(tài),因此往往用到黑白的全局快門圖像傳感器。而OMS則側(cè)重于記錄功能,可用彩色或RGB-IR的滾動(dòng)快門傳感器。
LED閃爍問(wèn)題如何抑制
汽車圖像傳感器最常見(jiàn)的挑戰(zhàn)之一就是LED閃爍抑制(LFM),就像人眼對(duì)于LED屏幕的閃爍的感知一樣,如今的手機(jī)常常用到DC調(diào)光和PWM的方案。而汽車圖像傳感器就像是車上的眼睛,對(duì)車外的LED光線同樣會(huì)有所感應(yīng),那么汽車圖像傳感器又是如何解決LFM問(wèn)題,改變車燈的頻率有沒(méi)有可能改善LED閃爍呢?

有無(wú)LFM的對(duì)比 / 安森美
陳力給出了這一問(wèn)題的解釋:采用DC調(diào)光方式的LED沒(méi)有閃爍的問(wèn)題,此時(shí)LED一直常亮,僅通過(guò)調(diào)幅來(lái)調(diào)節(jié)亮度,整個(gè)過(guò)程中燈并沒(méi)有熄滅的狀態(tài); 而另外一種更常見(jiàn)的LED燈是PWM調(diào)頻驅(qū)動(dòng)方式,即以一種一明一暗的光脈沖方式在照明,脈沖閃爍頻率從幾十到幾百赫茲都有可能,這種閃爍是照明場(chǎng)景客觀存在的現(xiàn)象,雖然人眼通??床坏剑鼙粓D像傳感器所感知。從某種角度來(lái)說(shuō),圖像傳感器輸出的結(jié)果更客觀真實(shí),而眼睛反倒欺騙了你。光脈沖的閃爍頻率取決于PWM頻率,其亮度取決于占空比,不同LED燈通常頻率也不同。抑制LED閃爍常見(jiàn)的方法是增大曝光時(shí)間,曝光時(shí)間越長(zhǎng),每行像素能抓到更多光脈沖,從而削弱了閃爍的強(qiáng)度,但曝光時(shí)間越長(zhǎng),帶來(lái)的運(yùn)動(dòng)模糊也越明顯。同理,增加LED燈的頻率也可以減小LED閃爍,但LED燈頻率往往不可控,實(shí)際場(chǎng)景中,LED閃爍不僅僅出現(xiàn)在車燈上,環(huán)境中的LED照明都存在類似閃爍,例如信號(hào)燈,廣告燈等等。
高動(dòng)態(tài)范圍(HDR)和超級(jí)曝光
動(dòng)態(tài)范圍在汽車圖像傳感器上有著非常高的要求,真實(shí)世界場(chǎng)景下的動(dòng)態(tài)范圍極端情況下可以達(dá)到140 dB,所以這類產(chǎn)品往往都要做到120 dB以上,目前傳統(tǒng)HDR采用的多重曝光合并方式會(huì)產(chǎn)生高速運(yùn)動(dòng)偽影的現(xiàn)象,這對(duì)ADAS應(yīng)用中的算法提出了一定要求。

超級(jí)曝光像素與大小像素的對(duì)比 / 安森美
為了解決同時(shí)做到LFM和HDR又能保證成像質(zhì)量的挑戰(zhàn),安森美的Hayabusa系列汽車圖像傳感器采用了超級(jí)曝光像素的技術(shù)。通過(guò)擴(kuò)展像素容量,可以做到長(zhǎng)時(shí)間曝光捕捉脈沖光而不會(huì)過(guò)飽和,并將動(dòng)態(tài)范圍擴(kuò)展至線性像素容量的5倍。Hayabusa只需單次曝光就能在兼顧LFM的情況下實(shí)現(xiàn)95 dB的動(dòng)態(tài)范圍。陳力提到,在多次曝光合并技術(shù)基礎(chǔ)上,傳統(tǒng)像素需要3次曝光來(lái)實(shí)現(xiàn)120 dB的動(dòng)態(tài)范圍,而Hayabusa只需要兩次曝光合并就可以實(shí)現(xiàn)120 dB的動(dòng)態(tài)范圍,大大改善了運(yùn)動(dòng)偽影問(wèn)題。與大小像素技術(shù)相比,超級(jí)曝光沒(méi)有兩種像素結(jié)構(gòu)帶來(lái)的巨大的光學(xué)設(shè)計(jì)挑戰(zhàn),即邊緣像素性能急劇惡化和嚴(yán)重的像素間串?dāng)_,也不會(huì)因?yàn)樾?zhǔn)和去噪而導(dǎo)致細(xì)節(jié)與分辨率的損失。
結(jié)語(yǔ)
面對(duì)其他高性能傳感器的競(jìng)爭(zhēng),圖像傳感器憑借其成本、大小等優(yōu)勢(shì)依然牢牢占據(jù)著汽車市場(chǎng)。這一視覺(jué)方案憑借LFM和HDR等特性,以及超級(jí)曝光等技術(shù)的創(chuàng)新,依然在其弱項(xiàng)上進(jìn)行突破,適配更多的駕駛場(chǎng)景。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。
舉報(bào)投訴
-
電動(dòng)車
+關(guān)注
關(guān)注
73文章
3101瀏覽量
117784 -
圖像傳感器
+關(guān)注
關(guān)注
68文章
2019瀏覽量
131748
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
熱點(diǎn)推薦
汽車傳感器融合技術(shù)的發(fā)展與挑戰(zhàn)
來(lái)源:本文編譯自semiengineering作者:ANNMUTSCHLER在汽車設(shè)計(jì)領(lǐng)域,傳感器融合正變得日益流行且復(fù)雜。它將多種類型的傳感器集成到單個(gè)芯片或封裝中,并智能地將數(shù)據(jù)路由到所需之處
什么是照度傳感器和接近傳感器
近年來(lái),照度傳感器和接近傳感器在我們身邊各類設(shè)備中的應(yīng)用越來(lái)越廣泛。除了單獨(dú)使用照度傳感器和接近傳感器外,將這些傳感器組合使用的情況也在不斷
使用位置傳感器進(jìn)行無(wú)刷電機(jī)控制
刷直流電機(jī)或場(chǎng)定向控制 (FOC) 無(wú)刷交流電機(jī),確實(shí)可以實(shí)現(xiàn)無(wú)需任何旋轉(zhuǎn)角度傳感器即可工作。但實(shí)際情況是,工業(yè)和人形機(jī)器人、自主移動(dòng)機(jī)器人和直線電機(jī)運(yùn)輸系統(tǒng)等終端設(shè)備,旋轉(zhuǎn)角度傳感器或線性位置傳感器
無(wú)位置傳感器直流無(wú)刷電機(jī)軟件起動(dòng)
為了解決無(wú)位置傳感器直流無(wú)刷電機(jī)在起動(dòng)時(shí)基于反電動(dòng)勢(shì)的位置檢測(cè)方法無(wú)法提取出位置信息的問(wèn)題,分析了無(wú)位置傳感器直流無(wú)刷電機(jī)的起動(dòng)方法,針對(duì)電動(dòng)車這一特殊的應(yīng)用場(chǎng)合進(jìn)行了相應(yīng)的改進(jìn),
發(fā)表于 08-04 14:49
CMOS圖像傳感器的制造步驟
CIS 英文全名 CMOS (Complementary Metal-Oxide Semiconductor) Image Sensor,中文意思是互補(bǔ)性金屬氧化物半導(dǎo)體圖像傳感器。CMOS 圖像
OV9281 CMOS圖像傳感器英文手冊(cè)
電子發(fā)燒友網(wǎng)站提供《OV9281 CMOS圖像傳感器英文手冊(cè).pdf》資料免費(fèi)下載
發(fā)表于 03-07 09:23
?6次下載
電機(jī)驅(qū)動(dòng)中霍爾轉(zhuǎn)子位置傳感器介紹
、線性霍爾、開(kāi)關(guān)型霍爾。
旋轉(zhuǎn)變壓器,屬于高精度位置傳感器,主要應(yīng)用在汽車及工業(yè)領(lǐng)域,其成本比較高;磁編碼器與光電編碼器,用于一些伺服控制領(lǐng)域,如機(jī)器人、機(jī)械臂、工業(yè)設(shè)備中,成本次之;
發(fā)表于 02-12 17:35
CMOS傳感器技術(shù)原理 CMOS傳感器與CCD傳感器比較
和邏輯電路設(shè)計(jì)。然而,隨著技術(shù)的不斷進(jìn)步,CMOS技術(shù)也被廣泛應(yīng)用于圖像傳感器領(lǐng)域。CMOS傳感器的工作原理基于半導(dǎo)體材料的特性,通過(guò)光電轉(zhuǎn)換和信號(hào)放大等過(guò)程,將光信號(hào)轉(zhuǎn)換為電信號(hào),從而實(shí)現(xiàn)對(duì)
ccd傳感器壞了有什么癥狀 ccd傳感器和cmos傳感器哪個(gè)好
故障或損壞時(shí),可能會(huì)出現(xiàn)以下癥狀: 圖像質(zhì)量問(wèn)題 : 黑屏現(xiàn)象 :相機(jī)或攝像機(jī)無(wú)法捕捉到任何圖像,屏幕顯示為黑色。這可能是由于傳感器損壞導(dǎo)致無(wú)法接收光線或信號(hào)轉(zhuǎn)換失敗。 花屏現(xiàn)象 :屏幕上出現(xiàn)不規(guī)則的色彩塊或條紋,
干簧管傳感器屬于什么傳感器
干簧管傳感器,又稱磁簧開(kāi)關(guān)傳感器或磁敏開(kāi)關(guān),是一種基于干簧管(Reed Switch)原理工作的傳感器。作為一種重要的磁傳感器,干簧管傳感器
CMOS傳感器的圖像處理能力
隨著科技的飛速發(fā)展,圖像處理技術(shù)已經(jīng)成為我們?nèi)粘I钪胁豢苫蛉钡囊徊糠?。CMOS傳感器作為圖像捕捉的核心,其圖像處理能力直接影響到成像質(zhì)量。 CMOS
全流程國(guó)產(chǎn)化!這款CMOS圖像傳感器性能依然強(qiáng)大
電子發(fā)燒友網(wǎng)報(bào)道(文/梁浩斌)5000萬(wàn)像素傳感器在如今智能手機(jī)主攝中似乎已經(jīng)成為主流選擇,國(guó)內(nèi)外廠商在近年都比較重視50MP的圖像傳感器產(chǎn)品,尤其國(guó)內(nèi)廠商依靠這些產(chǎn)品成功進(jìn)入到一些旗艦手機(jī)的主攝中
盤點(diǎn)圖像傳感器選型八大要點(diǎn)
圖像傳感器作為機(jī)器視覺(jué)和眾多智能應(yīng)用的核心部件,扮演著至關(guān)重要的角色。無(wú)論是自動(dòng)駕駛、醫(yī)療成像,還是安防監(jiān)控、智能制造,圖像傳感器的性能直接決定了這些應(yīng)用的效果和可靠性。因此,如何精準(zhǔn)
CMOS與傳統(tǒng)傳感器的成本比較
的圖像傳感器,它將圖像捕捉和信號(hào)處理集成在同一芯片上。 優(yōu)勢(shì) :包括低功耗、低成本、集成度高、速度快等。 傳統(tǒng)傳感器概述 定義與原理 :傳統(tǒng)傳感器
CMOS圖像傳感器的優(yōu)缺點(diǎn)
CMOS圖像傳感器的優(yōu)點(diǎn) 1. 成本效益 CMOS圖像傳感器的生產(chǎn)成本相對(duì)較低。由于CMOS技術(shù)與半導(dǎo)體制造工藝兼容,可以在同一生產(chǎn)線上制造,這降低了制造成本。此外,CMOS

電動(dòng)車紛紛走向傳感器融合,圖像傳感器依然是yyds
評(píng)論