精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

電子設(shè)計 ? 來源:郭婷 ? 作者:電子設(shè)計 ? 2019-07-31 08:06 ? 次閱讀

1、 前言

近些年來,隨著CMOS技術(shù)的飛速發(fā)展,以及持續(xù)增加的應(yīng)用需求,CMOS圖像傳感器技術(shù)得以迅速發(fā)展。CMOS圖像傳感器具有高度集成化、功耗低、單一工作電壓、局部像素可編程隨機(jī)讀取等優(yōu)點(diǎn)。但隨著應(yīng)用的需要,CMOS圖像傳感器的動態(tài)范圍有待進(jìn)一步提高,如典型的CMOSAPS(ActivePixelSensor)圖像傳感器動態(tài)范圍為65~75dB,難于滿足更寬照度范圍攝像場景要求。一般來說,具有較高動態(tài)范圍的傳感器可以探測更寬的場景照度范圍,從而可以產(chǎn)生更多細(xì)節(jié)的圖像,可以說,動態(tài)范圍在一定意義上,決定著CMOS圖像傳感器的質(zhì)量。CMOSAPS圖像傳感器動態(tài)范圍的擴(kuò)展可采用各種方法,其中多次曝光技術(shù)是一種較為有效的方法,其在獲得高動態(tài)范圍的同時,有較高的信噪比SNR。采用多次曝光方法,一幅場景以不同的曝光時間被攝像幾次,所捕獲圖像用于組合成更高動態(tài)范圍的圖像,曝光次數(shù)愈多,信號變化范圍愈均勻,但多于兩次的曝光,一般需要在片上或片外存儲器支持,信號處理復(fù)雜,使傳感器的幀頻受到限制,如果在像素內(nèi)應(yīng)用兩次曝光采樣存儲的方法,可在擴(kuò)展動態(tài)范圍基礎(chǔ)上,適合于高速應(yīng)用場合。

2 、像素級采樣存儲技術(shù)的工作原理

為了擴(kuò)展CMOS圖像傳感器的動態(tài)范圍,可應(yīng)用兩次曝光方法,即一幅場景用長積分時間曝光和短積分時間曝光攝像兩次,兩幅圖像組合成一幅高動態(tài)范圍的圖像。從理論上說,短的積分時間圖像捕獲了場景高照度區(qū)域,長積分時間圖像在足夠的積分時間后,捕獲了場景低照度區(qū)域,若短曝光時間為Tint2和長曝光時間為Tint1,則傳感器的動態(tài)范圍增強(qiáng)因子DRF為:

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

其中,qmax是傳感器的最大阱容,a=Tint1/Tint2,id是暗電流。可見,當(dāng)暗電流較小時,動態(tài)范圍增強(qiáng)因子為a,同時理論分析表明雙采樣技術(shù)也可獲得較高信噪比SNR。在CMOSAPS圖像傳感器中,采用傳統(tǒng)的PD(PhotoDiode)APS像素結(jié)構(gòu),應(yīng)用兩次曝光方法,采用兩個并行列信號處理路徑實現(xiàn)雙采樣,可以同時讀出兩幅圖像,雖然可獲得寬動態(tài)范圍的圖像,但圖像組合處理在片外執(zhí)行,使得圖像的實時處理速度受到一定的限制,難于滿足高速應(yīng)用場合的要求。

為了能夠在擴(kuò)展動態(tài)范圍同時,且適合于高速應(yīng)用場合,一種可行的方法是應(yīng)用像素級采樣存儲技術(shù),將曝光采樣及圖像組合處理在像素內(nèi)實現(xiàn),這樣可有效提高圖像的實時處理速度。為此,人們對像素級的采樣存儲技術(shù)進(jìn)行了廣泛的研究,幾種可能的像素單元結(jié)構(gòu)如圖1所示。圖1(a)中,采樣保持電路中只采用MOS開關(guān),這種結(jié)構(gòu)雖然可獲得較小的面積,但讀出數(shù)據(jù)時,與CMOSPPS(PassivePixelSensor)像素結(jié)構(gòu)類似,容易受噪聲的干擾,因而SNR較差,并且讀取一次數(shù)據(jù)后,像素內(nèi)存儲器C1上數(shù)據(jù)信息被毀壞,而實際應(yīng)用中往往希望能夠?qū)ο袼財?shù)據(jù)多次讀取,這需要存儲電容上的電壓值在讀取期間保持不變,因此這種結(jié)構(gòu)難于獲得可接受的效果。

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

圖1像素級的采樣存儲技術(shù):(a)只用MOS開關(guān);(b)采用單級緩沖器;(c)采用兩級緩沖器

為了改善讀出噪聲,并且適合于多次讀取的應(yīng)用,可在存儲電容C1和讀出選通開關(guān)之間增加緩沖器A2,如圖1(b)所示,緩沖器一般采用簡單的源極跟隨器配置結(jié)構(gòu),和典型的CMOSAPS像素結(jié)構(gòu)相似,這可以有效改善像素的性能,但增加了像素面積。所報道的應(yīng)用像素存儲技術(shù)的CMOS圖像傳感器大多采用了這種結(jié)構(gòu),在這種結(jié)構(gòu)中,在對光敏二極管上像素信息采樣期間,二極管中光生電荷與存儲電容C1共享,當(dāng)采樣開關(guān)打開時,由于MOS開關(guān)的非理想特性,導(dǎo)致電荷注入效應(yīng),引起采樣誤差,為了減小這種效應(yīng),在像素設(shè)計時,需要使光電二極管電容與存儲電容的比值最佳化,通常使兩者近似相等。為了提高光生電荷的收集效率,改善SNR,一般光敏二極管有較大的電容,這使得存儲電容也應(yīng)當(dāng)具有差不多同樣的量值,而源極跟隨器A2柵極節(jié)點(diǎn)處的寄生電容相對較小,難于滿足存儲電容的需要,所以通常采用CMOS工藝中可行的具有良好性能的MOS電容來增加存儲電容,由于版圖設(shè)計規(guī)則的要求,使像素面積有較大的增加。

為了實現(xiàn)像素級的雙采樣和圖像組合處理,可采用圖1(b)類似的像素結(jié)構(gòu),首先進(jìn)行長時間積分曝光,采樣時,長積分時間的光生電荷在光敏二極管電容與存儲電容間共享,然后進(jìn)行短積分時間曝光,使長短兩次積分時間曝光的光生電荷在光敏二極管內(nèi)直接組合,從而獲得動態(tài)范圍的改善。在這種像素結(jié)構(gòu)中曝光模式采用了傳統(tǒng)的滾動曝光,而在一些工業(yè)和科學(xué)應(yīng)用中,常需要對快速運(yùn)動的目標(biāo)或脈沖光照攝像,若采用滾動曝光模式將導(dǎo)致嚴(yán)重的運(yùn)動失真,此時應(yīng)采用具有同步曝光模式,即所有像素同時積分曝光,隨后將信號電荷存儲到像素內(nèi)的采樣保持電容,一直到讀出。如果使這種結(jié)構(gòu)像素工作于同步曝光模式,由于圖像直接組合處理在光敏二極管內(nèi)進(jìn)行,若在像素數(shù)據(jù)讀出的同時進(jìn)行曝光采樣將毀壞當(dāng)前幀的數(shù)據(jù),所以數(shù)據(jù)的讀出和曝光不能同時進(jìn)行,這將極大限制了傳感器的數(shù)據(jù)處理速度。因此,這種像素雙采樣方法雖然可以獲得動態(tài)范圍的改善,但是難于應(yīng)用于需要同步曝光的高速應(yīng)用。

可見要適合于同步曝光的高速應(yīng)用,雙采樣圖像的組合處理不能在光敏二極管內(nèi)直接進(jìn)行,而只能在像素內(nèi)的存儲器內(nèi)進(jìn)行,一種方法是在圖1(b)結(jié)構(gòu)的基礎(chǔ)上在像素內(nèi)增加另一路采樣保持電路,如文獻(xiàn)[14]提出的可以直接幀差讀出的像素結(jié)構(gòu)。但是,在這種像素結(jié)構(gòu)中,需要兩個較大的存儲電容,使像素面積較大,這對于巨大像素陣列傳感器將是難于接受的。為了能夠減小存儲電容所占面積,可采用圖1(c)所示的結(jié)構(gòu),在光敏二極管和存儲電容間增加一級緩沖器A1,這樣在良好SNR和允許多次讀取的基礎(chǔ)上,如果存儲能力能夠滿足應(yīng)用需求,則可以采用較小的存儲電容。一般,電容的存儲能力與漏電流導(dǎo)致的電容漏電和光導(dǎo)致電容的放電有關(guān),隨著CMOS工藝技術(shù)的不斷改善、有效光掩蔽方法應(yīng)用及其它工藝技術(shù)如將PD置于阱中、采用保護(hù)環(huán)隔離PD等,使電容的存儲能力得到了極大改善,使得源隨器柵節(jié)點(diǎn)處較小寄生電容可以滿足存儲電容的需要。這樣雖然在像素內(nèi)增加了一級緩沖器,但不再需要面積較大的額外MOS電容,從而可能使像素面積減少。

3 、像素級雙采樣存儲技術(shù)

一種具有雙采樣存儲功能的像素結(jié)構(gòu)如圖2所示,和直接幀差輸出的像素結(jié)構(gòu)相類似,為了能夠在像素級實現(xiàn)雙采樣存儲和圖像的直接組合處理,并且適合于同步曝光的高速應(yīng)用,采用了兩路采樣保持電路,采樣保持電路由采樣開關(guān)和保持節(jié)點(diǎn)組成,采樣開關(guān)作為電子曝光器控制曝光時間。但不同的是在信號采樣讀出均采用了緩沖器,如前所述,這使得不再需要兩個額外的MOS存儲電容,圖2中所示存儲電容表示源極跟隨器柵極節(jié)點(diǎn)處的總寄生電容,這樣有效地減少了像素面積,可以應(yīng)用于巨大像素陣列情況。

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

圖2雙采樣存儲的像素結(jié)構(gòu)

一般在像素設(shè)計中,所有晶體管應(yīng)盡量采用相同的類型,以避免像素版圖中設(shè)計規(guī)則所要求的巨大阱間距。然而當(dāng)電源電壓較低時,信號的擺幅將成為主要的考慮。如復(fù)位(Reset)采用NMOS晶體管,光電二極管僅能復(fù)位到VDD-VT(VT為閾值電壓),限制了傳感器的動態(tài)范圍,并且隨著CMOS技術(shù)的發(fā)展,特征尺寸越來越小,VDD-VT下降很快,對動態(tài)范圍影響更加顯著。另一方面,隨著深亞微米CMOS技術(shù)在CMOS圖像傳感器中的廣泛采用,為在像素級采用性能更有效的功能單元提供了設(shè)計空間,因而在像素結(jié)構(gòu)中復(fù)位晶體管和曝光晶體管均采用了PMOS晶體管,這不僅避免了閾值電壓降的損失,改善了動態(tài)范圍,并且可使光敏二極管完全復(fù)位,從而消除圖像拖尾現(xiàn)象,這對于高速應(yīng)用非常重要。這種像素結(jié)構(gòu)中一個潛在的問題是信號采樣級緩沖器的功耗問題,由于保持節(jié)點(diǎn)電容較小,因而可以使該級緩沖器偏置電流盡可能小,為了進(jìn)一步減小功耗,應(yīng)使其只有在采樣S1和S2信號有效時激活,這樣進(jìn)一步減小了功耗。

傳感器工作于同步曝光模式時,像素工作時序如圖3所示。Reset、S1和S2是全局信號,在經(jīng)過長積分時間Tint1曝光后,S1脈沖選通,將當(dāng)前幀像素陣列中光敏二極管PD所產(chǎn)生的信號第一次采樣到存儲節(jié)點(diǎn),隨后Reset對全局像素復(fù)位;再經(jīng)短積分時間Tint2曝光后,S2脈沖選通,將光敏二極管產(chǎn)生信號二次采樣到另一存儲節(jié)點(diǎn),之后,各行的選通信號SEL依次將像素中存儲的兩次采樣信號差分組合輸入到列放大電路讀出處理,可見在像素級實現(xiàn)了兩次曝光采樣存儲及圖像組合處理。在當(dāng)前幀像素數(shù)據(jù)讀出處理的同時,開始對下一幀圖像的長積分時間曝光,在當(dāng)前幀像素內(nèi)存儲器數(shù)據(jù)完全讀出后,即可進(jìn)行下一幀的長積分時間采樣存儲,數(shù)據(jù)的讀出和曝光可以同時進(jìn)行,因而可獲得高速實時數(shù)據(jù)處理。當(dāng)然,傳感器也可工作于滾動曝光模式,像素工作時序和圖3所示類似,但Reset、S1和S2不再是全局信號,在當(dāng)前行數(shù)據(jù)讀出的同時,可對下一行像素進(jìn)行曝光采樣操作,也可獲得較高速度的實時數(shù)據(jù)處理。此外,當(dāng)兩次曝光時間相等時,可很容易實現(xiàn)可用于運(yùn)動探測的直接幀差讀出模式。

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

圖3像素級兩次曝光采樣存儲同步曝光時序

光敏二極管在積分曝光期間放電,其上電壓可表示為:

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

其中,ipd、idc分別是光敏二極管的光電流和暗電流,Cpd是光敏二極管電容,pd=20fF,Tint1=5ms,Tint2=64μs時,忽略暗電流的影響,雙采樣存儲的模擬結(jié)果如圖4所示,圖中曝光的最大入射光強(qiáng)1相應(yīng)于約105fA光電流。圖4(a)中,第一次長時間積分曝光,信號輸出隨著入射光強(qiáng)度的增加而線性增加,在強(qiáng)光照時信號輸出達(dá)到飽和不再增加;第二次短時間積分曝光,光照較弱時,信號輸出近似為零,隨著光照的增強(qiáng),信號輸出緩慢增加,強(qiáng)光照射,信號輸出增加顯著;圖4(b)中,雙采樣信號差分輸出,由兩次曝光的信號組合而成,場景較低照度區(qū)域主要由第一次長積分時間的曝光采樣決定,場景較高照度區(qū)域主要由第二次短積分時間曝光采樣決定。CMOS圖像傳感器的動態(tài)范圍一般依賴于其可分辨的最小信號及可測量的最大信號,顯然雙采樣組合輸出擴(kuò)展了傳感器可測量的最大光強(qiáng)信號,從而增加了動態(tài)范圍。

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

圖4 雙采樣存儲的模擬:(a)兩次曝光采樣;(b)雙采樣組合

另外,雙采樣組合讀出采用了差分讀出模式,在一定程度上也減小了伴隨著信號的暗電流,從而進(jìn)一步改善了動態(tài)范圍。應(yīng)注意到,雙采樣差分讀出減小了最大飽和信號的幅度,并且在Tint1遠(yuǎn)大于Tint2時,像素雙采樣差分信號輸出近似于對圖像場景較高照度區(qū)域的幅度信息作灰度反轉(zhuǎn)處理。像素工作的Spectres模擬結(jié)果如圖5所示,其中PR是復(fù)位信號,Vpd1是被采樣的光敏信號,可見較好實現(xiàn)了雙采樣存儲、差分讀出功能。

像素級雙采樣存儲技術(shù)可提高CMOS圖像的實時處理速度

圖5像素的雙采樣存儲、差分讀出

4 、結(jié)束語

CMOS圖像傳感的動態(tài)范圍對俘獲的圖像質(zhì)量有著重要意義,多次曝光技術(shù)是擴(kuò)展動態(tài)范圍的有效方法之一,但多于兩次的曝光,信號處理復(fù)雜,傳感器的幀頻受到限制,而像素級雙采樣存儲技術(shù)將兩次曝光采樣及圖像組合處理在像素內(nèi)實現(xiàn),在擴(kuò)展動態(tài)范圍的基礎(chǔ)上,可有效提高圖像的實時處理速度。具有兩級緩沖的雙采樣存儲的像素結(jié)構(gòu),在改善動態(tài)范圍的基礎(chǔ)上,不僅可以工作于高速同步曝光模式,也可工作于滾動曝光模式。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2548

    文章

    50680

    瀏覽量

    752020
  • CMOS
    +關(guān)注

    關(guān)注

    58

    文章

    5680

    瀏覽量

    235147
  • 存儲器
    +關(guān)注

    關(guān)注

    38

    文章

    7452

    瀏覽量

    163606
收藏 人收藏

    評論

    相關(guān)推薦

    【TL6748 DSP申請】基于DSP的微光夜視視頻圖像實時處理

    申請理由:TMS320C6748是TI公司推出的高速DSP,將其應(yīng)用于微光視頻圖像實時處理,對于提高系統(tǒng)的實時性和采集具有十分重要的意義,同時也可以講更加復(fù)雜的算法加入其中,對于微光
    發(fā)表于 10-09 15:12

    關(guān)于實時處理圖像

    哪位大神知道如何實時的采集圖像并進(jìn)行圖像處理(比如我用grab.vi實時采集圖像,在這個過程中我
    發(fā)表于 06-06 21:10

    CMOS圖像傳感器的結(jié)構(gòu)及工作原理

    、行選擇、列選擇及放大和光敏單元陣列。芯片上的模擬信號處理電路主要執(zhí)行相關(guān)采樣(CorrelatedDouble Sampling,CDS)功能。芯片上的A/D轉(zhuǎn)換器可以分為像素
    發(fā)表于 10-31 17:34

    CMOS圖像傳感器基本原理和應(yīng)用簡介

    Oxide Semiconductor互補(bǔ)金屬氧化物場效應(yīng)管)技術(shù)來生產(chǎn)圖像傳感器,即CMOS圖像傳感器。CMOS
    發(fā)表于 11-06 10:50

    Avago 130萬像素圖像傳感器ADCC-3100

      Avago宣布推出第一款采用先進(jìn)圖像處理技術(shù)(包括點(diǎn)測光功能)的1/5英寸光學(xué)格式、130萬像素小型(SFF)CMOS
    發(fā)表于 11-19 16:58

    安捷倫130萬像素CMOS圖像傳感器可大幅減少噪聲

    質(zhì)量JPEG壓縮而不遺漏任何畫幀;先進(jìn)的曝光控制技術(shù),提供更明亮且不閃爍的圖像;加強(qiáng)的自動修正像素技術(shù),取得比傳統(tǒng)修正錯誤像素方法優(yōu)異5倍的
    發(fā)表于 11-19 15:13

    CMOS有源像素傳感器的圖像質(zhì)量怎么提高?

    在20年前幾乎是同時起步的。CCD是應(yīng)用在攝影攝像方面的高端技術(shù)元件,CMOS則應(yīng)用于較低影像品質(zhì)的產(chǎn)品中。由于CCD器件有光照靈敏度高、噪音低、像素小等優(yōu)點(diǎn),所以在過去15年里它一直主宰著
    發(fā)表于 09-04 07:45

    如何去提高CMOS圖像傳感器的圖像質(zhì)量?

    為什么要改善CMOS圖像傳感器的圖像質(zhì)量?有源像素CMOS圖像傳感器的功能結(jié)構(gòu)包括哪些?有源
    發(fā)表于 04-20 06:15

    分析一款不錯的基于多DSP與FPGA的實時圖像處理系統(tǒng)設(shè)計

    成、工作原理、電源設(shè)計、DSP引導(dǎo)方式以及軟件設(shè)計等,通過對每秒25幀14位640&TImes;512像素的數(shù)字圖像處理結(jié)果表明,該系統(tǒng)滿足高速圖像
    發(fā)表于 04-28 06:14

    基于存儲機(jī)制的實時圖像采集存儲系統(tǒng)

    針對實時圖像采集和存儲的要求和困難,設(shè)計了一個基于 CMOS 圖像傳感器和
    發(fā)表于 07-30 10:44 ?6次下載

    基于FPGA的小波圖像實時處理方法

    基于FPGA的小波圖像實時處理方法,下來看看
    發(fā)表于 09-22 13:06 ?33次下載

    高分辨率圖像實時處理的應(yīng)用于Bayer格式圖像預(yù)處理的介紹

    處理的數(shù)據(jù)量少,算法結(jié)構(gòu)復(fù)雜,適于運(yùn)算速度快,尋址靈活的DSP數(shù)字信號處理器進(jìn)行處理。這里提出了一種FPGA+DSP相結(jié)合的實時
    發(fā)表于 10-10 16:36 ?6次下載

    如何使用FPGA進(jìn)行圖像實時處理系統(tǒng)的設(shè)計

    由于現(xiàn)場實時測量的需要,機(jī)器視覺技術(shù)越來越多地借助硬件來完成,如DSP芯片、專用圖像信號處理卡等。但是,DSP做圖像
    發(fā)表于 10-23 17:34 ?17次下載
    如何使用FPGA進(jìn)行<b class='flag-5'>圖像</b><b class='flag-5'>實時處理</b>系統(tǒng)的設(shè)計

    基于FPGA的圖像實時處理系統(tǒng)設(shè)計

    點(diǎn)擊上方 藍(lán)字 關(guān)注我們 由于現(xiàn)場實時測量的需要,機(jī)器視覺技術(shù)越來越多地借助硬件來完成,如DSP芯片、專用圖像信號處理卡等。但是,DSP做圖像
    的頭像 發(fā)表于 06-15 15:20 ?1337次閱讀
    基于FPGA的<b class='flag-5'>圖像</b><b class='flag-5'>實時處理</b>系統(tǒng)設(shè)計

    實時處理如何驅(qū)動高性能電源系統(tǒng)?

    實時處理如何驅(qū)動高性能電源系統(tǒng)? 實時處理是一種在實時環(huán)境中對來自外部傳感器和設(shè)備的數(shù)據(jù)進(jìn)行即時處理和響應(yīng)的技術(shù)。在電源系統(tǒng)中,
    的頭像 發(fā)表于 11-24 14:26 ?479次閱讀