具有選擇性紅外濾光片陣列的傳感器組件的製作方法
2024-03-23 10:19:05

本發明涉及一種圖像傳感器,更具體來說,涉及一種例如將紅外洩露減小至可見像素的具有選擇性紅外(SIR,Selective Infrared)濾光片的圖像傳感器。
背景技術:
圖像傳感器已被廣泛應用於數位相機、行動裝置、安全系統、計算機和很多其他應用中。部分圖像傳感器設計用來捕獲所有的可見光(例如,顏色)和紅外光。例如,圖像傳感器的一部分像素可用於將可見光轉換為顯示顏色圖像信息的電子信號並且另一部分像素可用於將紅外光轉換為顯示紅外圖像信息的電子信號。針對多種用途,不同的像素可進行結合。然而,由於可見像素和紅外像素在圖像傳感器上空間多路復用,因此,尤其是,在可見像素上會存有紅外光的強光譜串擾(spectral crosstalk)。
在一種方法中,影像後處理技術被用於減少光譜串擾。例如,可見信號中的紅外串擾可被推定然後被提取。理想地,由於來自紅外光的影響可被除去,因此餘下的將僅可顯示來自可見光的影響。然而,由於這種技術難以準確推定紅外串擾的量,因此存在限制。除此之外,由於可見像素初期捕獲紅外光和可見光的和,因此相比可見像素的全動態範圍較小的範圍可被單獨用於可見光。其可在其他效果中減少動態範圍和後處理信號的信噪比(SNR,Signal to Noise Ratio)。
因此,需要一種更好的用於減少光譜串擾的方法。
本發明通過在圖像傳感器中集成選擇性紅外濾光片,可克服現有技術的限制。
技術實現要素:
根據一個方面,圖像傳感器包括可見像素和紅外像素。可見像素在經由可見像素接收的可見帶寬內生成指示光的信號,且紅外像素在經由紅外像素接收的紅外帶寬內生成指示光的信號。選擇性紅外濾光片集成在圖像傳感器上。選擇性紅外濾光片陣列包括在可見像素中按過濾傳播的紅外帶寬內的光而配置的選擇性紅外像素濾光片。通過這種方式,可減少可見像素中的紅外串擾。在一部分實施例中,選擇性紅外濾光片陣列過濾650-800mm帶寬的光和/或850+/-50mm帶寬周圍的光。例如,這種材料可從富士膠片電子材料(Fuji Film Electronic Materials)中獲取。
其他方面包括構成、設備、系統、改善、方法、工藝、應用、計算機可讀介質以及與上述中任一個相關的其他技術。
附圖說明
本發明的實施例當參考附圖時具有從下述詳細說明和附屬權利要求項中更加明顯的其他優點和特徵。
圖1A是根據本發明一個實施例的利用傳感器組件的共享傳感器成像系統即多光圈的框圖。
圖1B示出用於捕獲圖1A的共享傳感器成像系統中的可見光和紅外光的傳感器組件的濾光片設計的一個示例。
圖2A是根據本發明一個實施例的使用選擇性紅外濾光片陣列的共享傳感器成像系統的剖面圖。
圖2B是適用於圖2A的共享傳感器成像系統的傳感器組件的剖面圖。
圖2C示出經由圖2A的共享傳感器成像系統的可見像素捕獲的光的光譜響應。
圖2D示出經由圖2A的共享傳感器成像系統的紅外像素捕獲的光的光譜響應。
圖2E是適用於圖2A的共享傳感器成像系統的傳感器組件的框結構的平面圖。
圖3A是根據本發明一個實施例的利用較長波長紅外截止(cutoff)濾光片的共享傳感器成像系統的剖面圖。
圖3B示出經由圖3A的共享傳感器成像系統的可見像素捕獲的光的光譜響應。
圖3C示出經由圖3A的共享傳感器成像系統的紅外像素捕獲的光的光譜響應。
圖4A至圖4C示出根據本發明一個實施例的多光圈影像系統的操作。
圖5A是根據本發明另一實施例的使用多帶濾光片的共享傳感器成像系統的剖面圖。
圖5B是圖5A的多帶濾光片的一個實施例的示圖。
圖5C示出經由圖5A的共享傳感器成像系統的可見像素捕獲的光的光譜響應。
圖5D示出經由圖5A的共享傳感器成像系統的紅外像素捕獲的光的光譜響應。
圖6是根據本發明一個實施例的使用多帶濾光片的另一個共享傳感器成像系統的剖面圖。
圖7是根據本發明一個實施例的用於捕獲可見光和紅外光的影像系統的剖面圖。
附圖示出了僅用於說明意圖的多種實施例。本領域的技術人員可容易地從下述說明中認識到在不脫離本發明思想的前提下在此說明的結構和方法的替代實施例可被利用。
具體實施方式
附圖和下述說明僅是涉及優選實施例的示例。應該注意從下述的說明中,本說明書中說明的結構和方法的替代實施例可被容易地認作為在不脫離所要求思想的前提下可被使用的多種替換。
圖1A是根據本發明一個實施例的利用傳感器組件的共享傳感器成像系統即多光圈的框圖。圖像系統可是數位相機的部分或集成於移動手機、網絡攝像機、生物傳感器、影像掃描器或其他任何要求圖像捕獲功能的多媒體設備。圖1A所示的系統包括成像光學系110(例如,透鏡和/或反射鏡系統)、多光圈系統120和圖像傳感器130。成像光學系110從場景(scene)將對象物在圖像傳感器130上成像。在圖1A中,對象物150在焦點上,因此對應圖像160位於圖像傳感器130的平面。如圖4所示,並不是一直如此。位於其他深度的對象物在圖像傳感器130上將不對準焦點。
多光圈系統120包括至少兩個光圈,如圖1所示光圈122和124。在該示例中,光圈122是限制可見光傳播的光圈,且光圈124限制紅外光傳播。在該示例中,兩個光圈122和124位於一起但其也可分離。這種多光圈系統120通過波長選擇性光學元件例如波長濾光片可被實現。為了方便,用於實現光圈的波長濾光片將被稱為光圈濾光片。不同類型的光圈濾光片的示例在下表進行說明。正如在本發明中使用的,術語例如「光」、「光學系」和「光學」等並不意味著局限於電磁光譜的可見部分,也可包括成像發生之包含紅外的電磁光譜的其他部分。
圖像傳感器130全部檢測與光圈122相對應的可見圖像和與光圈124相對應的紅外圖像。實際上,存有共享單一傳感器陣列130的兩個成像系統:使用光學系110、光圈120和圖像傳感器130的可見成像系統;以及使用光學系110、光圈124和圖像傳感器130的紅外成像系統。雖然在該示例中成像光學系110被兩個成像系統充分共享,但此並不需要。此外,兩個成像系統不必是可見且是紅外的。其可是其他光譜組合,例如,紅和綠,或紅外和白(例如,可見但不具有顏色)。
圖像顯示器130受電磁輻射的曝光典型地被快門170和多光圈系統120的光圈控制。當快門170打開時,光圈系統控制光量以及曝光圖像傳感器130光的準直度。快門170可以是機械快門或者該快門可是集成在圖像傳感器中的電子快門。圖像傳感器130包括形成兩維像素陣列的感光部位(像素)的行與列。圖像傳感器可是互補金屬氧化物半導體(CMOS,Compliment Metal Oxide Semiconductor)有源像素傳感器或電荷耦合元件(CCD,Charge Coupled Device)圖像傳感器。或者,圖像傳感器可涉及其他Si(例如,a-Si)、III-V(例如,GaAs)或基於導電高分子的圖像傳感器結構。
當光經由成像光學系110投射到圖像傳感器130時,每個像素生成一個電子信號,該電子信號指示入射到該像素的電磁輻射(能量)。為了分離投射到圖像傳感器130的成像平面的圖像的不同光譜分量,將光譜濾光片陣列132置於成像光學系110和圖像傳感器130之間。光譜濾光片陣列132可與圖像傳感器130集成以形成傳感器組件,從而圖像傳感器的每個像素具有相應的像素濾光片。每個光譜濾光片用於將預定波長帶寬的光傳至像素。通常,使用紅、綠和藍(RGB)濾光片與紅外(I)濾光片的組合。然而,也可以使用其他濾光片方案,例如,CYGMI(青色、黃色、綠色、品紅色、紅外)、RGBEI(紅色、綠色、藍色、翠綠色、紅外)等。或者,圖像傳感器可具有紅色、綠色和藍色傳感器元件互相層疊而非依賴於單獨像素濾光片的層疊設計。紅外傳感器元件可是該層疊的一部分用於形成RGBI層疊,或可與RGB層疊分開實現。
曝光的圖像傳感器130的每個像素生成與透過和該像素結合的光譜濾光片陣列132的電磁輻射成比例的電子信號。像素陣列因此生成表示透過該光譜濾光片陣列132的電磁能量(輻射)的光譜分布。從像素接收的信號通過使用一個或多個片上放大器(on-chip amplifier)可被放大。在一個實施例中,圖像傳感器的每一個光譜頻道可使用一個單獨的放大器被放大,因此允許針對不同的波長帶寬單獨地控制ISO速度。
進一步,像素信號通過使用可被集成在圖像傳感器130的晶片上的一個或多個模數(A/D,Analog to Digital)轉換器,可被樣本化、量子化且轉換為數字格式。數位化的圖像數據經由處理器180例如與圖像傳感器耦合的數位訊號處理器被處理,其被配置來執行公知的信號處理功能例如插值、過濾、白平衡、亮度校正、和/或數據壓縮技術(例如,MPEG或JPEG格式技術)。
處理器180可包括用於獲取與經由多光圈成像系統100捕獲的圖像相結合的深度信息的信號處理功能184。信號處理功能可提供具有包括各種深度的焦點、焦點控制和立體3D圖像瀏覽功能的拓展成像功能的多光圈成像系統100。
處理器180可與額外的計算資源相耦合,例如額外的處理器、用於存儲捕獲的圖像的存儲內存以及用於存儲軟體程序的程序內存。控制器190也可被用於控制和協助成像系統100中的構成的操作。在此記載的經由處理器180執行的功能可在處理器180、控制器190和額外的計算資源中進行分配。
圖1B示出用於捕獲圖1A的共享傳感器成像系統中的可見光和紅外光的傳感器組件的濾光片設計的一個示例。在圖1B的設計中,傳感器組件內的顏色像素接收可見帶寬I內的光,其波長最長為約650nm。傳感器組件具有額外的顏色像素濾光片(例如,R,G,B顏色像素濾光片),其未顯示在圖1B中,且將可見帶寬I細分為單個顏色要素。傳感器組件內紅外像素接收紅外帶寬II麼的光,在本示例中,其波長範圍大約是800-900nm。在本示例中,可見帶寬I和紅外帶寬II通過大約650-800nm的緩衝帶寬而被分開。
圖1B示出多帶寬濾光片138、可見濾光片陣列132C和紅外濾光片陣列1321的理想光譜響應。多帶寬濾光片138顯示根據傳感器組件的外部構成要素的波長過濾的淨效應(net effect)。例如,其可作為如圖所示具有連個通頻帶的單一波長濾光片而實現。或者,其可作為多個構成元素而實現,例如,切斷長於900納米波長的一個波長濾光片加上切斷650-800納米之間帶寬的第二波長濾光片。可見帶寬I和紅外帶寬II全部通過多帶寬濾光片138。
然而,傳感器組件的可見像素應僅檢測可見光而不是紅外光。顏色濾光片陣列132C過濾向可見像素傳播的紅外光。在大多數設計中,可不是單一形態的可見像素濾光片。相反,可使多種形態的顏色像素濾光片(例如,R、G、B像素濾光片)從而圖1B所示的光譜響應132C意味著代表這些不同形態的聚合響應。類似地,傳感器組件的紅外像素應僅檢測紅外光而不是可見光。紅外濾光片陣列132I過濾向紅外像素傳播的可見光。
需要注意可見帶寬I根據多帶寬濾光片138和顏色濾光片陣列132C的聚合效應而被決定。在圖1B中,針對多帶寬濾光片138的650納米的截止波長由於短於顏色濾光片陣列132C,因此多帶寬濾光片138針對可見帶寬I決定長波長界限。實際上,關於顏色濾光片陣列132C的截止波長可在650-800納米之間的任意處發生,只要顏色濾光片陣列132C仍過濾IR帶寬II。或者,顏色濾光片陣列132C可具有較短的截止波長,或兩個濾光片協力運作以來決定有效的截止波長。除此之外,顏色濾光片陣列132C也能透過紅外波長只要其長於900納米,其原因在於多帶寬濾光片138過濾這些較長的波長。類似的備註(remarks)針對IR帶寬II也適用於多帶寬濾光片138和IR濾光片陣列132I。
從下述的實施例可得知,不需要圖1B中示出的特定波長。可見帶寬I和紅外帶寬II相比所示的可佔據不同的波長帶寬。在部分設計中,可見帶寬I和紅外帶寬II可連續或重複。由於大部分的波長構成要素不具有圖1B所示的理想性能,因此可期待帶寬之間的混合。
在圖1A中,顏色濾光片陣列132C和紅外濾光片陣列132I是光譜濾光片陣列132的一部分。圖1A也提供了多光圈系統120以定義用於兩個帶寬I和II的不同大小的光圈。在該示例中,顏色帶寬I從較大的光圈122中提供圖像且紅外帶寬II從較小光圈124中提供圖像。因此,多光圈系統120可被實現為針對較小光圈124外部的區域切斷紅外帶寬II的波長元件。兩個圖像進行比較以推定深度信息。
圖2A至圖2E根據本發明一個實施例示出使用選擇性紅外濾光片陣列260的共享傳感器成像系統200。圖2A是共享傳感器成像系統200的剖面圖。該系統包括成像光學系110、光圈濾光片210、機械光圈217、具有810納米截止的紅外截止濾光片220(截止可被定義為傳播降低至最大值50%的波長)、以及傳感器組件270。傳感器組件270包括黑濾光片陣列240、紅顏色濾光片陣列230R、綠顏色濾光片陣列230G、藍牙色濾光片陣列230B、選擇性紅外濾光片陣列260、以及具有感光像素陣列的圖像傳感器130。
系統200按具有用於可見帶寬內的光的第一光圈的成像系統而動作,且按具有用於紅外帶寬內的光的另一第二光圈的成像系統而動作。可見光圈典型地大於紅外光圈。這種雙光圈結構根據光圈濾光片210實現。光圈濾光片210是多區域波長濾光片。即,其具有不同波長響應的多區域。在圖2A中,多區域波長濾光片具有圖2中透明所示的中心區域,且在圖2中具有畫有交叉陰影線(cross-hatched)外側環紋(annular)區域。中心區域透過全部波長。外側區域具有光譜響應215。其是傳送最大約650納米的可見光且過濾長於650納米的波長的短通濾光片。
在該實施例中,光圈濾光片210是在外側區域塗覆紅外隔離材料的玻璃片(glass disk)。中心區域不塗覆或可是物理性的孔。光圈濾光片210可根據具有與透明塗覆相關的小直徑塗層的中心的多層塗覆技術來製作。在一個實施例中,光圈濾光片210可經由沉積各種指數的材料,例如,交替沉積具有高折射指數(例如,二氧化鈦TiO2)和低折射指數(例如,二氧化矽SiO2),通過利用光波的幹擾性而進行製造。
穿過光圈濾光片210的光被成像光學系110傳導至傳感器組件270。光被設定可見光圈大小的機械光圈270物質性限制。其也被具有光譜響應225的810納米紅外截止濾光片220過濾。其是能傳送最大約810納米的可見和紅外光且過濾長於810納米波長的短通濾光片。
傳感器組件270還可包括部分集成的濾光片:紅色濾光片陣列230R、綠色濾光片陣列230G、藍色濾光片陣列230B、選擇性紅外濾光片陣列260和黑濾光片陣列240。相應的光譜響應分別由曲線235R、235G、235B、265和245 顯示。針對顏色像素,紅色像素濾光片230R、綠色像素濾光片230G和藍色像素濾光片230B為圖像傳感器130中的可見像素提供相應的顏色響應。選擇性紅外濾光片陣列260如圖2C所說明的,若未過濾紅外光,則由圖像傳感器130傳送至可見像素。黑濾光片陣列240是具有約800納米截止波長的長通濾光片,其中該傳送增至最大值的50%。
圖2B是適用於圖2A的共享傳感器成像系統的傳感器組件的剖面圖。傳感器組件270利用CMOS製造技術而被製造。從下到上,傳感器組件270包括光電二極體130(例如,圖像傳感器像素)的陣列、鈍化層276、紅外/顏色濾光片陣列(ICFA)274和微透鏡陣列271。傳感器組件也包括其他電路和互連線,其並未詳細顯示。結合在矽基板的光電二極體130將光轉換為電子信號。鈍化層276位於有效電路上部用於絕緣。ICFA包括RGB濾光片陣列230、選擇性紅外濾光片陣列260和黑濾光片陣列240。ICFA位於鈍化層276上部且位於微透鏡陣列271下部。微透鏡陣列271將經由ICFA過濾的光聚焦於光電二極體130。每個微透鏡可與一個光電二極體相結合。
選擇性紅外濾光片陣列260包括用於過濾傳播到可見像素的紅外串擾的選擇性紅外像素濾光片。選擇性紅外像素濾光片260如圖2B所示可位於顏色像素濾光片230和顏色像素130之間。在一個實施例中,選擇性紅外像素濾光片由可從富士膠片電子材料中獲取的材料而製成。
黑濾光片陣列240包括用於過濾傳播到紅外像素的可見串擾的黑像素濾光片。黑像素濾光片由具有針對光譜的紅外帶寬中的波長高透射率的濾光片材料而製成。在一個實施例中,黑濾光片由可由富士膠片電子材料提供的材料而製成。在另一實施例中,黑濾光片由布魯爾科技(Brewer Science)銷售的黑聚醯亞胺材料(商標為「DARC 400」)製成。這些黑濾光片具有不同的截止波長。圖2A所示的黑濾光片具有約800納米的截止波長。
濾光片陣列在US2009/0159799「Color infrared light sensor,camera and method for capturing images」中進行了更詳細的記載,其被作為參考結合在此。
如圖2B所示,濾光片陣列可全部接收可見和紅外光。紅色濾光片陣列230R具有光譜響應235R(如圖2A和C所示)且傳送紅色和紅外光。選擇性紅外濾光片陣列260過濾紅外光且僅允許紅光到達下層的光電二極體。針對綠色濾光片陣列230G和藍色濾光片陣列230B也發生類似的過程。
圖2C針對經由圖像傳感器的可見像素130R、G、B捕獲的光示出用於多光圈成像系統的全部光譜響應。參考圖2A,經由可見像素130捕獲的光透過光圈濾光片210、紅外截止濾光片220、顏色濾光片陣列230R、G、B中的一個以及選擇性紅外濾光片陣列260。現先忽略光圈濾光片210。圖2C示出所有其他濾光片的光譜響應。可看出,用於三個顏色像素濾光片230R、G、B的光譜響應延伸至紅外範圍。尤其是,光譜響應235R示出紅色像素濾光片230R將因紅外洩露導致強光譜串擾的強紅外光發送至紅色像素130R。由於圖像傳感器130對紅外輻射的感光度約高於其對可見光感光度的四倍,因此其具有很大的影響。光譜串擾會影響圖像質量(例如,顏色校正、顏色再生、噪音)、動態範圍、以及深度預測的準確性。
選擇性紅外像素濾光片260顯著地降低光譜串擾。265示出選擇性紅外像素濾光片260的光譜響應,其大致具有由抑止頻帶劃分的兩個通帶。第一通帶包括可見光且然後從650納米90%透光率將至大約850-900納米零透光率。第二通帶傳送大致從850-900納米的光。290C針對紅外截止濾光片225、顏色濾光片陣列235(由代表三色像素濾光片的一般光譜行為的聚合曲線而表示)、以及選擇性紅外濾光片陣列265。由陰影區域顯示的聚合顏色響應290C不是計算的實際響應,該響應要求將構成光譜響應相乘。進一步,陰影區域僅意在表示系統的一般光譜行為。尤其是,與光譜響應235相比,聚合顏色響應290C的紅外光被選擇性紅外像素濾光片顯著降低,其為可見像素130R、G、B降低光譜串擾。
參考圖2B,針對紅外像素130I,黑濾光片陣列240過濾可見光且將紅外光傳送到鈍化層276。圖2D針對經由圖像傳感器的紅外像素130I捕獲的光,示出用於多光圈成像系統200的全部光譜響應290I。圖2D與圖2C方法相同。光譜響應225和235是用於傳送到紅外像素130I的光所遇到的濾光片元素。聚合紅外響應290I在底部圖中示出。如圖2C,陰影區域示出主要光譜貢獻中的重疊且僅意在表示系統的一般光譜行為。紅外像素130I從大約750-810納米的波長帶寬中接收紅外光。
圖2C和圖2D忽略光圈濾光片210的影響,其是在中心區域的全通濾光片和在外側區域具有大約650納米截止波長的短通濾光片。針對來自中心區域的光,光圈濾光片210針對圖2C和圖2D所示的光譜響應就沒有任何影響。即,傳播到顏色像素130R、G、B的光將仍經受圖2C所示的光譜濾光且傳播到紅外像素130I的光將仍經受圖2D所示的光譜濾光。針對來自外側區域的光,光圈濾光片210將有效過濾大於650納米的波長。根據需要將有效阻止至紅外像素130I的傳送,且將進一步降低向顏色像素130R、G、B的紅外串擾。
在圖2A和圖2B中,像素130按直線陣列示出。其並不是必須的。例如,圖2E是根據本發明一個實施例傳感器組件270的框結構282的平面圖。傳感器組件270具有框像素,例如2X2像素的框282,其中每個框包括紅色、綠色、藍色和紅外(RGBI)像素。這種傳感器組件的配置在US2009/0159799「Color infrared light sensor,camera and method for capturing images」中進行了更詳細的記載,其被作為參考結合在此。典型的像素大小範圍為0.8至2微米,且典型地不大於4微米。
傳感器組件270的像素數量取決於第二光圈的大小和框中像素的數量。傳感器組件270典型地包括排列於具有像素至像素間隔不大於4微米的矩形陣列的2-16百萬RGBI像素。典型地,傳感器組件270的大小為1/4英寸或更大。傳感器組件270生成用於形成原始馬賽克圖像的可見信號和紅外信號。可使用去馬賽克工藝從該馬賽克顏色圖像中重建全解析度顏色圖像。
在圖2A至2D的示例中,紅外截止濾光片220具有大約810納米的截止波長。然而,因為選擇性濾光片陣列260過濾向可見像素的紅外光,因此紅外截止濾光片的截止波長可被延伸至更長的波長。
圖3A至圖3C示出如此示例。圖3A是利用較長波長紅外截止(cutoff)濾光片320的共享傳感器成像系統的剖面圖,其具有大約900納米而不是810納米的截止波長。紅外截止濾光片320是傳送具有波長長至大約900納米的可見光和紅外光的短通濾光片。圖3A也示出這種濾光片320的光譜響應325。否則,系統300與系統200相同。較長截止波長可由選擇性紅外像素濾光片的光譜響應265決定。例如,其可被選擇為光譜響應265增至一定閾值的波長。
圖3B和圖3C示出該系統的光譜響應。除了光譜響應225被光譜響應325替代以外,其與圖2C和圖2D相同。將圖3B與圖2C相比,具有波長為850納米至900納米的稍微多數量的紅外光被聚合顏色響應390C傳送。然而,這種額外的紅外串擾仍少於當僅顏色像素濾光片(曲線235)被使用時的情況。將圖3C與圖2D相比較,聚合響應390I示出更多的紅外光被紅外像素130I所接收。
通過利用選擇性紅外濾光片260,在本示例中,紅外截止濾光片320的截止波長可被從810納米延長至900納米。其結果是,經由紅外像素接收的紅外光數量增加,導致更高的SNR。當紅外圖像數據被用來計算深度信息,該增加的信息能產生更準確的深度預測。
例如,在一應用中,多光圈系統可被用來提高景深(DOF,Depth of Field)或相機的其他深度方面。DOF決定當圖像被捕獲時距離位於焦點處的相機的距離範圍。在該範圍內對象物則是可接受性地清晰。針對中遠距離和給定圖像格式,DOF由成像光學系N的焦距、與透鏡開口(光圈)結合的f數、和/或對象物至相機距離而決定。光圈越寬(接收的光越多),DOF越被限制。多光圈成像系統的DOF方面在圖4中進行說明。
圖4A至圖4C示出根據本發明一個實施例的多光圈影像系統的操作。參考圖4B,其示出在圖像傳感器430中對象物150的成像。可見光和紅外光經由多光圈系統420可進入成像系統。在一個實施例中,多光圈系統420可是濾光片塗覆的透明基板。一個濾光片塗層424具有直徑為D1的中央圓孔。該濾光片塗層傳送可見光且反射和/或吸收紅外光。不透明罩422具有直徑為D2的較大圓形開口。罩422不傳送可見光或紅外光。其可是發射紅外光和可見光的薄膜塗層,或該罩可是光學系統中用於把持和定位基板的不透明支持物的一部分。通過這種方式,多光圈系統420起到用於可見光的直徑為D2的圓形光圈和用於紅外光的較小直徑為D1的圓形光圈。可見光系統相比紅外光系統具有較大的光圈和較快的f-數。透過光圈系統的可見光和紅外光經由成像光學系410投射到圖像傳感器430。
圖像傳感器的像素因此接收針對可見光的更寬光圈光學圖像信號452B,針對紅外光,覆蓋第二較窄光圈光學圖像信號454B。較寬光圈可見圖像信號452B具有較短的DOF,而較窄光圈紅外圖像信號454具有更長的DOF。在圖4B中,對象物150B位於焦點N的平面,以使相應圖像160B位於圖像傳感器430的焦點。
靠近透鏡的焦點N的平面的對象物150被投射至具有相對較小散焦模糊的圖像傳感器平面430。遠離焦點N的平面的對象物被投射至位於圖像傳感器430前方或後方的圖像平面。因此,經由圖像傳感器430捕獲的圖像模糊。因為可見光452B相比紅外光454B具有較快的f-數,因此隨著對象物150移動遠離焦點N的平面,可見圖像相比紅外圖像將更快變模糊。其由圖4A和圖4C以及每個圖右側的模糊表而顯示。
圖4B的大部分示出從對象物150B到圖像傳感器430的光束傳播。圖4B的右手側也包括模糊表435,其示出自對象物的軸上點152起由可見光和紅外光導致的模糊。在圖4B中,軸上點152生成相對小的可見模糊432B且生成也相對小的紅外模糊434B。其是因為在圖4B中,對象物處於焦點。
圖4A至圖4C示出散焦的影響。在圖4A中,對象物150A位於焦點N的標準平面的一側。其結果是,相應圖像160A形成在圖像傳感器430前方的位置。光傳播額外的距離至圖像傳感器430,因此生成相比圖4B更大的模糊點。因為可見光452A是更快的f-數,因此其更快偏離且生成更大的模糊點432A。紅外光454是較慢的f-數,因此其生成不大於圖4B的模糊點434A。如有f-數足夠慢,紅外模糊點將被視為在穿過關注深度的範圍具有恆定的大小。
圖4C示出相同效果,但其在相反方向。在此,對象物150C生成將處於圖像傳感器430後方的圖像160C。圖像傳感器430在其到達實際圖像平面之前捕獲光,從而導致模糊。由於更快的f-數,可見模糊點432C較大。由於較慢的f-數,紅外模糊點434C與散焦變得更慢。
可見像素捕獲可見光數據且被用於生成現有全解析度顏色圖像。紅外像素捕獲紅外光數據且被用於增強圖像的清晰度。兩數據組間清晰度的不同被用於預測圖像中對象物的深度。
後處理功能的示例,包括用於計算清晰度和/或深度的變數,在美國申請號13/144,499「Improving the depth of field in an imaging system」;美國申請號13/392,101「Reducing noise in a color image」;美國申請號13/579,568「Processing multi-aperture image data」;美國申請號13/579,569「Processing multi-aperture image data」以及美國申請號13/810,227「Flash system for multi-aperture imaging」進行了記載,其整體被結合在此。
參考圖1B,多帶寬濾光片138設計用來在單獨的波長帶寬中傳送可見光和紅外光。多帶寬濾光片138的紅外光通帶設計用來定位在紅外濾光片陣列132I的通帶內且定位在可見濾光片陣列132C的抑止頻帶內。通過這種方法,來自多帶寬濾光片138的傳送紅外光被壓縮在可見像素,且被紅外像素而接收。圖5至圖7針對使用多帶寬濾光片的成像系統給出與紅外濾光片陣列相集成的傳感器組件的使用的示例。
圖5A至圖5D示出一個示例。圖5A是使用多帶濾光片520而不是圖2和圖3中的紅外截止濾光片220和320的共享傳感器成像系統500的剖面圖。多帶寬濾光片520具有兩個通帶:一個用於長至約650納米的波長,且另一個用於約800納米至900納米的波長。圖5A也示出這種濾光片520的光譜響應525。否則,系統500與系統200和300相同。
圖5B是多帶寬濾光片520的一個實施例的示圖,其在玻璃基板512的相反一側與光圈濾光片210相集成。光圈濾光片210塗覆在玻璃基板512的頂部側(入射光表面)且多帶寬濾光片520塗覆在玻璃基板的底部側。光圈濾光片210與前述記載相同。其具有中心區域傳送所有波長以及外側區域過濾紅外波長(例如,具有650納米的截止波長)。玻璃基板512基於光學屬性例如吸收係數、折射指數、色散、相對介電常數等而被選擇。玻璃基板512的總厚度優選為0.3毫米或更小。多帶寬過濾片520包括兩個或多個透明過濾片圖層,通過沉積各種指數的材料而製成。光譜響應525(如圖5A、D)示出多帶寬濾光片520在可見帶寬和紅外帶寬內傳送光但過濾在可見和紅外通帶之間抑止帶寬的光。在本示例中,可見帶寬長至波長650納米且紅外帶寬是從800納米到900納米。
圖5C和圖5D示出系統的光譜響應。除了光譜響應225和325被光譜響應525替代以外,其與圖2和圖3相同。從圖5C的頂部表可看出,用於多帶寬濾光片520的第二通帶允許紅外光的部分洩露至可見像素130R、G、B,但由於選擇性紅外濾光片260的良好濾光片特性並不是太多。此外,多帶寬濾光片520也降低具有波長為650納米至800納米的大量紅外串擾。
在圖5D的底部圖中可看出,多帶寬濾光片520允許紅外像素130I在波長頻帶為800納米至900納米內接收更多的紅外光,其因此增加用於紅外信號的SNR。
圖6示出多帶寬濾光片使用的另一個示例。在該示例中,紅光,而不是紅外光,被用於獲取深度信息。圖6是使用光圈濾光片620的共享傳感器成像系統600的剖面圖。除了圖5中的光圈濾光片210被光圈濾光片620替代以外,系統600與系統500相同。光圈濾光片620的外側區域具有傳送長至約580納米的可見光且過濾大於580納米可見波長的光譜響應625。外側區域有效過濾紅光(波長在約580-650納米的範圍),意味著紅光將僅經受被中心區域定義的較小光圈而非較大的全部光圈。濾光片620也在800-900納米帶寬內通過紅外波長。
因此,圖6的紅光可起到與圖5A的紅外光相似的作用。由於紅色圖像經由較小的光圈曝光,因此紅色(R)圖像將具有較大景深。綠色(G)、藍色(B)和紅外(I)圖像由於其經由較大的光圈曝光,因此具有較小的景深。系統600可被用於生物識別(例如,IRIS和臉部識別)或與深度地圖一起使用高質量紅外和顏色圖像的其他應用。
與選擇性紅外濾光片集成的傳感器組件的應用並不局限於多光圈成像系統。其可用於捕獲可見光和紅外光的其他成像系統或設備,例如使用IrED用於照亮對象物的相機。圖7示出這種應用。圖7是用於捕獲可見光和紅外光的成像系統700的剖面圖。除了光圈濾光片210、620被移除且多頻帶濾光片520被移動到其他位置(雖然在圖6和圖7中其也可留在相同位置)以外,系統700與系統500和600相同。由於沒有光圈濾光片,因此每個R、G、B、I圖像經由相同光圈被曝光。即,系統700捕獲RGBI圖像。R、G、B像素被顏色濾光片陣列230和選擇性紅外濾光片陣列260過濾,其過濾紅外波長。I像素被黑濾光片陣列240過濾,其過濾可見波長。在一個替代設計中,多帶寬濾光片525的可見通帶可貫穿約400-650納米。
具有選擇性紅外濾光片的圖像傳感器(也指傳感器組件或具有紅外/顏色濾光片陣列的圖像傳感器)並不局限於上述實施例。具有選擇性紅外濾光片的圖像傳感器也可用於使用具有深度地圖的高質量顏色圖像的散焦或自對對焦應用。在使用模糊圖像預測深度的實施例中,清晰紅外圖像可幫助提高深度解析度。在結構光被投射來測量用於姿勢追蹤的深度的實施例中,紅外光束不降低顏色圖像可被使用。
並且,具有選擇性紅外濾光片的圖像傳感器可用於各種應用,例如,平板、數位相機(數碼靜態相機、數碼視頻相機、任何其他可捕獲可見和紅外光的合適數位相機)、安全系統、遊戲、手勢檢測、PC多媒體、動作追蹤、或其他任何適合應用,包括那些使用深度信息、高頻信息、3D信息、動態信息。此外,具有選擇性紅外濾光片的圖像傳感器在不同的照明下工作,例如,直接的太陽光、或其他任何提供可見和紅外光的適合照明。
雖然詳細的說明包括很多示例,但這些並不應該構建為限制本發明的範圍,且其僅是用於說明本發明的不同示例和方面。其應該被理解為本發明的範圍包括上述未被具體討論的其他示例。例如,波長過濾可通過多種不同方法而實現,包括吸收或反射不需要的光,例如,吸收型濾光片或二色性型濾光片。過濾也不需要將光等級降至零或具有像從傳送到隔離之轉換的步進功能,其能從附圖中的各種光譜響應中看出。進一步,本發明的範圍也並不局限於上述示例中描述的具體波長方案和光圈濾光片。
此外,本發明的範圍也不局限於上述所給示例中的具體數字。紅外帶寬可由幾個要素例如SNR、檢測感光度、圖像質量、照明資源的光學特徵(例如,光譜、強度、吸收或散射)、長/短距離應用、和室內/室外環境而決定。例如,810納米的紅外截止可被用於在直接、明亮的太陽光下追蹤手勢用於捕獲具有深度消息的顏色圖案。另一個示例,由於檢測的紅外光的增加數量,900納米紅外截止可被用於提高感光度和SNR。紅外截止濾光片可是短通濾光片、帶通濾光片、過濾預定紅外帶寬之外的紅外光的其他適合濾光片、或上述的結合。可見或顏色帶寬由用於顏色再生經由圖像傳感器130需要的顏色而被決定。例如,可見帶寬的波長可以為650納米或多個600買水。
如上所述,雖然根據實施例所限定的實施例和附圖進行了說明,但對本技術領域具有一般知識的技術人員來說能從上述的記載中進行各種修改和變形。例如,根據與說明的技術中所說明的方法相不同的順序來進行,和/或根據與說明的系統、結構、裝置、電路等構成要素所說明的方法相不同的形態進行結合或組合,或根據其他構成要素或均等物進行替換或置換也可達成適當的效果。
因此,其他具體體現、其他實施例以及與權利要求範圍相均等的都屬於所述的權利要求所保護的範圍。