用於圖像處理的方法和設備的製作方法

2023-10-09 05:20:49 1

專利名稱：用於圖像處理的方法和設備的製作方法
技術領域：
本發明涉及一種恢復圖像的方法，更具體地講，涉及一種從通過小型相 機模塊獲得的圖像來恢復具有高解析度的圖像的方法。
背景技術：
包括具有高解析度的相機模塊(例如，數字相機和帶相機的電話)的數 字設備正被廣泛使用。通常，相機模塊包括透鏡和圖像傳感器。透鏡聚集從 目標反射的光，圖像傳感器檢測和識別透鏡聚集的光，並將光轉換成電子圖 像信號。可將圖像傳感器分類成攝像管和固態圖像傳感器，固態圖像傳感器 的代表性示例包括電荷耦合器件(CCD)和金屬氧化矽(MOS)裝置。
圖1示出傳統相機模塊的操作原理。
在相機模塊中，相對孔徑越大，獲得的目標的圖像就越大，F數(F/弁) 越大，獲得的圖像越清楚越清晰。這裡，相對孔徑是通過將透鏡(即，透鏡 A ( 11 )或透鏡B ( 12))的孔徑D除以焦距，即D/f而獲得的值，圖像(即， 圖像A (12)或圖像B (22))的亮度與相對孔徑的平方成比例。同時，F數 是相對孔徑的倒數，即f/D。 F數越大，到達相機模塊的圖像傳感器的每單位 面積上的光量就越少。F數越小，到達圖像傳感器的每單位面積上的光量就 越多，從而可獲得具有高解析度的亮圖像。
如圖l所示，透鏡的孔徑越大，解析度越大。然而，儘管該優點，但焦 距也變長，從而限制相機模塊的小型化。相反，如果透鏡的孔徑小，則用於 形成目標的圖像的焦距也減小。因此，儘管相機模塊可被小型化，但是難以
獲得具有高解析度的圖像。
為了解決該問題，提出了許多發明，例如，第2003-0084343號韓國專利
申請，但是仍沒有解決該問題。

發明內容
因此，本發明的一方面在於提供一種從通過小型相機模塊獲得的具有低 解析度的圖像來恢復具有高解析度的圖像的方法。
本發明的其他方面和/或優點在下面的描述中將被部分地闡述，部分地， 將從描述中變得清楚，或可通過實施本發明來了解本發明。
通過提供一種恢復圖像的方法來實現以上和/或其他方面，所述方法包 括通過包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域的相
機模塊來獲得多個原始顏色分開圖像；產生與檢測區域相應的第 一中間圖像； 將第一中間圖像劃分成多個像素組；產生第二中間圖像，產生第二中間圖像 的步驟包括將各個原始顏色分開圖像中相同位置的像素的像素信息映射到 與各個相同位置相應的第 一 中間圖像中像素組的預定像素上；和產生最終圖 像，產生最終圖像的步驟包括對第二中間圖像插值，其中，每個像素組包括 與顏色濾波器的排列模式相應的多個像素。
還通過提供一種恢復圖像的方法來實現以上和/或其他方面，所述方法包 括通過包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域的相 機模塊來獲得多個原始顏色分開圖像；產生中間圖像，產生中間圖像的步驟 包括根據相機模塊的顏色濾波器的排列模式將各個原始顏色分開圖像中相 同位置的像素的像素信息進行重新排列；和產生最終圖像，產生最終圖像的 步驟包括將中間圖像去馬賽克。
根據本發明的另一方面，提供了一種恢復圖像的設備，所述設備包括 相機模塊；輸入模塊，接收通過相機模塊獲得的多個原始顏色分開圖像，所 述相機模塊包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域； 中間圖像產生模塊，產生與圖像檢測區域相應並被劃分成多個像素組的第一 中間圖像，並通過將各個原始顏色分開圖像中相同位置的像素的像素信息映 射到與所述相同位置相應的第 一中間圖像中像素組的多個像素的一個預定像 素上來產生第二中間圖像；最終圖像產生模塊，通過對第二中間圖像插值來 產生最終圖像；和顏色濾波器，其中，每個像素組包括與顏色濾波器的排列 模式相應的多個像素。
根據本發明的另一方面，提供了一種恢復圖像的設備，所述設備包括
輸入模塊，通過相機模塊接收多個原始顏色分開圖像，所述相機模塊包括多
個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域；顏色濾波器；圖像
產生模塊，通過根據顏色濾波器的排列模式將各個原始顏色分開圖像中相同
位置的像素的像素信息重新排列來產生中間圖像；和最終圖像產生模塊，通 過將中間圖像去馬賽克來產生最終圖像。


從下面結合附圖對實施例的描述，本發明的這些和/或其他方面和優點將 變得清楚，並更容易理解，其中
圖1示出傳統相才;Mt塊的操作原理；
圖2是示出根據本發明實施例的用於恢復圖像的設備的結構的框圖3是示出根據本發明實施例的相機模塊的內部結構的透視圖4A至圖4C是示出根據本發明實施例的圖3的濾波器單元的結構的各
種實施例的示圖5示出才艮據本發明實施例的處理圖3的濾波器單元的工藝；
圖6是根據本發明實施例的用於形成圖3的圖^象傳感器單元的單位像素
的剖一見圖7A和圖7B示出根據本發明實施例的關於微透鏡和光電檢測器之間的
距離傾斜入射到圖6的微透鏡上的光束的會聚程度；
圖8示出圖3所示的多個子檢測區域上形成的原始圖像；
圖9A和圖9B示出根據本發明實施例的恢復圖像的方法；
圖IOA和IOB示出圖9A中的產生最終圖像(S840)的特定示例性操作；
圖IIA和11B示出圖9A中示出的產生最終圖像(S840)的其他特定示
例性操作；和
圖12是示出根據本發明另 一實施例的相機模塊的內部結構的透視圖。
具體實施例方式
現在將詳細闡述本發明的實施例，其示例在附圖中示出，其中，相同的 標號始終表示相同的部件。以下將通過參照附圖來描述所述實施例以解釋本 發明。
圖2是示出根據本發明實施例的用於恢復圖像的設備100的結構的框圖。
圖2的用於恢復圖像的設備100包括相機模塊200,聚集入射光，並產生 多個原始顏色分開圖像；圖像產生模塊800,基於相機模塊200提供的原始 顏色分開圖像，來產生最終圖像；和顯示模塊900，顯示圖像產生模塊800 提供的最終圖像。
首先，現在將參照圖3至圖7B來解釋相機模塊200。
圖3是示出根據本發明實施例的相機模塊的結構的透視圖。圖3的相機 模塊200包括透鏡單元300、濾波器單元400和圖{象傳感器單元500。
透鏡單元300可包括用於聚集入射光的多個透鏡310至340。這裡，不 限制透鏡的數量，並且可按多種排列同平面地來排列多個透鏡310至340。 例如，可以按橫向或按縱向將所述多個透鏡排列成一條線或按寬x高矩陣的
形式來排列所述多個透鏡。以下，為了便於解釋，將解釋透鏡單元300包括 按2 x 2 (寬x高)矩陣的形式排列的4個透鏡的實施例。
可選#^也，可在相同位置或不同位置排列多個透鏡310至340。例如， 如果將各個透鏡310至340都排列在參考位置，則各個透鏡340至340的位 置被認為彼此相同。這裡，所述參考位置指的是與預定透鏡相應的子濾波區 域的中心。另 一方面，各個透鏡340至340可按下列方式排列，即將第一透 鏡310從參考位置向右移動一個像素，第二透鏡320位於參考位置，將第三 透鏡330從參考位置向下移動一個像素，將第四透鏡340從參考位置成對角 地移動一個像素，即，在向右和向下方向上都從參考位置移動一個像素。
濾波器單元400對多個透鏡310至340聚集的光進行濾波，將光實現為 原始的基色。為此，濾波器單元400可包括與多個透鏡310至340相應的多 個子濾波區域410至440,其中，形成了具有不同顏色的顏色濾波器。例如， 如上所述,在透鏡單元300包括按2x2矩陣的形式排列的4個透鏡的情況下， 濾波器單元400具有第一子濾波區域410、第二子濾波區域420、第三子濾波 區域430、第四子濾波區域440，所述子濾波區域410至440按2x2形式排 列。
另外，可關於每個子濾波區域中形成的顏色濾波器的透光率來將濾波區 域劃分成第一濾波區域410、 420和430以及第二濾波區域440。這裡，第一 濾波區域可包括多個子濾波區域。同時，第二濾波區域包括單個子濾波區域。
根據本發明的實施例，在與第二濾波區域相應的子濾波區域中，可形成 這樣的顏色濾波器，該顏色濾波器的透光率比在與第一濾波區域相應的子濾
波區域中形成的顏色濾波器的透光率高。例如，可分別在第一至第三子濾波
區域410至430中形成紅色、綠色和藍色濾波器。同時，在第二濾波區域中 包括的第四子濾波區域440中，可形成具有透光率比紅色、綠色和藍色高的 顏色的濾波器，例如，灰色濾波器。在上述示例中，透光率按藍色、紅色、 綠色濾波器的順序變高，灰色濾波器具有比綠色濾波器的透光率高的透光率。 在另一實施例中，在第四子濾波區域440中可形成除了灰色之外的其他 顏色的顏色濾波器。例如，可形成白色(非顏色濾波器)、黃色、青色和紅紫 色中的任何一個的顏色濾波器。然而，在第四子濾波區域中形成的顏色濾波 器的顏色不限於這些示例，比第一濾波區域的子濾波區域中形成的顏色濾波
因此，如果在與第二濾波區域440相應的子濾波區域中形成的顏色濾波 器具有比在與第一濾波區域相應的子濾波區域410至430中形成的顏色濾波 器高的透光率，則通過各個子濾波區域的光量變的不同。這意味著，出現了 到達圖像傳感器單元500 (稍後將被解釋)的光量不同，以及在傳感器單元 500中可同時實現高靈敏度檢測功能和低靈敏度檢測功能。
更具體地講，圖像傳感器單元500的檢測區域510至540可被劃分成分 別與多個子濾波區域410至440相應的多個子4企測區域510至540。同時， 到達多個子檢測區域510至540之中與第二濾波區域中包括的子濾波區域相 應的子檢測區域的光量，大於到達與第一濾波區域中包括的子濾波區域410、 420或430相應的子才企測區域的光量。因此，可以-說，與第二濾波區域中包 括的子濾波區域相應的子檢測區域，具有比與第一濾波區域中包括的子濾波 區域410、 420或430相應的子檢測區域的檢測功能相對較高的靈敏度的檢測 功能。
在上述示例中，可將圖像傳感器單元500的檢測區域劃分成分別與第一 子濾波區域410至第四子濾波區域440相應的第一子4企測區域510至第四子 檢測區域540。到達第四子檢測區域540的光量大於達到第一子檢測區域510 的光量。這是因為，在與第四子檢測區域540相應的第四子濾波區域440中 形成了灰色濾波器，而在與第一子^^測區域510相應的第一子濾波區域410 中形成了具有比灰色濾波器的透光率低的透光率的紅色濾波器。因此，第四 子檢測區域540具有比第一子檢測區域510的檢測功能相對較高的靈敏度的 檢測功能。同樣地，因為達到第二子檢測區域520的光量小於到達第四子檢
測區域540的光量，以及到達第三子檢測區域530的光量也小於到達第四子 檢測區域540的光量，所以可以說，第二子檢測區域520和第三子檢測區域 530中的每一個具有比第四子檢測區域540的檢測功能低的靈敏度的檢測功能。
除了上述部件，為了阻止預定波長的光(例如，紅外線)，濾波器單元 400可選擇性地包括紅外線阻擋濾波器460。紅外線阻擋濾波器460阻止到達 圖像傳感器的紅外線，並防止可見光範圍內的圖像信息被損壞。即，圖像傳 感器的靈敏度對紅外線也有響應，如果使用了紅外線阻擋濾波器460,則紅 外線被阻止，以使對可見光範圍內的圖像信息的可能損壞可被防止。根據傳 統圖像傳感器的結構，不能以集成的形式來實現顏色濾波器和紅外線阻擋濾 波器，但是根據本發明的實施例，可按集成形式來製造顏色濾波器470和紅 外線阻擋濾波器460。可根據顏色來將顏色濾波器層470劃分成多個區域， 即，470G和470R。
紅外線阻擋濾波器460可被置於基底450和顏色濾波器層470之間，或 被置於顏色濾波器層470的上部。另外，如果顏色濾波器層470形成於基底 450的一個表面上，則紅外線阻擋濾波器460可形成於基底450的另一表面 上。圖4A至圖4C是通過沿剖切平面線III-Iir剖切圖3的濾波器單元400獲 得的剖視圖，並示出了用於形成顏色濾波器470和紅外線阻擋濾波器460的 位置的各種實施例。圖4A示出在基底450的一個表面上順序地形成紅外線 阻擋濾波器460和顏色濾波器470。圖4B示出在基底450的一個表面上順序 地形成顏色濾波器470和紅外線阻擋濾波器460。圖4C示出在在基底450的 一個表面上形成顏色濾波器470,以及在在基底450的另一表面上形成紅外 線阻擋濾波器460。
同時，可通過將多個基底(在各個基底上形成有不同顏色濾波器)劃分 成多個子基底，然後將具有不同顏色濾波器的每個子基底組合來製造上述濾 波器單元400。
圖5示出根據本發明實施例的處理濾波器單元400的工藝。例如，為了 形成具有圖4C中示出的結構的濾波器單元，首先，在第一至第四基底中的每 一個的一個表面上形成紅外線阻擋濾波器460層。然後，在第一至第四基底 的另一面上分別覆蓋紅色、綠色、藍色和灰色濾波器，以形成顏色濾波器層 470。然後，將每一基底四等分，以構成4個子基底。通過組合形成有不同顏
色濾波器的子基底，形成了具有圖4C示出的結構的濾波器單元400。根據上 述工藝，省略了形成顏色濾波器圖案的工藝，從而可減少將被用於形成顏色 濾波器的油墨的量。
同時，圖像傳感器500檢測通過各個子濾波區域410至440的光，並將 光轉換成電信號。為此，圖像傳感器單元500包括光檢測單元(未示出)， 檢測通過各個子濾波區域410至440的光；和電路單元(未示出)，將光檢測 單元檢測到的光轉換成電信號以產生數據。
這裡，現在將參照圖6更詳細地解釋圖像傳感器單元500。圖6是用於 形成根據本發明實施例的圖像傳感器單元500的單位像素的剖視圖。
參照圖6，在基底550上形成光電檢測器560 (例如，光電二極體PD)。 在每個PD之間形成裝置隔離膜570a、 570b。
在光電檢測器560的頂部形成用於形成電路單元的金屬線層(metal wiring layer) 590。另外，在光電檢測器560和金屬線層590之間形成金屬層 間介電(IMD)層580a,金屬線層590可被設計為不阻止入射到光電檢測器 560上的光的路徑。儘管圖6示出金屬線層590的一個層被形成，但是必要 時可形成多個金屬線層590。然後，在每個金屬線層590上形成IMD層580b, 以隔離金屬線層590。
在最高IMD層580b的頂部形成用於增強光電檢測器560的光電靈敏度 的微透鏡(ML) 595。通常，光電檢測器560不佔用單位像素區域的整個區 域，而是佔用單位像素區域的預定部分。因此，佔空比，即，光電檢測器560 佔用的區域與整個單位像素區域的比是小於1的值，這意味著，部分入射光 損失。然而，如果在IMD層580b的頂部形成ML 595，則通過ML 595來聚 集入射光束，以使得在光電檢測器560上會聚的光量增加。
另夕卜，與傳統技術不同，顏色濾波器層470和平坦化層(planarizing layer) (參照圖7B)不形成在上面描述的結構的圖像傳感器單元500中，因此光損 失和串擾被減少。這將參照圖7A和圖7B被更詳細地解釋。
圖7A和圖7B示出關於ML 595和光電檢測器560之間的距離傾斜入射 到圖6的ML 595上的光束的會聚程度。這裡，圖7A是根據本發明實施例的 圖像傳感器中單位像素的剖視圖，而圖7B是根據傳統技術的圖像傳感器中的 單位像素的剖視圖。
參照圖7B，通常，ML595焦點的位置被固定到光電檢測器560的位置，
在這種情況下，所有垂直入射到ML 595上的光束被會聚在光電檢測器560 上。然而，傾斜入射到ML 595上的光束不會聚在光電檢測器560上， 一些 光束損失或入射到相鄰像素的光電檢測器560上，從而引起串擾。然而，如 果顏色濾波器層470和平坦化層被移除，與本發明的實施例相同，則ML595 和光電4企測器560之間的間隔變窄，甚至傾斜入射到ML 595上的光束會聚 在相應像素的光電檢測器560上。
每個都具有上述結構的多個像素形成檢測區域510至540。這裡，可將 所述檢測區域劃分成分別與上述濾波器單元400的子濾波區域相應的多個子 檢測區域。即，根據上述示例，可將圖像傳感器單元500的檢測區域510至 540劃分成分別與第一子濾波區域410至第四子濾波區域440相應的第一子 檢測區域510至第四子檢測區域540。第 一檢測區域510檢測通過紅色濾波 器的光，第二檢測區域520檢測通過綠色濾波器的光，第三檢測區域530檢 測通過藍色濾波器的光，第四檢測區域540檢測通過灰色濾波器的光。結果， 可獲得圖8的多個原始圖像511至541。
同時，可關於光電靈敏度來將被劃分成多個子檢測區域510至540的檢 測區域劃分成低靈敏度檢測區域和高靈敏度檢測區域。關於到達每個子檢測 區域的光量來劃分低靈敏度檢測區域和高靈敏度檢測區域。同時，到達每個 子檢測區域的光量依據與每個子檢測區域相應的子濾波區域中形成的顏色濾 波器而變化。因此，在關於顏色濾波器的透光率被劃分成第一和第二濾波區 域的濾波區域中，可分別將與第一濾波區域相應的4企測區域和與第二濾波區 域相應的檢測區域分類為低靈敏度檢測區域和高靈敏度檢測區域。
更具體地講，在上述示例中，第一子檢測區域510至第三子檢測區域530 對應於低靈敏度檢測區域，第四子檢測區域540對應於高靈敏度檢測區域。 這是因為，在第四子濾波區域440中形成的灰色濾波器具有比分別在第一子 濾波區域410至第三子濾波區域430中形成的紅色、綠色和藍色濾波器中的 每一個的透光率更高的透光率，因此，到達第四子檢測區域540的光量大於 到達第一子檢測區域510至第三子檢測區域530中每一個的光量。
因此，如果在圖像傳感器單元500中實現低靈敏度檢測區域和高靈敏度 檢測區域，則圖像產生模塊800 (稍後將被解釋)可通過使用從高靈敏度檢 測區域和低靈敏度檢測區域獲得的亮度信息(Y，)來恢復圖像。因此，即使 在照明度差異大的環境下，也可獲得清楚的圖像。即，可實現寬動態範圍
(WDR)功能。
再次參照圖2，圖像產生模塊800從相機模塊200接收多個原始顏色分 開圖像511、 521、 531和541，並在圖10B的顯示模塊900上產生最終圖像。 為此，圖像產生模塊包括輸入模塊810、中間圖像產生模塊820和最終圖 像產生模塊830。
輸入模塊810接收相機模塊200提供的多個原始圖像511 、 521、 531和 541的輸入。即，輸入模塊810接收第一子檢測區域510獲得的紅色圖像、 第二子檢測區域520獲得的綠色圖像、第三子檢測區域530獲得的藍色圖像、 以及第四子檢測區域540獲得的灰色圖像。紅色、綠色、藍色圖像提供通過 最終圖像產生模塊830產生顯示模塊900上的最終圖像所需的顏色信息，這 稍後將進行解釋。同時，灰色圖像提供產生在顯示模塊900上的最終圖像所 需的亮度信息。
可選擇地，當相機模塊200提供的多個原始圖像511、 521、 531和541 具有非均衡靈敏度級時，輸入模塊810可基於特定的原始圖像的靈敏度來調 整剩餘原始圖像的靈敏度級。例如，輸入模塊810可基於最小靈敏度級來調 整各個原始圖像的靈敏度級。更詳細地講，假設第一至第四原始圖像511、 521、 531和541分別具有5、 7、 10、 9的靈敏度級，則輸入模塊810基於第 一原始圖像511的靈敏度級將剩餘原始圖像的靈敏度級調整到5。
同時，即使各個透鏡310至340在相機模塊200的固定位置，也可能由 於外部震動等導致各個透鏡的位置與它們的指定位置沒有對準。各個透鏡310 至340的這種未對準使得原始圖像511、 521、 531和541分別偏離它們在各 個子檢測區域510、 520、 530和540上的指定位置，從而難以獲得清楚、清 晰的圖像。因此，有必要校準光學上的未對準，光學上的未對準可能引起原 始圖像511、 521、 531和541形成在與它們的指定位置未對準的位置上。
當形成的原始圖像511、 521、 531和541的位置與它們的指定位置不同 時，輸入模塊810校準原始圖像511、 521、 531和541位置的未對準。更詳 細地講，當從預定目標反射的光束通過透鏡單元200和濾波器單元300到達 子檢測區域510、 520、 530和540時，在分別與各個透鏡310、 320、 330和 340相應的各個子檢測區域510、 520、 530和540上形成原始圖像511、 521、 531和541。這裡，輸入模塊810檢查在子檢測區域510、 520、 530和540上 形成的各個原始圖像511、 521、 531和541的位置，並校準位置的未對準，
這將參照圖8進行更詳細的解釋。
圖8示出在多個子檢測區域形成的原始圖像。
參照圖8,儘管第二原始圖像521的位置與指定位置700相同，但是第 一原始圖像511從指定位置700向右移動了一個像素。第三原始圖像531從 指定位置700向下移動了一個像素，第四原始圖像541從指定位置700對角 移動了一個像素，即，從指定位置700在向右和向下方向上移動各一個像素。
在這種情況下，輸入模塊810將第一原始圖像511整體向右方向上移動 一個像素，然後將第三原始圖像531整體向上方向上移動一個像素，從而校 準了原始圖像511和531的光學上的未對準，從而原始圖像511和531正常 地位於它們的指定位置。以這種方式，輸入模塊810將第四原始圖像541整 體向上方向上移動一個像素，然後將原始圖像541整體向左方向上移動一個 像素，從而校準了第四原始圖像541的光學上的未對準，從而第四原始圖像 541正常地位於它的指定位置。
將原始圖像511、 521、 531和541提供給稍後將解釋的中間圖像產生模 塊820。
中間圖像產生模塊820將輸入模塊810提供的各個原始圖像511、 521、 531和541的相同位置的像素的像素信息進行重新排列，從而可產生對每個 顏色具有比原始圖像解析度高的中間圖像。此時，中間圖像可具有與檢測區 域510、 520、 530和540相同的解析度。例如，如果上述圖像傳感器單元500 的每個子4企測區域具有解析度4x4,則中間圖像可具有與整個檢測區域510、 520、 530和540相同的解析度8x8。將中間圖像提供給稍後將解釋的最終圖 像產生模塊830。
基於從中間圖像產生模塊820接收的中間圖像，最終圖像產生模塊830 產生最終圖像90。稍後將參照圖9A至圖IIB來解釋關於中間圖像和最終圖 像的產生的更具體的細節。
顯示模塊900顯示最終圖像產生模塊830提供的最終圖像。顯示模塊900 可按例如平板顯示器或觸控螢幕的形式來實現，但是並不限於這些形式。
接著，現在將參照圖9A和圖9B來解釋^^據本發明實施例的恢復圖像的 方法。圖9A是示出根據本發明實施例的恢復圖像的方法的流程圖，圖9B示 出通過相機模塊200獲得多個原始圖像511、 521、 531和541的處理。
為了便於解釋，假設分別在第一子濾波區域410至第四子濾波區域440
中形成紅色、綠色、藍色和灰色濾波器。另外，假設圖像傳感器500的檢測
區域510、 520、 530和540形成有8x8像素(寬x高)，每個子檢測區域510、 520、 530和540形成有4 x 4 (寬x高)像素。
首先，在操作S810，通過四個透鏡310、 320、 330和340將從預定目標 IO反射的光束聚集。分別通過與透鏡310、 320、 330和340相應的子濾波區 域410、 420、 430和440傳輸通過透鏡310、 320、 330和340聚集的光束。 通過子濾波區域410、 420、 430和440傳輸的光束分別被會聚在與子濾波區 域410、 420、 430和440相應的子檢測區域510、 520、 530和540。結果， 在操作S820濾波之後，在操作S830，通過各個子檢測區域510、 520、 530 和540獲得多個原始圖像511、 521、 531和541。通過每個子檢測區域510、 520、 530和540獲得的圖像具有整個檢測區域510、 520、 530和540的分辨 率的四分之一的解析度。即，因為整個^r測區域510、 520、 530和540的分 辨率是8x8，所以多個原始圖Y象511、 521、 531和541中的每一個具有4x4 的解析度。在操作S830，當多個原始圖像具有非均衡靈敏度級時，獲得原始 圖像的步驟可包括基於所述多個原始圖像之中的特定原始圖像的靈敏度來 校準原始圖像的靈敏度的非均衡，所述特定原始圖像具有最小靈敏度級。另 外，在操作S830，當原始圖像511、 521、 531和541的位置與指定位置不同 時，獲得原始圖像的步驟可包括校準原始圖像511、 521、 531和541的位 置的未對準。然後，在操作S840，基於所述多個原始圖像，圖像產生模塊800 產生具有比原始圖像511、 521、 531和541中的每一個的解析度高的解析度 的最終圖像90。稍後將參照圖IOA至圖IIB來解釋關於產生最終圖像的更具 體的細節。
在操作S850,通過顯示模塊900來顯示圖像產生模塊800產生的最終圖 像90。
接著，參照圖IOA和圖IOB來解釋根據本發明實施例的產生最終圖像的 操作。這裡，圖IOA是更詳細地示出根據本發明實施例的產生最終圖像的操 作的流程圖，圖IOB示出在圖IOA中示出的產生最終圖像的處理。
可將根據本發明實施例的產生最終圖像的處理應用於當透鏡單元300的
多個透鏡310至340都位於參考位置時的情況。
首先，如果相機^^莫塊200提供了多個原始圖像511、 521、 531和541， 則中間圖^f象產生^^莫塊820產生具有與^r測區域510、 520、 530和540相應的
解析度的第一中間圖像。例如，在操作S841，產生如圖IOB所示具有與檢測 區域相同解析度的第一中間圖像。這裡，可將第一中間圖像劃分成與顏色濾 波的排列模式相應的包括多個像素的多個像素組610、 620、 630和640。例 如，可將第一中間圖像劃分成多個像素組610、 620、 630和640,每個像素 組由2 x 2虛擬像素(寬x高)構成。這裡，在每個^^素組610、 620、 630和 640中，可將像素劃分成主像素611、 621、 631和641，其上映射有顏色和 亮度信息；和子像素612、 622、 632和642，位於主像素611、 621、 631和 641的附近，不具有信息。
可將主像素的位置設置到每個像素組中的多個位置。例如，在如圖10B 所示的2x2像素構成的每個像素組中，可將與第一行第一列相應的位置確定 為主像素的位置。作為另一示例，可將每個像素組中與第一行第二列相應的 位置確定為主像素的位置。
因此，如果產生了第一中間圖像，則中間圖像產生模塊820將各個原始 顏色分開圖像中相同位置的像素的像素信息映射到與該相同位置相應的像素 組的主像素上。例如，中間圖像產生模塊820將各個原始顏色分開圖像的第 一行第一列的像素的像素信息映射到位於中間圖像中的第一行第一列的像素 組610的主像素611上。同樣，中間圖像產生模塊820將各個原始顏色分開 圖像的第一行第二列的像素的像素信息映射到位於第一中間圖像的第一行第 二列的像素組620的主像素621上。
另外，中間圖像產生模塊820基於各個原始的顏色分開圖像中相同位置 的像素的像素信息中的顏色信息來計算亮度信息，並將計算的亮度信息映射 到每個像素組的主像素上。例如，中間圖像產生模塊820基於位於紅色、綠 色和藍色圖像的第一行第一列的像素提供的顏色信息來計算亮度信息。然後， 將計算的亮度信息映射到位於第一中間圖像的第一行第一列的像素組的主像 素上。
參照圖IOB，可以看出，將分別由第一至第三子檢測區域510、 520和530 提供的紅色(R)、綠色(G)和藍色(B)顏色信息、第四子檢測區域540提 供的亮度信息(Y，)、以及從3條顏色信息中檢測的亮度信息(Y)映射到各 個像素組的主像素上。例如，可以看出，在第一像素組610的主像素611上， 映射以下信息位於紅色圖像511的第一行第一列的像素的紅色(R)顏色信 息、位於綠色圖像521的第一行第一列的像素的綠色(G)顏色信息、位於
藍色圖像531的第一行第一列的像素的藍色(B)顏色信息、位於灰色圖像 541的第一行第一列的像素的亮度信息(Y，)、以及基於三條顏色信息檢測到 的亮度信息(Y)。同樣，可以看出，在第二像素組620的主像素621上，映 射以下信息位於紅色圖像511的第一行第二列的像素的紅色(R)顏色信息、 位於綠色圖像521的第一行第二列的像素的綠色(G)顏色信息、位於藍色 圖像531的第一行第二列的像素的藍色(B)顏色信息、位於灰色圖像541 的第一行第二列的像素的亮度信息(Y，)、以及基於已經提供的三條顏色信息 而檢測到的亮度信息(Y)。
因此，在操作S842，中間圖像產生模塊820產生第二中間圖像600，在 第二中間圖像600中，3條顏色信息和2條亮度信息被映射到每個像素組的 主像素上。這裡，在第二中間圖像600中，因為3條顏色信息都被映射到各 個像素組的主像素中，所以在後面的處理中可跳過去馬賽克操作。
然後，通過使用插值方法，在操作S843，中間圖像產生模塊820對第二 中間圖像進行插值。即，中間圖像產生模塊820基於像素組610、 620和630 的主像素611、621和631的信息來計算將被記錄在每個子像素中的像素信息。
中間圖像產生模塊820可根據各種算法來對第二中間圖像600進行插值。 例如，可從與子像素相鄰的主像素擁有的信息來計算將^L記錄在第二中間圖 像600的每個子像素中的像素信息。更具體地講，在圖10B中，將被記錄在 位於第一像素組610的主像素611和第二像素組620的主像素621之間的子 像素612中的像素信息可被確定為兩個主像素611和621的像素信息的平均 值。同樣，將淨皮記錄在位於第二像素組620的主像素621和第三像素組630 的主像素631之間的子像素622中的像素信息可被確定為兩個主像素621和 631的像素信息的平均值。
如果以這樣的方式來執行第二中間圖像600的插值，則在操作S844，最 終圖像產生模塊830對插值的第二中間圖像執行去模糊。結果，從通過每個 子檢測區域獲得的具有低解析度(即，子檢測區域的解析度)的原始顏色分 開圖像來產生具有高解析度(即，子檢測區域的解析度x4)的最終圖像90。
接著，將參照圖IIA和圖IIB來解釋根據本發明另一實施例的產生最終 圖像的操作。這裡，圖IIA是更詳細地示出根據本發明實施例的產生最終圖 像的操作的流程圖，圖IIB示出用於對圖IIA的像素信息進行重新排列的操 作S846。
可將根據本發明的該實施例的產生最終圖像的方法應用於以下情況相 機模塊200中的透鏡單元300的多個透鏡位於從預定透鏡的位置移動了預定 數量的像素的位置。在下文中，基於以下假設進行解釋從第二透鏡的位置， 第一透鏡向右移動一個像素，第三透鏡向下移動一個^象素，第四透鏡對角移 動一個像素，即，從預定透鏡的位置在向右和向下方向上各移動一個像素。
如果從相積4莫塊200提供了多個原始圖像511、 521、 531和541，則在 操作S846,中間圖像產生模塊820通過根據顏色濾波器的排列模式對各個原 始圖像511、 521、 531和541中相同位置的像素的像素信息進行重新排列， 來產生中間圖像60。
更具體地講，可將中間圖像60劃分成與顏色濾波器的排列模式相應的包 括多個像素的多個像素組。例如，如果濾波器單元400中形成的顏色濾波器 的模式是lx4矩陣形式，則可將中間圖像劃分成多個像素組，每個像素組由 lx4像素(寬x高)構成。如果濾波器單元400中形成的顏色濾波器的模式 是 2x2矩陣形式，則可將中間圖像劃分成多個像素組，每個像素組由2 x2像素(寬x高)構成。
圖11B示出將虛擬圖像劃分成多個像素組61、 62、 63和64的情況，其 中，每一組都由2 x 2 <象素(寬x高)構成。
參照圖IIB，可以看出，可根據顏色濾波器的模式，將位於各個原始圖 像511、 521、 531和541的第一行第一列的像素的像素信息映射到位於中間 圖像60的第一行第一列的像素組61上。
如果產生了如圖11B所示的中間圖像60，則在操作S847,中間圖像產生 模塊820對中間圖像執行去馬賽克。將去馬賽克後的中間圖像提供給最終圖 像產生模塊830。
然後，在操作S848，最終圖像產生模塊830對去馬賽克的中間圖像執行 去模糊。結果，從通過每個子檢測區域獲得的具有低解析度(即，子檢測區 域的解析度)的原始顏色分開圖像來產生具有高解析度(即，子檢測區域的 解析度x4)的最終圖像90。
接著，將解釋根據本發明第二實施例的相機模塊20。圖12是根據本發 明第二實施例的相機模塊20的內部結構的透視圖。根據本發明第二實施例的 相機模塊20除了以下特徵外，具有與圖3的根據本發明第一實施例的相機才莫 塊200相同的結構。
即，在根據第二實施例的相機模塊20中，構成透鏡單元30的多個透鏡
31、 32、 33和34具有;f皮此不同的顏色。這裡，可關於透光率來將透鏡單元 30劃分成第一組和第二組。第一組可包括多個透鏡，第二組可包括一個透4竟。
這裡，第二組中包括的透鏡34可具有比第一組中包括的透鏡31、 32和 33透光率高的顏色。例如，如果在4個透鏡之中，第一組包括具有紅色的第 一透鏡31、具有綠色的第二透鏡32和具有藍色的第三透鏡33，則第二組中 包括的第四透鏡34可具有比紅色、綠色和藍色的透光率高的透光率的顏色， 例如，它可具有灰色。
因此，當多個透鏡31、 32、 33和34具有不同顏色時，在濾波器單元40 中不形成單獨的顏色濾波器層。在濾波器單元40中可選擇性地形成紅外線阻 擋濾波器(未示出)。
另外，將圖像傳感器單元500的檢測區域劃分成分別與透鏡31、 32、 33 和34相應的多個子檢測區域510、 520、 530和540。通過各個子檢測區域510、 520、 530和540可獲得通過各個透鏡31、 32、 33和34的原始圖像511、 521、 531和541。
根據如上所述的用於恢復圖像的方法和設備，可獲得一個或多個下面的 效果。
所述方法和設備提供了可用小型相機模塊獲得高解析度圖像的優點。
相機模塊可被小型化，從而當設計安裝有相機模塊的數字裝置時更多凝: 量的選項是可用的。
顏色濾波器層和用於使顏色濾波器層平坦化的平坦化層不是形成在圖像 傳感器的內部，因此微透鏡和光電檢測器之間的間距變窄，從而由於平坦化 層的厚度導致的光損失和串擾可被減少。
另外，因為顏色濾波器不形成在圖像傳感器上，而是形成在獨立的基底 上，所以圖像傳感器的製造工藝可被簡化。
由於省略了形成顏色濾波器圖案的工藝，從而可節省用於形成顏色濾波 器層的油墨。
通過使用具有不同透光率的顏色濾波器，甚至不用改變圖像傳感器單元 的結構，就可同時實現高靈敏度檢測區域和低靈敏度4企測區域。
儘管已顯示和描述了本發明的一些實施例，但是本領域的技術人員應該 理解，在不脫離本發明的原理和精神的情況下，可在這些實施例中進行改變，
其中，本發明的範圍由權利要求及其等同物限定。
權利要求
1、一種恢復圖像的方法，包括通過包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域的相機模塊來獲得多個原始顏色分開圖像；產生與檢測區域相應的第一中間圖像；將第一中間圖像劃分成多個像素組；產生第二中間圖像，產生第二中間圖像的步驟包括將各個原始顏色分開圖像中相同位置的像素的像素信息映射到與各個相同位置相應的第一中間圖像中像素組的預定像素上；和產生最終圖像，產生最終圖像的步驟包括對第二中間圖像插值，其中，每個像素組包括與顏色濾波器的排列模式相應的多個像素。
2、 如權利要求l所述的方法，其中，當所述多個原始顏色分開圖像的位 置與各個子檢測區域的指定位置未對準時，獲得原始圖像的步驟包括校準 所述原始顏色分開圖像的位置的未對準。
3、 如權利要求l所述的方法，其中，當所述多個原始顏色分開圖像具有 非均衡靈敏度級時，獲得原始圖像的步驟包括基於所述多個原始顏色分開 圖像之中特定原始顏色分開圖像的靈敏度，來校準所述多個原始顏色分開圖 像的靈敏度的非均衡，所述特定原始顏色分開圖像具有最低靈敏度級。
4、 如權利要求l所述的方法，其中，獲得原始圖像的步驟包括 通過使用所述多個透鏡來聚集入射光；通過分別與所述多個透鏡相應的多個濾波區域來對入射光進行濾波，在 每個濾波區域中形成有不同的顏色濾波器；和通過圖像檢測區域來獲得所述原始顏色分開圖像，所述圖像檢測區域形 成有距所述多個濾波區域的預定間隔，並分別與濾波區域相應。
5、 如權利要求4所述的方法，還包括關於各個顏色濾波器的透光率來 將濾波區域劃分成第一濾波區域和第二濾波區域，在第一濾波區域中形成的 顏色濾波器的透光率高於在第二濾波區域中形成的顏色濾波器的透光率，將 圖像檢測區域劃分成分別與第 一濾波區域和第二濾波區域相應的第 一檢測區 域和第二檢測區域，第一檢測區域中包括的子檢測區域上會聚的光量大於第 二檢測區域中包括的子檢測區域上會聚的光量。
6、 如權利要求5所述的方法，其中，所述像素信息包括由第一檢測區域 中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區域 提供的顏色信息。
7、 如權利要求l所述的方法，其中，獲得多個原始圖像的步驟包括 通過使用多個透鏡來聚集入射光，所述多個透鏡具有不同顏色；和 通過分別與所述多個透鏡相應的多個圖像檢測區域來獲得多個原始顏色分開圖像。
8、 如權利要求7所述的方法，還包括關於透鏡的透光率來將透鏡劃分 成第一透鏡單元和第二透鏡單元，第一透鏡單元中包括的透鏡的透光率高於 第二透鏡單元中包括的透鏡的透光率，將檢測區域劃分成分別與第一透鏡單 元和第二透鏡單元相應的第 一檢測區域和第二檢測區域，第 一檢測區域中包 括的子檢測區域上會聚的光量大於第二檢測區域中包括的子檢測區域上會聚 的光量。
9、 如權利要求8所述的方法，其中，所述像素信息包括由第一檢測區域 中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區域 提供的顏色信息。
10、 如權利要求l所述的方法，其中，所述多個透鏡同平面放置。
11、 一種恢復圖像的方法，包括通過包括多個透鏡和分別與所述多個透鏡相應的多個圖〗象^r測區域的相 機模塊來獲得多個原始顏色分開圖像；產生中間圖像，產生中間圖像的步驟包括根據相機模塊的顏色濾波器 的排列模式將各個原始顏色分開圖像中相同位置的像素的像素信息進行重新 排列；和產生最終圖像，產生最終圖像的步驟包括將中間圖像去馬賽克。
12、 如權利要求11所述的方法，還包括將除了所述多個透鏡中的一個 預定透鏡之外的透鏡置於從所述預定透鏡的位置移動預定數量像素的位置。
13、 如權利要求11所述的方法，其中，當所述多個原始顏色分開圖像的 位置與相機模塊的各個子檢測區域的指定位置未對準時，獲得原始圖像的步 驟包括校準所述原始顏色分開圖像的位置的未對準。
14、 如權利要求11所述的方法，其中，當所述多個原始顏色分開圖像具 有非均衡靈敏度級時，獲得原始圖像的步驟包括基於所述多個原始顏色分開圖像之中特定原始顏色分開圖像的靈敏度，來校準所述多個原始顏色分開 圖像的靈敏度的非均衡，所述特定原始顏色分開圖像具有最低靈敏度級。
15、 如權利要求11所述的方法，其中，獲得多個原始圖像的步驟包括 通過使用所述多個透鏡來聚集入射光；通過分別與所述多個透鏡的區域相應的多個濾波區域來對入射光進^"濾 波，在每個濾波區域中形成有不同的顏色濾波器；和通過圖像檢測區域來獲得所述原始顏色分開圖像，所述圖像檢測區域形 成有距所述多個濾波區域的預定間隔，並分別與濾波區域相應。
16、 如權利要求15所述的方法，還包括關於各個顏色濾波器的透光率 來將濾波區域劃分成第一濾波區域和第二濾波區域，在第一濾波區域中形成 的顏色濾波器的透光率高於在第二濾波區域中形成的顏色濾波器的透光率， 將圖像檢測區域劃分成分別與第 一濾波區域和第二濾波區域相應的第 一檢測 區域和第二檢測區域，第一檢測區域中包括的子檢測區域上會聚的入射光的 量大於第二檢測區域中包括的子檢測區域上會聚的入射光的量。
17、 如權利要求16所述的方法，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
18、 如權利要求11所述的方法，其中，獲得多個原始圖像的步驟包括 通過使用具有不同顏色的多個透鏡來聚集入射光；和通過分別與所述多個透鏡相應的多個圖像^r測區域來獲得所述多個原始 顏色分開圖像。
19、 如權利要求18所述的方法，還包括關於透鏡的透光率來將透鏡劃 分成第一透鏡單元和第二透鏡單元，第一透鏡單元中包括的透鏡的透光率高 於第二透鏡單元中包括的透鏡的透光率，將檢測區域劃分成分別與第一透鏡 單元和第二透鏡單元相應的第 一檢測區域和第二檢測區域，第 一檢測區域中 包括的子檢測區域上會聚的入射光的量大於第二檢測區域中包括的子檢測區 域上會聚的入射光的量。
20、 如權利要求19所述的方法，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
21、 如權利要求11所述的方法，還包括同平面排列所述多個透鏡。
22、 一種恢復圖像的設備，包括 相才幾糹莫塊；輸入模塊，接收通過相機模塊獲得的多個原始顏色分開圖像，所述相才幾 模塊包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域；中間圖像產生模塊，產生與圖像檢測區域相應並被劃分成多個像素組的 第一中間圖像，通過將各個原始顏色分開圖像中相同位置的像素的像素信息 映射到與所述相同位置相應的第 一 中間圖像中像素組的多個像素的 一個預定 像素上來產生第二中間圖像；最終圖像產生模塊，通過對第二中間圖像插值來產生最終圖像；和顏色濾波器，其中，每個像素組包括與顏色濾波器的排列模式相應的多個像素。
23、 如權利要求22所述的設備，其中，當所述多個原始顏色分開圖^f象的 位置與圖像檢測區域的各個子檢測區域的指定位置未對準時，輸入模塊校準 所述原始顏色分開圖像的位置的未對準。
24、 如權利要求22所述的設備，其中，當所述多個原始顏色分開圖^象具 有非均衡靈敏度級時，輸入模塊基於所述多個原始顏色分開圖像之中 一個特 定原始顏色分開圖像的靈敏度，來校準所述多個原始顏色分開圖像的靈敏度 的不均衡，所述特定原始顏色分開圖像具有最低靈敏度級。
25、 如權利要求22所述的設備，其中，相機模塊還包括 透鏡單元，包括多個透鏡，其中，所述多個透鏡聚集入射光； 濾波器單元，通過分別與所述多個透鏡相應的多個濾波區域來對入射光進行濾波，在每個濾波區域中形成有不同的顏色濾波器；和圖像傳感器單元，通過圖像檢測區域來獲得所述原始顏色分開圖像，所 述圖像檢測區域形成有距所述多個濾波區域的預定間隔，並分別與濾波區域 相應。
26、 如權利要求25所述的設備，其中，關於各個顏色濾波器的透光率來 將濾波區域劃分成第一濾波區域和第二濾波區域，在第一濾波區域中形成的 顏色濾波器的透光率高於在第二濾波區域中形成的顏色濾波器的透光率，將 圖像檢測區域劃分成分別與第 一濾波區域和第二濾波區域相應的第 一檢測區 域和第二檢測區域，第一檢測區域中包括的子檢測區域上會聚的入射光的量 大於第二檢測區域中包括的子檢測區域上會聚的入射光的量。
27、 如權利要求26所述的設備，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
28、 如權利要求22所述的設備，其中，相機模塊還包括 包括透鏡的多個透鏡單元，其中，所述多個透鏡具有不同顏色，並聚集入射光；和圖像傳感器單元，通過分別與所述多個透鏡的區域相應的多個圖像檢測 區域來獲得多個原始顏色分開圖像。
29、 如權利要求28所述的設備，其中，關於透鏡的透光率來將透鏡劃分 成第一透鏡單元和第二透鏡單元，第一透鏡單元中包括的透鏡的透光率高於 第二透鏡單元中包括的透鏡的透光率，將檢測區域劃分成分別與第一透鏡單 元和第二透鏡單元相應的第 一檢測區域和第二檢測區域，第 一檢測區域中包 括的子檢測區域上會聚的入射光的量大於第二檢測區域中包括的子檢測區域 上會聚的光量。
30、 如權利要求29所述的設備，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
31、 如權利要求22所述的設備，其中，所述多個透鏡同平面排列。
32、 一種恢復圖像的設備，包括輸入模塊，通過相機模塊接收多個原始顏色分開圖像，所述相機模塊包 括多個透鏡和分別與所述多個透鏡相應的多個圖傳j企測區域； 顏色濾波器；圖像產生模塊，通過根據顏色濾波器的排列模式將各個原始顏色分開圖 像中相同位置的像素的像素信息重新排列來產生中間圖像；和最終圖像產生模塊，通過將中間圖像去馬賽克來產生最終圖像。
33、 如權利要求32所述的設備，其中，在所述多個透鏡中，除了預定透 鏡之外的透鏡被置於從所述預定透鏡的位置移動預定數量像素的位置。
34、 如權利要求32所述的設備，其中，當所述多個原始顏色分開圖像的 位置與圖像檢測區域的各個子檢測區域的指定位置未對準時，輸入模塊校準 原始圖像的位置的未對準。
35、 如權利要求32所述的設備，其中，當所述多個原始顏色分開圖像具 有非均衡靈敏度級時，輸入模塊基於所述多個原始顏色分開圖像之中一個特 定原始顏色分開圖像的靈敏度，來校準所述多個原始顏色分開圖像的靈敏度 的非均衡，所述特定原始顏色分開圖像具有最低靈敏度級。
36、 如權利要求32所述的設備，其中，相機模塊還包括 透鏡單元，包括多個透鏡，其中，所述多個透鏡聚集入射光； 濾波器單元，通過分別與所述多個透鏡相應的多個濾波區域來對入射光進行濾波，在每個濾波區域中形成有不同的顏色濾波器；和圖像傳感器單元，通過圖像檢測區域來獲得所述原始顏色分開圖像，所 述圖像檢測區域形成有距所述濾波區域的預定間隔，並分別與濾波區域相應。
37、 如權利要求36所述的設備，其中，關於各個顏色濾波器的透光率來 將濾波區域劃分成第一濾波區域和第二濾波區域，在第一濾波區域中形成的 顏色濾波器的透光率高於在第二濾波區域中形成的顏色濾波器的透光率，將 圖像檢測區域劃分成分別與第 一濾波區域和第二濾波區域相應的第 一檢測區 域和第二檢測區域，第一檢測區域中包括的子檢測區域上會聚的入射光的量 大於第二4企測區域中包括的子檢測區域上會聚的入射光的量。
38、 如權利要求37所述的設備，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
39、 如權利要求32所述的設備，其中，相機模塊還包括 多個透鏡，所述多個透鏡具有不同顏色；和圖像傳感器單元，通過分別與所述多個透鏡相應的多個圖像檢測區域來 獲得所述多個原始顏色分開圖像。
40、 如權利要求39所述的設備，其中，關於透鏡的透光率來將透鏡劃分 成第一透鏡單元和第二透鏡單元，第一透鏡單元中包括的透鏡的透光率高於 第二透鏡單元中包括的透鏡的透光率，將檢測區域劃分成分別與第一透鏡單 元和第二透鏡單元相應的第一檢測區域和第二檢測區域，第一檢測區域中包 括的子檢測區域上會聚的入射光的量大於第二檢測區域中包括的子檢測區域 上會聚的入射光的量。
41、 如權利要求40所述的設備，其中，所述像素信息包括由第一檢測區 域中包括的子檢測區域提供的亮度信息和由第二檢測區域中包括的子檢測區 域提供的顏色信息。
42、如權利要求32所述的設備，其中，所述多個透鏡同平面排列。
全文摘要
提供了一種從通過小型相機模塊獲得的圖像來恢復具有高解析度的圖像的方法和設備。所述方法包括通過包括多個透鏡和分別與所述多個透鏡相應的多個圖像檢測區域的相機模塊來獲得多個原始顏色分開圖像；產生與檢測區域相應的第一中間圖像；將第一中間圖像劃分成多個像素組；通過將各個原始顏色分開圖像中相同位置的像素的像素信息映射到與所述相同位置相應的第一中間圖像中像素組的預定像素上，來產生第二中間圖像；和通過對第二中間圖像插值來產生最終圖像。所述像素組包括與顏色濾波器的排列模式相應的多個像素。
文檔編號H04N101/00GK101106641SQ20071011267
公開日2008年1月16日 申請日期2007年6月26日 優先權日2006年6月26日
發明者成基榮, 樸鬥植, 李皓榮, 金聖洙, 金昌容 申請人:三星電機株式會社