能夠生成廣角圖像的圖像處理裝置的製作方法
2023-05-23 09:49:31 2
專利名稱：能夠生成廣角圖像的圖像處理裝置的製作方法
技術領域：
本發明涉及數位相機或具有拍攝功能的便攜電話等圖像處理裝置、圖像處理方法以及記錄介質。
背景技術：
在數位相機或具有拍攝功能的便攜電話等中，拍攝視場角的界限依賴於鏡頭的焦點距離、拍攝單元的尺寸等裝置主體所具有的硬體規格。並且，對於這樣的拍攝視場角的界限問題，通過如下方式來應對，即在拍攝裝置中，將廣角拍攝用的轉換鏡頭(conversionlens)等安裝到現有的鏡頭前(例如參考日本特開2004-191897號公報、日本特開2005-027142號公報、日本特開2005-057548號公報)，或者預先準備多個鏡頭，根據拍攝目 標來切換鏡頭(例如參考日本特開2007-081473號公報)。但是，在上述現有技術中，為進行廣角拍攝，必須逐個安裝廣角拍攝用的轉換鏡頭或根據拍攝目標來切換鏡頭，在操作性及成本方面存在問題。此外，即使採用了這些廣角拍攝用的轉換鏡頭或可切換的鏡頭，也存在難以獲得拍攝者所希望的廣角圖像的問題。
發明內容
因此，本發明的目的在於，提供一種不進行鏡頭交換也能夠容易且有效地獲得廣角圖像的生成所需的圖像的圖像處理裝置、圖像處理方法以及記錄介質。本發明是一種圖像處理裝置，其特徵在於，具備拍攝機構；顯示機構；拍攝控制機構，進行控制以使所述拍攝機構連續拍攝；廣角圖像生成機構，根據由所述拍攝機構連續拍攝的多個圖像，生成廣角圖像；檢測機構，檢測規定的觸發，該規定的觸發表示所述拍攝機構向規定方向的連續拍攝的結束；以及顯示控制機構，每當檢測到所述規定的觸發，則將表示由所述拍攝機構應連續拍攝的範圍的信息變更並顯示於所述顯示機構。
圖I是表示本發明第I實施方式的數位相機的結構的框圖。圖2是用於說明通常的拍攝模式的概念圖。圖3是用於說明該第I實施方式的數位相機I的全景拍攝模式的概念圖。圖4是表示該第I實施方式的數位相機I的全景拍攝模式下的數位相機I的運動(基於用戶的運動方法)的概念圖。圖5是用於說明該第I實施方式的數位相機I的動作的流程圖。圖6是用於說明該第I實施方式的數位相機I的連拍處理動作的流程圖。圖7是用於說明該第I實施方式的數位相機I的合成處理動作的流程圖。圖8是用於說明該第I實施方式的數位相機I的合成處理動作的概念圖。圖9是用於說明第2實施方式的數位相機I的連拍處理動作的流程圖。圖10是用於說明該第2實施方式的數位相機I的連拍處理動作的概念圖。
圖11是用於說明第3實施方式的數位相機I的連拍處理動作的流程圖。圖12是用於說明該第3實施方式的數位相機I的連拍處理動作的概念圖。圖13是表示全景拍攝時的數位相機I的運動方法的其它例的概念圖。圖14是表示示出拍攝範圍的拍攝框及移動方向的其它顯示例的概念圖。
具體實施例方式下面，參考
本發明的實施方式。A.第I實施方式A-1.第I實施方式的結構
圖I是表示本發明第I實施方式的數位相機的結構的框圖。圖中，數位相機I具備拍攝鏡頭2、鏡頭驅動部3、光圈兼用快門(較>9兼用'> Y 夕)4、CCD 5 (拍攝機構)、TG (Timing Generator) 6、單元電路(unit circuit) 7、圖像處理部8 (廣角圖像生成機構、全景生成機構、預備合成圖像生成機構)、CPU11(拍攝控制機構、顯示控制機構、檢測機構)、DRAM 12、存儲器13、快閃記憶體14、圖像顯示部15 (顯示機構)、鍵(key)輸入部16、卡I/F17以及存儲卡18。拍攝鏡頭2包含對焦鏡頭(focus lens)、變焦鏡頭(zoom lens)等，連接有鏡頭驅動部3。鏡頭驅動部3包括馬達，將構成拍攝鏡頭2的對焦鏡頭、變焦鏡頭分別沿光軸方向驅動；對焦馬達驅動器、變焦馬達驅動器，根據來自CPU 11的控制信號，驅動對焦馬達、變焦馬達。
光圈4包含未圖示的驅動電路，驅動電路根據從CPU 11送來的控制信號使光圈4動作。該光圈4控制從拍攝鏡頭2進來的光的量。CCD (拍攝元件)5將經由拍攝鏡頭2、光圈4而投影的被攝體的光變換為電信號，作為拍攝信號輸出到單元電路7。此外，CCD 5根據由TG 6生成的規定頻率的定時信號而被驅動。單元電路7 包括CDS (Correlated Double Sampling)電路，將從 CCD 5 輸出的拍攝信號進行相關雙米樣(correlated double sampling)並保持；AGC(Automatic GainControl)電路，進行該採樣後的拍攝信號的自動增益調整；A/D變換器，將該自動增益調整後的模擬拍攝信號變換為數位訊號。CCD 5的拍攝信號經單元電路7而作為數位訊號被送到圖像處理部8。另外，單元電路7根據由TG 6生成的規定頻率的定時信號而被驅動。圖像處理部8進行以下等處理從單元電路7送來的圖像數據的圖像處理(像素插值處理(pixel interpolation processing)、Y修正、亮度色差信號的生成、白平衡處理、曝光修正處理等)、圖像數據的壓縮/擴展(例如，JPEG形式、M-JPEG形式或MPEG形式的壓縮/擴展)處理、合成多個拍攝圖像的處理。另外，圖像處理部8根據由TG 6生成的規定頻率的定時信號而被驅動。CPU 11是對數位相機I的各部進行控制的單片機。特別是，在本第I實施方式中，在用戶使數位相機I運動的期間，CPU 11對各部進行控制，以使得按規定周期(時間間隔)連拍多個圖像，將拍攝到的多個圖像進行合成使得其一部分重複(例如，使用α混合(blend))，生成如以廣角進行拍攝那樣的一個合成圖像。另外，對於圖像合成的詳細內容在後面進行敘述。DRAM 12作為緩衝存儲器來使用，暫時存儲由CXD 5進行拍攝後被送到CPU 11的圖像數據，並且，還作為CPU 11的工作存儲器來使用。存儲器13存儲CPU 11進行的數位相機I的各部的控制所需的程序、以及各部的控制所需的數據，CPU 11根據該程序進行處理。快閃記憶體14及存儲卡18是保存由CXD 5所拍攝的圖像數據等的記錄介質。圖像顯示部15包含彩色IXD及其驅動電路，在拍攝等待狀態時，將由(XD5拍攝的被攝體作為實時圖像(real-time image)來顯示,在再現記錄圖像時,顯示從快閃記憶體14、存儲卡23讀出並被擴展的記錄圖像。鍵輸入部16包含快門SW、變焦SW、模式鍵、SET鍵、十字鍵等多個操作鍵，向CPU 11輸出與用戶的鍵操作對應的操作信號。卡I/F17經由數位相機I主體的未圖示的卡插槽而裝拆自如地安裝有存儲卡18。圖2是用於說明通常的拍攝模式的概念圖。數位相機I在以通常拍攝模式進行拍攝的情況下，如圖2所示，只能以該數位相機I的拍攝系統的視場角S進行拍攝。圖3是用於說明本第I實施方式的數位相機I的全景拍攝模式的概念圖。圖4是表示本第I實施方式的數位相機I的全景拍攝模式下的數位相機I的運動(基於用戶的運 動方法)的概念圖。在該模式下，相對於所希望的景色，用戶以使視場角的長度方向為縱向的方式在縱向上放置數位相機1，在左上端按下快門SW(SWitch)(半按一全按)，如圖3所示的箭頭那樣，首先從按下了快門SW的左端向右方向運動(狀態#1 :參考圖4)，在規定位置向下方向運動(狀態#2 :參考圖4)，進而在另一規定位置向左方向運動(狀態#3:參考圖4)。在用戶進行該運動的期間，數位相機I按規定的定時連續地拍攝圖像。數位相機I根據以從左端向右方向運動的狀態#1拍攝的多個圖像合成第I全景圖像，根據以從右端向左方向運動的狀態#3拍攝的多個圖像合成第2全景圖像，將第I全景圖像和第2全景圖像合成，最終生成所希望的廣角圖像(圖3的下側)。另外，以從上向下方向運動的狀態#2拍攝的圖像對於全景圖像的生成而言不是必要的，因此不被保存。A-2.第I實施方式的動作下面，說明上述第I實施方式的動作。圖5是用於說明第I實施方式的數位相機I的動作的流程圖。首先，若半按快門SW (步驟S10) JlJCPU 11執行AF (auto focus)處理(步驟S12)，若全按快門SW (步驟S14)，則CPU 11以規定的周期(時間間隔)連拍多個圖像(步驟S16)。另外，對於連拍處理的詳細內各在後面敘述。此時，如圖3所示，相對於所希望的景色，用戶以使視場角的長度方向為縱向的方式在縱向上放置數位相機I，在左上按下快門SW(半按一全按)，如圖3所示的箭頭那樣，首先使數位相機I從按下了快門SW的左端向右方向運動(狀態#1 :參考圖4)，在規定位置向下方向運動(狀態#2 :參考圖4),進而向左方向運動(狀態#3 :參考圖4)。然後,判斷連拍是否結束，即判斷全景拍攝是否結束(步驟S18)，若連拍未結束，則返回到步驟S16，繼續連拍處理。另一方面，在連拍結束的情況下，即全景拍攝結束的情況下(步驟S18為「是」)，根據以從左端向右方向運動的狀態#1拍攝的多個圖像合成第I全景圖像，根據以從右端向左方向運動的狀態#3拍攝的多個圖像合成第2全景圖像，將第I全景圖像和第2全景圖像進行合成，最終生成所希望的廣角圖像(步驟S20)。另外，對於合成處理的詳細內容在後面敘述。
圖6是用於說明第I實施方式的數位相機I的連拍處理動作的流程圖。首先，CPU11進行前一個拍攝圖像和當前拍攝圖像之間的位置對照(步驟S30)，判斷當前狀態是狀態#1、#2、#3中的哪個(步驟S32)。並且，在用戶將數位相機I從左端向右方向運動的狀態#1的情況下(步驟S32的狀態#1)，將該當前拍攝圖像保存為用於製作全景圖像的圖像(步驟S34)。接著，判斷數位相機I是否到達規定位置(該情況下，是狀態#1的結束位置即右端)(步驟S36)。並且，在沒有到達規定位置的情況下(步驟S36的「否」)，不變更當前的狀態#1而結束該處理，返回到圖5所不主程序(main routine)。此後，在數位相機I到達規定位置(該情況下，是狀態#1的結束位置即右端)之前，反覆步驟S34，將拍攝到的圖像保存為用於製作全景圖像的圖像。並且，若數位相機I到達規定位置(步驟S36的「是」)，則由於從狀態#1向狀態#2轉移，因此將當前的狀態變更
為狀態#2 (步驟S38)。接著，若轉移為用戶使數位相機I從上向下方向運動的狀態#2(步驟S32的狀態#2)，則不將拍攝圖像保存為用於製作全景圖像的圖像而進入到步驟S42(步驟S40)，判斷數位相機I是否到達規定位置(該情況下，是狀態#2的結束位置即下部右端)(步驟S42)。並且，在沒有到達規定位置的情況下(步驟S42的「否」)，不變更當前的狀態#2而結束該處理，返回到圖5所示的主程序。此後，在數位相機I到達規定位置(該情況下是狀態#2的結束位置即下部右端)之前，不保存拍攝圖像而是按原樣地繼續拍攝，若數位相機I到達規定位置(步驟S42的「是」)，則由於從狀態#2向狀態#3轉移，因此將當前的狀態變更為狀態#3(步驟S44)。接著，若轉移為用戶使數位相機I從右下向左方向運動的狀態#3 (步驟S32的狀態#3)，則將拍攝到的圖像保存為用於製作全景圖像的圖像(步驟S46)。並且，判斷數位相機I是否到達規定位置(該情況下，是狀態#3的結束位置即左端)(步驟S48)。在沒有到達規定位置的情況下(步驟S48的「否」)，不變更當前的狀態#3而結束該處理，返回到圖5所示的主程序。此後，在數位相機I到達規定位置(該情況下，是狀態#3的結束位置即左端)之前，反覆步驟S46，將拍攝到的圖像保存為用於製作全景圖像的圖像。若數位相機I到達規定位置(步驟S48的「是」)，結束連拍(步驟S50)。進行上述動作從而用戶可獲得在使數位相機I從左端向右方向運動的狀態#1下拍攝的多個圖像、以及在使數位相機I從右下向左方向運動的狀態#3下拍攝的多個圖像。下面，說明使用這些拍攝到的多個圖像來獲得最終的廣角圖像的方法。圖7是用於說明第I實施方式的數字合成處理動作的流程圖。圖8是用於說明第I實施方式的數字合成處理動作的概念圖。首先，CPU 11取得用於製作全景圖像的圖像(步驟S60)，判別拍攝該圖像時的狀態(步驟S62)。在拍攝該圖像時的狀態為狀態#1的情況下，對該圖像進行用於製作全景圖像#1的合成處理(步驟S64)。此後，判斷全景合成是否結束(步驟S68)，若未結束，返回到步驟S60。以下，如圖8A所示，進行合成以使得在狀態#1下拍攝的多個圖像FRl FR6的一部分重複(例如，使用α混合)，製作全景圖像#1。另一方面，在取得的全景製作用的圖像是在狀態#3下拍攝的圖像的情況下，對該圖像進行用於製作全景圖像#2的合成處理(步驟S66)。之後，判斷全景合成是否結束(步驟S68)，若未結束，返回到步驟S60。以下，如圖SB所示，進行合成以使得在狀態#3下拍攝的多個圖像FLl FL6部分重複(例如，使用α混合)，製作全景圖像#2。接著，在全景合成結束的情況下(步驟S68的「是」)，如圖SC所示，進行合成以使得上述全景圖像#1的下側的規定區域和全景圖像#2的上側的規定區域部分重複(例如，使用α混合)，製作一個廣角圖像(步驟S70)。
另外，在上述第I實施方式中，也可以是，若從鍵輸入部16預先指定廣角圖像的拍攝範圍，則生成基於所指定的拍攝範圍的尺寸的全景圖像。另外，也可以是，在圖像處理部8中，比較應合成的全景圖像彼此的拍攝範圍，使拍攝範圍小的全景圖像配合其它全景圖像的拍攝範圍來合成，從而生成最終的廣角圖像。根據上述第I實施方式，不用交換鏡頭就能夠容易且高效地獲得廣角圖像的生成所需的圖像。B.第2實施方式下面，說明本發明的第2實施方式。第2實施方式中，特徵在於，將作為相機因素的移動量、方位傳感器或加速度傳感器等的信息、以及作為用戶因素的移動方向指示操作、快門鍵等的鍵操作、用戶的姿勢、聲音等用作觸發(trigger)，來檢測全景拍攝時用戶使數位相機I運動時的從狀態#1向狀態#2、從狀態#2向狀態#3的移動方向的變化。另外，第2實施方式的數位相機I的結構與圖I相同，因此省略說明。此外，全景拍攝模式的主程序與圖5相同，合成處理與圖7相同，因此省略說明。圖9是用於說明第2實施方式的數位相機I的連拍處理動作的流程圖。圖10是用於說明第2實施方式的數位相機I的連拍處理動作的概念圖。在第2實施方式中，為了伴隨觸發檢測而判別當前數位相機I處於狀態#1、#2、#3中的哪個狀態，準備了每當檢測到觸發則進行反轉的標誌、和每當檢測到觸發則逐一增加的狀態#N(係數)。標誌的初始值為「0」，每當檢測到觸發則進行反轉。另外，狀態#N的初始值為「1」，是表示當前數位相機I處於狀態#1、#2、#3中的哪個狀態的係數。狀態#N在檢測出第I次觸發之前成為「I」而表示狀態#1，若檢測出第I次觸發則成為「2」而表示狀態#2。並且，若檢測到下個觸發則成為「3」而表示狀態#3。首先，CPU 11進行前一個拍攝圖像和當前拍攝圖像之間的位置對照(步驟S80)，判斷是否檢測到觸發(步驟S82)。在沒有檢測到觸發的情況下，如圖10所示，判斷為未從狀態#1向狀態#2轉移、即處於從左端向右方向運動的狀態#1，判斷標誌是否為「I」 (步驟S88)。該情況下，因為還沒有檢測到觸發，因此標誌為「0」，狀態#N為「I」。並且，由於標誌為「0」(步驟S88的「否」)，因此將拍攝到的圖像保存為狀態#N(=I)的用於製作全景圖像的圖像(步驟S90)。之後，結束該處理，返回到圖5所示的主程序。此後，在檢測到觸發之前，反覆步驟S90，將拍攝到的圖像保存為狀態#N(= I)的用於製作全景圖像的圖像。接著，如圖10所示，在從狀態#1向狀態#2轉移時，例如通過作為相機因素的移動量及方位傳感器的信息、作為用戶因素的移動方向、快門鍵等的鍵操作、用戶的姿勢、聲音等，檢測到數位相機I已到達狀態#1的終點的情況下(檢測到向規定方向的連續拍攝結束的情況下)，將其檢測為觸發(步驟S82的「是」)。若檢測到觸發，則使標誌反轉(步驟S84)，使狀態#N為N+1 (步驟S86)。該情況下，標誌成為「 I 」，狀態#N成為「2」。接著，判斷標誌是否為「1」(步驟S86)。在此情況下，由於標誌為「1」，因此不將拍攝圖像保存為製作全景圖像用的圖像而結束該處理(步驟S92)，返回到圖5所示的主程序。此後，在檢測到下次觸發之前(在數位相機I的移動方向成為狀態#3之前)，反覆進行不保存拍攝圖像並結束該處理、返回到圖5所示的主 程序的動作。因此，不保存以狀態#2拍攝的圖像。 接著，如圖10所示，當從狀態#2向狀態#3轉移時，例如，通過作為相機因素的移動量及方位傳感器的信息、作為用戶因素的移動方向、快門鍵等的鍵操作、用戶的姿勢、聲音等，檢測到數位相機I已到達狀態#2的終點的情況下(檢測到向規定方向的連續拍攝結束的情況下)，將其檢測為觸發(步驟S82的「是」)。若檢測到觸發，則使標誌反轉(步驟S84)，使狀態#N成為N+1 (步驟S86)。在此情況下，標誌成為「0」，狀態#N成為「3」。接著，判斷標誌是否為「1」(步驟S86)。在此情況下，由於標誌為「0」，因此將拍攝到的圖像保存為狀態#N( = 3)的製作全景圖像用的圖像(步驟S90)。此後，結束該處理，返回到圖5所示的主程序。之後，在檢測到下次觸發之前，反覆進行步驟S90，將拍攝到的圖像保存為狀態#N( = 3)的製作全景圖像用的圖像。進行上述動作，從而獲得在用戶使數位相機I從左端向右方向運動的狀態#1下拍攝的多個圖像、以及在用戶使數位相機I從右下向左方向運動的狀態#3下拍攝的多個圖像。接著，通過與上述第I實施方式相同的方法(參考圖7)，合成在狀態#1下拍攝的多個圖像來製作全景圖像#1、合成在狀態#3下拍攝的多個圖像來製作全景圖像#2，進一步將全景圖像#1下側的規定區域和全景圖像#2上側的規定區域合成以使其部分重複(例如，使用α混合)，來製作一個廣角圖像。根據上述第2實施方式，不進行鏡頭交換就能夠容易且高效地獲得廣角圖像的生成所需的圖像。C.第3實施方式下面，說明本發明的第3實施方式。在上述第I、第2實施方式中，用戶為了拍攝用於得到廣視場角的合成圖像所需的全部圖像，如圖3的箭頭所示那樣地，相對於所希望的景色，使視場角的長度方向成為縱方向而在縱方向上放置數位相機I，在左上按下快門SW(半按一全按)，首先從按下了快門SW的左端向右方向運動(狀態#1)，在規定位置向下方向運動(狀態#2)，進而在另一規定位置向左方向運動(狀態#3)。然而，對於用戶而言，難以得知如何移動數位相機I較好、或者是否已可靠地獲得所需要的圖像。因此，在本第3實施方式中，在全景拍攝模式下，若用戶按下快門SW，則在圖像顯示部15中顯示拍攝框及移動方向，拍攝框示出數位相機I應拍攝的範圍，移動方向示出向哪個方向移動較好，從而對用戶進行引導。此外，在全景拍攝模式中，將當前成像於數位相機I的CCD5的圖像作為預覽圖像(低解析度)在圖像顯示部15中進行實時顯示，並且在圖像顯示部15中半透明地(透射率50% )顯示使用預覽圖像合成的合成圖像。這樣，在全景拍攝模式中，在圖像顯示部15中顯示出表示接下來應拍攝的拍攝區域的拍攝框、表示向哪個方向移動較好的移動方向、以及將已拍攝的圖像合成後的縮小圖像，因此用戶能夠容易地識別向哪個方向移動數位相機I較好。並且，第3實施方式的數位相機I的結構與圖I相同，因此省略其說明。此外，全景拍攝模式的主程序與圖5相同，合成處理與圖7相同，因此省略其說明。圖11是用於說明第3實施方式的數位相機I的連拍處理動作的流程圖。圖12是用於說明第3實施方式的數位相機I的連拍處理動作的概念圖。首先，CPU 11進行前一個拍攝圖像與當前拍攝圖像之間的位置對照(步驟S100)，判斷當前狀態是狀態#1、#2、#3中的哪個(步驟S102)。並且，在處於用戶使數位相機I從左端向右方向運動的狀態#1的情況下(步驟S 102的狀態#1)，如圖12所示，顯示拍攝框、FR1、移動方向Ml (步驟S104)。並且，將該當前的拍攝圖像保存為在狀態#1下的製作全景圖像用的圖像(步驟S106)，根據在該時刻之前保存的拍攝圖像的縮小圖像來製作簡易合成圖像IMG並半透明地(透射率50% )顯示(步驟S108)。接著，判斷數位相機I是否到達規定位置Pl (該情況下，是狀態#1的結束位置 '參考圖12)(步驟S110)。並且，在沒有到達規定位置Pl的情況下(步驟SllO的「否」)，不改變當前的狀態#1而結束該處理，返回到主程序。此後，反覆進行步驟S106和步驟S108直到數位相機I到達規定位置Pl，每當將拍攝到的圖像保存為狀態#1的製作全景圖像用的圖像，就半透明(透射率50% )地顯示該時刻的合成圖像。並且，若數位相機I到達規定位置Pl (步驟SllO的「是」)，則由於從狀態#1向狀態#2轉移，因此將當前的狀態變更為狀態#2 (步驟S112)。接著，若當前的狀態向使數位相機I從狀態#1的結束位置向下方向運動的狀態#2轉移(步驟S102的狀態#2)，如圖12所示，顯示拍攝框FR2、移動方向M2 (步驟SI 14)。並且，不將拍攝圖像保存為製作全景圖像用的圖像，進入步驟S118(步驟S116)，判斷數位相機I是否到達規定位置P2(該情況下，是狀態#2的結束位置參考圖12)(步驟S118)。並且，在沒有到達規定位置P2的情況下(步驟S118的「否」)，不改變當前的狀態#2，結束該處理，返回到圖5所示的主程序。此後，不保存拍攝圖像並按原樣繼續進行拍攝，直到數位相機I到達規定位置P2，若數位相機I到達規定位置P2(步驟S118的「是」)，則由於從狀態#2向狀態#3轉移，因此將當前的狀態變更為狀態#3 (步驟S120)。接著，若當前的狀態向使數位相機I從狀態#2向左方向運動的狀態#3轉移(步驟S102的狀態#3)，則如圖12所示，顯示拍攝框FR3、移動方向M3(步驟S122)。並且，將拍攝到的圖像保存為狀態#3的製作全景圖像用的圖像(步驟S 124)，根據在該時刻之前保存的拍攝圖像的縮小圖像來製作簡易合成圖像，並半透明(透射率50% )地進行顯示(步驟S126)。此後，反覆進行步驟S124以及步驟S126直到數位相機I到達規定位置P3 (終點)，每當將拍攝到的圖像保存為狀態#3的製作全景圖像用的圖像，就半透明(透射率50%)地顯示該時刻的合成圖像。並且，若數位相機I到達規定位置P3(步驟S128的「是」)，則結束連拍(步驟S130)。進行上述操作，從而獲得在用戶使數位相機I從左端向右方向運動的狀態#1下拍攝的多個圖像、以及在用戶使數位相機I從右下向左方向運動的狀態#3下拍攝的多個圖像。接著，通過與上述第I、第2實施方式相同的方法(參考圖7)，將在狀態#1下拍攝的多個圖像合成來製作全景圖像#1，將在狀態#3下拍攝的多個圖像合成來製作全景圖像#2，進而將全景圖像#1下側的規定區域和全景圖像#2上側的規定區域合成(例如，使用α混合)以使其部分重複，來製作一個廣角圖像。另外，在上述第3實施方式中，在圖像顯示部15所顯示的拍攝框FRl FR3中，如圖12所示，優選採用設有餘量MG、S卩比實際拍攝的圖像範圍稍大的拍攝框。通過設置餘量MG，在使數位相機I運動的範圍內產生裕度，能夠減輕使數位相機I運動的用戶的壓力。此外，在上述第3實施方式中，通過是否到達規定位置來判斷從狀態#I向狀態#2、從狀態#2向狀態#3的移動方向的變化，但不限於此，也可以與上述第2實施方式同樣地，將作為相機因素的移動量、方位傳感器及加速度傳感器等的信息、以及作為用戶因素的移動方向指示操作、快門鍵等的鍵操作、用戶的姿勢、聲音等用作觸發來進行判斷。
根據上述第3實施方式，實時地在圖像顯示部15中顯示合成圖像，並且顯示應使數位相機I移動的拍攝框及移動方向，因此用戶可以一邊觀看拍攝框及移動方向一邊使數位相機I運動，因此能夠容易且高效地拍攝一次拍攝所不能獲得的生成廣視場角圖像所需的多個圖像，能夠容易地生成廣視場角圖像。另外，在上述第I到第3實施方式中，在全景拍攝時，使數位相機I從左向右、從上向下、進而從右向左移動，但不限於此，例如也可以如圖13A所示，在向一個方向運動的期間拍攝多個圖像，將其合成來生成一個廣角圖像。或者也可以如圖13B所示，使數位相機I從左向右、從上向下、從右向左、從上向下、然後從左向右這樣，反覆進行三次以上的橫方向移動。此外，在上述第3實施方式中，顯示示出拍攝範圍的拍攝框及移動方向，但不限於此，也可以如圖14所示，對最終的廣角圖像的整體框20填塗拍攝到的部分30。以上說明了本發明的幾個實施方式，但本發明不限於此，還包括在權利要求的範圍內記載的發明及其等同的範圍。
權利要求
1.一種圖像處理裝置，其特徵在於， 具備 拍攝機構； 顯示機構； 拍攝控制機構，進打控制以使所述拍攝機構連續拍攝； 廣角圖像生成機構，根據由所述拍攝機構連續拍攝的多個圖像，生成廣角圖像； 檢測機構，檢測規定的觸發，該規定的觸發表示所述拍攝機構向規定方向的連續拍攝的結束；以及 顯示控制機構，若檢測到所述規定的觸發，則將表示應由所述拍攝機構連續拍攝的範圍的信息變更並顯示於所述顯示機構。
2.如權利要求I所述的圖像處理裝置，其特徵在於 該圖像處理裝置還具有全景圖像生成機構，該全景圖像生成機構通過對所述拍攝機構連續拍攝的多個圖像進行合成，生成全景圖像； 所述廣角圖像生成機構通過對所述全景圖像生成機構生成的全景圖像彼此進行合成，生成所述廣角圖像。
3.如權利要求2所述的圖像處理裝置，其特徵在於 若所述檢測機構檢測到規定的觸發，則所述顯示控制機構在所述顯示機構中顯示信息，該信息表示為了生成下一全景圖像從而所述拍攝機構應連續拍攝的範圍。
4.如權利要求I所述的圖像處理裝置，其特徵在於 所述顯示控制機構顯示框，該框表示所述拍攝機構根據所述拍攝控制機構的拍攝控制而應連續拍攝的範圍。
5.如權利要求I所述的圖像處理裝置，其特徵在於 該圖像處理裝置還具備預備合成圖像生成機構，該預備合成圖像生成機構將所述拍攝機構連續拍攝的多個圖像依次合成來生成圖像； 所述顯示控制機構,在所述顯示機構中顯示表示所述應連續拍攝的範圍的信息、以及由所述預備合成圖像生成機構生成的圖像。
6.如權利要求I所述的圖像處理裝置，其特徵在於 所述檢測機構，將移動量、或方位傳感器的信息、或移動方向的變化、或用戶進行的規定的指示操作、或基於用戶聲音的指示、或基於用戶動作的指示檢測為所述規定的觸發。
7.一種圖像處理方法，其特徵在於， 包含以下步驟 拍攝控制步驟，由拍攝部連續進行拍攝； 廣角圖像生成步驟，根據由所述拍攝機構連續拍攝的多個圖像，生成廣角圖像； 檢測步驟，檢測規定的觸發，該規定的觸發表示所述拍攝機構向規定方向的連續拍攝的結束；以及 顯示控制步驟，若所述檢測步驟檢測到規定的觸發，則將表示為了生成所述廣角圖像而應由所述拍攝部連續拍攝的範圍的信息變更並顯示於顯示部。
全文摘要
本發明的數位相機，具有CCD、圖像顯示部、CPU。CPU進行控制以使CCD連續拍攝。另外，CPU根據CCD連續拍攝的多個圖像，生成廣角圖像。而且，CPU檢測規定的觸發，該規定的觸發表示所述CCD向規定方向的連續拍攝的結束。另外，每當檢測到規定的觸發，CPU將表示為了生成全景圖像而所述CCD應連續拍攝的範圍的信息變更並顯示於所述圖像顯示部。
文檔編號H04N5/265GK102739961SQ20121015710
公開日2012年10月17日 申請日期2012年4月6日 優先權日2011年4月6日
發明者宮本直知, 松本康佑 申請人:卡西歐計算機株式會社