圖像記錄裝置、圖像編輯裝置以及攝像裝置的製作方法

2023-09-17 23:09:05

專利名稱：圖像記錄裝置、圖像編輯裝置以及攝像裝置的製作方法
技術領域：
本發明涉及對拍攝被攝體而得到的電子圖像數據進行記錄的圖像記錄裝置、圖像編輯裝置以及攝像裝置。
背景技術：
近年來，數位照相機和數字攝像機等攝像裝置廣泛普及。最近的攝像裝置搭載了被攝體的視線檢測和防止閉眼那樣的用於不錯過攝影時機的各種功能，大範圍層面的用戶都簡便地進行了利用。作為與這種功能相關的技術，例如在專利文獻I中公開了根據被攝體的視線推移確定攝像時機的攝像裝置。此外，在專利文獻2中，公開了判定被攝體的照相機視線來控制攝像操作的攝像裝置。在專利文獻3中公開了如下的攝像裝置根據所拍攝的圖像數據進行被攝體的面部檢測，在存在閉眼面部區域的情況下，變更該區域的屬性進行顯示。 此外，作為與視線的檢測關聯的技術，在專利文獻4中公開了如下的視線方向檢測裝置從利用立體照相機拍攝的圖像估計眼球中心和黑眼珠中心，測定駕駛員的視線方向。此外，在專利文獻5中公開了設置有檢測掃視取景器的攝影者的視線的功能的照相機。專利文獻I日本特開2010-206523號公報專利文獻2日本特開2010-199728號公報專利文獻3日本特開2008-131094號公報專利文獻4日本特開2004-254960號公報專利文獻5日本特開2004-12503號公報但是，在照相機或攝影者檢測被攝體的視線來確定攝像時機的情況下，照相機或攝影者必須等待被攝體將視線朝向攝像裝置。此外，在照相機或攝影者拍攝多個被攝體的集合相片的情況下，尤其是在被攝體為年幼的小孩們的情況下，照相機或攝影者非常難以推測所有被攝體的視線都朝向攝像裝置的時機。因此，照相機或攝影者在推測這種攝像時機的期間，可能會錯過適合的攝影。並且，上述專利文獻4和5所公開的技術均是檢測操作者(攝影者)朝向的視線的方向的技術，沒有公開取得將視線朝向特定方向(例如攝像裝置的方向)的被攝體的圖像的技術。

發明內容
本發明是鑑於上述情況而完成的，其目的在於，提供一種能夠取得被攝體將視線朝向了攝影者或裝置使用者(以後稱作用戶)期望的方向的圖像的圖像記錄裝置和圖像編輯裝置。此外，本發明的目的在於提供一種能夠在被攝體將視線朝向了用戶期望的方向的時機進行攝像的攝像裝置。為了解決上述問題並達成目的，本發明的圖像記錄裝置的特徵在於，具有顯示單元，其對與被攝體的電子圖像數據對應的圖像進行顯示；面部檢測單元，其從所述圖像中檢測面部；眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部的範圍中，檢測眼睛區域和眼珠區域；眼珠編輯單元，其進行包含在所述眼睛區域中變更所述眼珠區域的位置的編輯；以及記錄單元，其對通過所述眼珠編輯單元進行編輯後的圖像數據進行記錄。上述圖像記錄裝置的特徵在於，該圖像記錄裝置還具有視線判定單元，該視線判定單元根據所述眼睛區域中的所述眼珠區域的位置，判定所述面部的視線是否朝向預定方向。在上述圖像記錄裝置中，其特徵在於，所述預定方向是正面方向，所述視線判定單元在所述眼珠區域處於所述眼睛區域的大致中央的情況下，判定為所述視線朝向正面。上述圖像記錄裝置的特徵在於，該圖像記錄裝置還具有通知所述視線判定單元的判定結果的通知單元。在上述圖像記錄裝置中，其特徵在於，所述通知單元是面部檢測框合成單元，該面部檢測框合成單元將具有根據所述視線判定單元的判定結果而確定的顯示屬性，且包圍所述面部的面部檢測框合成到所述圖像中。在上述圖像記錄裝置中，其特徵在於，所述面部檢測框合成單元將具有兩種以上的顯示屬性的所述面部檢測框合成到所述圖像中。上述圖像記錄裝置的特徵在於，該圖像記錄裝置還具有選擇由所述視線判定單元判定為所述視線沒有朝向預定方向的面部的面部選擇單元，所述眼珠編輯單元對由所述面部選擇單元選擇的面部中的所述眼珠區域進行編輯。上述圖像記錄裝置的特徵在於，該圖像記錄裝置還具有操作輸入單元，其將與來自外部的操作對應的信號輸入到該圖像記錄裝置；以及面部選擇單元，其在通過所述操作輸入單元輸入了選擇由所述面部檢測單元檢測到的面部內的任意一個面部的選擇信號的情況下，選擇相應被選擇的面部，所述眼珠編輯單元對由所述面部選擇單元選擇的面部中的所述眼珠區域進行編輯。上述圖像記錄裝置的特徵在於，該圖像記錄裝置還具有攝像單元，其經由攝影鏡頭拍攝被攝體來取得電子圖像數據；以及進行攝影指示的釋放單元，所述記錄單元對與通過依照所述釋放單元的攝影指示進行攝影而取得的圖像對應的圖像數據進行記錄，並且以與原圖像數據不同的文件名記錄與由所述眼珠編輯單元進行編輯後的圖像對應的圖像數據。本發明的圖像編輯裝置的特徵在於，具有操作輸入單元，其輸入與來自外部的操作對應的信號；顯示單元，其對與存儲在存儲器中的被攝體的電子圖像數據對應的圖像進行顯示；面部檢測單元，其從所述圖像中檢測面部；眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部範圍中，檢測眼睛區域和眼珠區域；眼珠編輯單元，其根據由所述操作輸入單元輸入的信號，進行包含在所述眼睛區域中使所述眼珠區域移動並在所述眼睛區域中變更所述眼珠區域的位置的編輯；以及存儲單元，其將通過所述眼珠編輯單元進行編輯後的圖像數據存儲到所述存儲器中。
在上述圖像編輯裝置中，其特徵在於，所述操作輸入單元是重疊在所述顯示單元上而設置的觸摸面板，所述眼珠編輯單元根據針對所述觸摸面板的向所述眼珠區域的觸摸軌跡，使所述眼珠區域移動。在上述圖像編輯裝置中，其特徵在於，所述操作輸入單元是重疊在所述顯示單元上而設置的觸摸面板，所述眼珠編輯單元根據所述觸摸面板上的向所述眼珠區域以外的區域的觸摸軌跡，使所述眼珠區域移動。在上述圖像編輯裝置中，其特徵在於，所述眼珠編輯單元在通過所述操作輸入單元輸入了使一個眼珠區域移動的信號的情況下，使另一個眼珠區域連動地移動。在上述圖像編輯裝置中，其特徵在於，所述眼珠編輯單元在使所述另一個眼珠區域與所述一個眼珠區域連動地移動後，在通過所述操作輸入單元輸入了使所述另一個眼珠區域移動的信號的情況下，不使所述一個眼珠區域連動，而僅使所述另一個眼珠區域移動。
·
上述圖像編輯裝置的特徵在於，該圖像編輯裝置還具有計算在所述眼睛區域中視線朝向預定方向的情況下的眼珠區域的位置的眼珠位置計算單元，所述眼珠編輯單元使通過所述眼睛區域檢測單元檢測到的所述眼珠區域移動到通過所述眼珠位置計算單元計算出的位置處。在上述圖像編輯裝置中，其特徵在於，所述眼珠編輯單元在使所述眼珠區域移動後，在所述眼珠區域的上下產生了與所述眼睛區域之間的間隙的情況下，通過對所述眼珠區域進行擴大或擴展來對所述間隙進行插補。本發明的攝像裝置的特徵在於，具有攝像單元，其經由攝影鏡頭拍攝被攝體來取得電子圖像數據；進行攝影指示的釋放單元；顯示單元，其對與所述圖像數據對應的圖像進行顯示；圖像處理單元，其生成以一定的微小時間間隔進行連續再現的實時取景圖像；記錄單元，其對通過依照所述釋放單元的攝影指示進行攝影而取得的圖像進行記錄；面部檢測單元，其從所述圖像中檢測面部；眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部的範圍中，檢測眼睛區域和眼珠區域；視線判定單元，其根據所述眼睛區域中的所述眼珠區域的位置，判定所述面部的視線是否朝向預定方向；以及警告顯示合成單元，其將與所述視線判定單元的判定結果對應的警告顯示合成到所述圖像中。在上述攝像裝置中，其特徵在於，所述預定的方向是正面方向，所述視線判定單元在所述眼珠區域處於所述眼睛區域的大致中央的情況下，判定為所述視線朝向正面。上述攝像裝置的特徵在於，該攝像裝置還具有面部檢測框合成單元，該面部檢測框合成單元將具有根據所述視線判定單元的判定結果而確定的顯示屬性，且包圍所述面部的面部檢測框合成到所述圖像中。在上述攝像裝置中，其特徵在於，所述面部檢測框合成單元將具有兩種以上的顯示屬性的所述面部檢測框合成到所述圖像。在上述攝像裝置中，其特徵在於，所述警告顯示合成單元對具有預定屬性的所述面部檢測框的數量進行顯示。上述攝像裝置的特徵在於，該攝像裝置還具有警告信息附加單元，該警告信息附加單元將與所述視線判定單元的判定結果對應的警告信息附加到與所述圖像對應的圖像數據。上述攝像裝置的特徵在於，該攝像裝置還具有根據所述警告信息選擇顯示在所述顯示單元上的圖像的圖像選擇單元。在上述攝像裝置中，其特徵在於，所述圖像選擇單元選擇附加了所述警告信息的圖像。在上述攝像裝置中，其特徵在於，所述圖像選擇單元選擇沒有附加所述警告信息的圖像。上述攝像裝置的特徵在於，該攝像裝置還具有眼珠編輯單元，該眼珠編輯單元對由所述圖像選擇單元選擇的圖像，進行包含變更所述眼睛的區域中的所述眼珠區域的位置的編輯。根據本發明，從圖像中檢測眼睛區域和眼珠區域，並進行在眼睛區域中使眼珠區域的位置改變的編輯，因此用戶能夠容易地取得被攝體將視線朝向期望的方向的圖像。此夕卜，根據本發明，對以一定的微小時間間隔進行連續再現的實時取景圖像，根據眼睛區域中的眼珠區域的位置進行視線的判定，並進行與判定結果對應的警告顯示，因此用戶能夠在 被攝體將視線朝向期望的方向的時機容易地進行攝像。


圖I是示出本發明實施方式I的攝像裝置的結構的框圖。圖2是示出圖I所示的攝像裝置的外觀的立體圖。圖3是示出圖I所示的視線編輯處理部的結構的框圖。圖4是示出圖I所示的攝像裝置的動作的流程圖。圖5是示出圖I所示的攝像裝置的再現動作的流程圖。圖6是示出顯示在顯示部上的圖像的一例的示意圖。圖7是說明視線的判定方法的圖。圖8是示出面部檢測框的顯示屬性的表。圖9是示出對面部檢測框進行合成後的圖像的顯示例的示意圖。圖10是示出視線的手動編輯動作的流程圖。圖11是說明視線的手動編輯方法的圖。圖12是說明眼珠區域的編輯方法的圖。圖13是示出眼珠區域的編輯後的編輯圖像的顯示例的示意圖。圖14是示出視線編輯菜單的顯示例的示意圖。圖15是示出視線的自動或匯總編輯動作的流程圖。圖16是示出對眼珠區域進行匯總自動編輯後的圖像的顯示例的示意圖。圖17是示出對眼珠區域進行匯總手動編輯後的圖像的顯示例的示意圖。圖18是說明變形例1-1中的眼珠區域的編輯方法的圖。圖19是示出實施方式2的攝像裝置具有的視線編輯處理部的結構的框圖。圖20是示出實施方式2的攝像裝置的實時取景動作的流程圖。圖21是示出變形例2的攝像裝置具有的圖像處理電路的結構的框圖。圖22是示出對附加了警告信息的圖像進行一覽顯示的例子的示意圖。圖23是示出對沒有附加警告信息的圖像進行一覽顯示的例子的示意圖。標號說明
I :攝像裝置(照相機)；10 :釋放按鈕；11 :模式轉盤；12 :觸摸面板；13a :放大按鈕；13b :縮小按鈕；14 :再現按鈕；15 :菜單按鈕；16 :視線按鈕；17 :編輯按鈕；18 :十字按鈕；18a :上按鈕；18b :下按鈕；18c :左按鈕；18d :右按鈕；19 :確定按鈕；20 :電源開關；26 顯示部；29 :附件埠 ；100 :更換鏡頭；101 :攝影光學系統;101a、101b :攝影鏡頭；105 :光學位置檢測機構；107 :光學系統驅動機構；109 :光圈驅動機構；110 :編碼器；111 :鏡頭控制器；112 :距離環；200 :照相機主體；203 :快門；205 :防塵過濾器；207 :壓電元件；209 紅外截止濾波器；210 :光學低通濾波器；211 :防塵過濾器驅動電路；213 :快門驅動機構；215 :氣壓傳感器單元；221 :攝像元件；223 :攝像元件驅動電路；225 :預處理電路；226 :對比度AF電路；227 :序列控制器；229 :圖像處理電路；230、230_2 :視線編輯處理部；230a 面部檢測部；230b :眼睛區域檢測部；230c :眼珠位置計算部；230d :視線判定部；230e :面部檢測框合成部；230f :面部選擇部；230h :警告顯示合成部；230g :眼珠編輯部；230_3 :警告信息附加部；230-4 :圖像選擇部；231 :壓縮解壓縮電路；233 :視頻信號輸出電路；235 顯示部驅動電路；237 : SDRAM控制電路；239 :輸入輸出電路；241 :通信電路；243 :記錄介質控制電路；245 :記錄介質；247 快閃記憶體控制電路；249 快閃記憶體；253 :開關檢測電路；259 :拆裝檢測開關；261 :數據總線；290 :攝像元件單元；292 :抖動校正驅動機構；294 :致動器驅動 電路；297 :抖動檢測部；297a :角速度傳感器；297b :角速度檢測電路；300 :通信接點。
具體實施例方式以下，參照

用於實施本發明的方式(以下稱作「實施方式」)。另外，本發明不受以下說明的實施方式限定。另外，在附圖的記載中，對相同部分標註相同標號。另外，在本申請中，水平方向是指圖像內的面部的兩個眼睛排列的方向。(實施方式I)圖I是示出作為本發明的實施方式I的圖像記錄裝置的數位照相機(以下簡稱作照相機)的結構的框圖。此外，圖2是從背面側示出圖I所示的照相機的外觀的立體圖。如圖2所示，照相機I具有分體構成的更換鏡頭100和照相機主體200，在照相機主體100中對經由更換鏡頭100拍攝被攝體而得到的圖像進行記錄。更換鏡頭100在照相機主體200的前面的裝配開口部(未圖示)上拆裝自如。在照相機主體200的上表面，配置有用於指示攝影的釋放按鈕10、電源開關20和設定攝影模式的模式轉盤11。釋放按鈕10是兩段式開關，通過半按下而接通第I釋放開關，並且通過進一步按下至全按下來接通第2釋放開關。照相機I利用第I釋放開關的接通，進行焦點檢測、攝影鏡頭的對焦、被攝體亮度的測光等攝影準備動作，並利用第2釋放開關的接通，根據後述的攝像元件221的輸出，執行進行被攝體像的圖像數據取入的攝影動作。電源開關20與用於控制照相機主體200和更換鏡頭100的電源供給的電源開關杆聯動。在電源開關20為接通狀態時，向整個照相機I提供電源，照相機I開始動作。另一方面，在電源開關20為斷開狀態時，照相機I進入到利用低消耗電流模式(也稱作休眠模式)的動作狀態。在該低消耗電流模式中，後述的序列控制器227以低消耗電流進行驅動，不向氣壓傳感器單元215、開關檢測電路253等電路以外的部分提供電源。在照相機主體200的背面上配置有顯示部26、重疊在該顯示部26上而設置的觸摸面板12和操作按鈕組，該操作按鈕組包含放大按鈕13a、縮小按鈕13b、再現按鈕14、菜單按鈕15、視線按鈕16、編輯按鈕17、十字按鈕18和確定按鈕19。觸摸面板12和操作按鈕組13a 19相當於操作輸入單元，其根據來自外部的操作，輸入與預定的指示和信息對應的信號。此外，在照相機主體200的背面上，設置有作為各種附件的連接部的附件埠 29。顯示部26通過使用了 TFT(薄膜電晶體)等有源元件的液晶面板或有機EL (Electro Luminescence :電致發光)這樣的顯示面板實現,進行被攝體像的實時取景顯示、已記錄的攝影圖像的再現顯示、菜單畫面的顯示等，對各種圖像和信息進行顯示。另外，在實施方式I中，將顯示部26配置在照相機主體200的背面，但是只要是攝影者能夠進行觀察的位置，則可以不限於背面地進行配置。此外，實時取景顯示是指根據從攝像元件221輸出的圖像信號而顯示的被攝體像的觀察用的動態圖像(實時取景圖像)顯示。觸摸面板12檢測用戶的手指或觸摸筆(筆尖)等物體根據顯示在顯示部26上的信息而與自身接觸(觸摸)的位置，並輸入與該觸摸位置以及觸摸軌跡對應的操作信號。一般而言，作為觸摸面板，有電阻膜方式、靜電電容方式、光學式等。在實施方式I中可以應用任意一個方式的觸摸面板。 放大按鈕13a是用於輸入使顯示在顯示部26上的圖像放大的指示信號的操作按鈕，縮小按鈕13b是用於輸入使顯示在顯示部26上的圖像縮小的指示信號的操作按鈕。再現按鈕14是用於輸入對轉移到再現模式和從再現模式轉移出進行指示的指示信號的操作按鈕。菜單按鈕15是用於輸入在顯示部26上顯示菜單的指示信號的操作按鈕。視線按鈕16是用於輸入對轉移到自動或匯總編輯模式、和從該自動或匯總編輯模式轉移出進行指示的指示信號的操作按鈕，在自動或匯總編輯模式中，對顯示在顯示部26上的圖像內的被攝體像的視線進行自動或匯總編輯。編輯按鈕17是用於對轉移到手動編輯模式、和從該手動編輯模式轉移出進行操作的操作按鈕，在手動編輯模式中，用戶對顯示在顯示部26上的圖像內的被攝體像的視線進行手動編輯。十字按鈕18包含上按鈕18a、下按鈕18b、左按鈕18c、右按鈕18d，是用於輸入使顯示在顯示部26上的光標或指示器等朝上下左右移動的指示信號的操作按鈕。確定按鈕19是用於輸入對利用十字按鈕18等選擇的項目進行確定的指示信號的操作按鈕。另外，作為對顯示在顯示部26上的光標或指示器進行操作的操作部件，除了觸摸面板12和十字按鈕18以外，還可使用跟蹤球、觸摸輸入板、指示杆等各種指示設備。這些指示設備可以設置在照相機I上，也可以相對於照相機I進行外裝。在附件埠 29上，連接有例如取景器目鏡部、以及取景器等各種附屬部件，該取景器設置有配置在攝影者可經由取景器目鏡部進行觀察的位置處的取景器內顯示監視器。另外，作為取景器內顯示監視器，採用了液晶或有機EL等顯示面板。如圖I所示，在將更換鏡頭100裝配到了照相機主體200的狀態下，兩者在通信接點300處進行電連接。在照相機主體200內的裝配開口部附近設置有拆裝檢測開關259，對更換鏡頭100和照相機主體200的裝配狀態進行檢測。在更換鏡頭100內，配置有包含焦點調節和焦距調節用的攝影鏡頭IOlaUOlb的攝影光學系統101，和用於調節開口量的光圈103。其中，攝影光學系統101被光學系統驅動機構107驅動，進行其位置調節。此外，光圈103被光圈驅動機構109驅動，進行其位置調節。光學位置檢測機構105檢測攝影光學系統101的位置，取得攝影光學系統101的焦點調節透鏡位置(焦點位置)和焦距(變焦位置)。此外，在更換鏡頭100的周圍設置有轉動自如的距離環112。通過編碼器110檢測該距離環112的轉動方向(操作方向)和轉動量(操作量)。光學位置檢測機構105、光學系統驅動機構107、光圈驅動機構109以及編碼器110分別與鏡頭控制器111連接，鏡頭控制器111經由通信接點300與照相機主體200連接。鏡頭控制器111例如通過CPU實現，經由針對光學系統驅動機構107的驅動控制來控制對焦和變焦驅動，並且經由針對光圈驅動機構109的驅動控制 來控制光圈值。此外，鏡頭控制器111將通過光學位置檢測機構105取得的與焦點調節透鏡位置和焦距相關的鏡頭信息發送到照相機主體200。具體而言，在內置在更換鏡頭100內(或鏡頭控制器111內)的可電改寫的非易失性存儲器(未圖示)中，存儲有更換鏡頭100的焦距信息(在變焦鏡頭的情況下，為最短焦距和最長焦距)、打開光圈值、最小光圈值、可進行拍攝的距離範圍(包含最近距離)、鏡頭的顏色平衡信息、像差信息、與自動對焦(AF)相關的信息、所裝配的鏡頭的種類(微距鏡頭、增距鏡等)這樣的鏡頭信息。另外，作為鏡頭信息，除了這些信息以外，還包含光圈103的光圈狀態(打開光圈狀態或縮小光圈狀態)、距離環112的操作狀態(操作方向和操作量)這樣的與更換鏡頭100的狀態相關的信息、光圈驅動機構109對光圈103的光圈縮小完成或光圈打開完成、光學系統驅動機構107的鏡頭驅動完成的信息這樣的與更換鏡頭100的操作狀況相關的信息。鏡頭控制器111經由通信接點300將存儲在非易失性存儲器中的這些鏡頭信息發送到照相機主體200。在照相機主體200內的攝影光學系統101的光軸上(即攝影光路上)，配置有曝光時間控制和攝像元件221的遮光用的焦平面類型的快門203。快門203的動作由快門驅動機構213進行驅動控制。從被攝體的方向入射、並與通過攝影光學系統101形成的被攝體像對應的光束經由將更換鏡頭100和照相機主體200進行結合的裝配開口部被引導至照相機主體200的方向，在快門203打開的時刻入射到照相機主體200內。在快門203的後方(與攝影光學系統101相反側的方向)配置有攝像元件單元290。攝像元件單元290是從攝影光學系統101側起依次配置防塵過濾器205、紅外截止濾波器209、光學低通濾波器210和攝像元件221並一體地構成的單元，被收納在密封成塵埃不會侵入的封裝內。這種攝像元件單元209通過抖動校正驅動機構292，在與攝影光學系統101的光軸垂直的XY平面內二維地進行移位。防塵過濾器205防止如下情況在照相機主體200的裝配開口部和主體內部產生的塵埃附著到攝像元件221或光學元件上，使得塵埃的陰影被拍入到被攝體像上從而成為不好看的圖像。在防塵過濾器205的周緣部的整周或一部分上，固定安裝有與防塵過濾器驅動電路211連接的壓電元件207。壓電元件207根據防塵過濾器驅動電路211的驅動信號，使防塵過濾器205以預定頻率的超聲波進行振動。通過防塵過濾器205以超聲波進行振動，由此去除附著在防塵過濾器205的前表面的塵埃。紅外截止濾波器209從與被攝體像對應的光束中截出紅外光分量。此外，光學低通濾波器210從被攝體光束除掉高頻分量。攝像元件221對通過攝影光學系統101進行成像後的光束進行光電轉換，生成模擬圖像信號。在本實施方式I中，作為攝像元件221，使用CCD(Charge Coupled Device :電荷率禹合器件)或CMOS (Complementary Metal Oxide Semiconductor :互補金屬氧化物半導體)等二維固體攝像元件。此外，照相機主體200具有對在攝像元件221中生成的模擬圖像信號進行處理的攝像元件驅動電路223、預處理電路225、對比度AF電路226、ASIC(Application SpecificIntegrated Circuit :面向特定用途的集成電路)262、抖動校正驅動機構292、致動器驅動電路294和抖動檢測部297。攝像元件驅動電路223依照從輸入輸出電路239輸出的控制信號，讀出在攝像元件221中生成的模擬圖像信號，對該模擬圖像信號進行放大，並且進行模擬數字轉換(AD轉 換)等信號處理。預處理電路225對在攝像元件驅動電路223中實施了信號處理的圖像信號進行用於實時取景顯示的像素間間隔剔除處理等各種預處理。對比度AF電路226提取從預處理電路225輸出的圖像信號的高頻分量(對比度信號)。提取對比度信號的圖像的範圍由序列控制器227控制，例如對AF目標、整個攝影畫面或放大顯示區域等區域進行提取。將提取出的對比度信號輸出到序列控制器227。ASIC 262包含數據總線261以及與該數據總線261連接的以下各部件序列控制器(主體側控制器)227、圖像處理電路229、壓縮解壓縮電路231、視頻信號輸出電路233、SDRAM控制電路237、輸入輸出電路239、通信電路241、記錄介質控制電路243、快閃記憶體控制電路247和開關檢測電路253。另外，在圖2中將對比度AF電路226設置在了 ASIC 262的外偵牝但也可以設置在ASIC 262內。序列控制器227例如通過CPU實現，控制照相機主體200的各部的動作。具體而言，序列控制器227依照存儲在快閃記憶體249中的程序控制整個照相機I的動作。此外，如上所述，序列控制器227從對比度AF電路226輸入對比度信號，經由鏡頭控制器111進行攝影光學系統101的自動焦點調節的控制。圖像處理電路229對從預處理電路225輸出、且經由數據總線261輸入的數字圖像信號(圖像數據)實施數字放大(數字增益調整處理)、顏色校正、伽馬(Y)校正、對比度校正、黑自/彩色模式處理、實時取景顯示用處理這樣的各種圖像處理，進行圖像數據的亮度分布和飽和度的判定。此外，圖像處理電路229具有視線編輯處理部230，該視線編輯處理部230在與圖像數據對應的圖像中包含人物或動物等的被攝體像的面部的情況下，對該面部中的視線進行編輯。另外，也可以使用專用的硬體執行這種面部檢測和視線的編輯。圖3是示出視線編輯處理部230的結構的框圖。視線編輯處理部230具有面部檢測部230a、眼睛區域檢測部230b、眼珠位置計算部230c、視線判定部230d、面部檢測框合成部230e、面部選擇部230f和眼珠編輯部230g。面部檢測部230a使用模式匹配處理等公知技術判定在顯示在顯示部26上的圖像中是否包含面部。並且，在包含面部的情況下，取得面部範圍在顯示部26中的位置坐標，生成表示該位置坐標的面部範圍信息。此時，在圖像中包含多個面部的情況下，生成與各面部對應的面部範圍信息。另外，面部檢測部230a —般都檢測人物的面部，但也可以檢測狗或貓等動物的面部。眼睛區域檢測部230b根據面部範圍信息，從面部範圍中檢測眼睛的區域(以下稱作眼睛區域)、和該眼睛區域中的眼珠的區域(以下稱作眼珠區域)。並且，取得眼睛區域和眼珠區域的輪廓在顯示部26中的位置坐標，生成表示這些位置坐標的眼睛區域信息。眼珠位置計算部230c根據眼睛區域信息，計算使視線朝向預定方向時的眼睛區域中的眼珠區域的位置。具體而言，計算眼睛區域在水平方向上的中央位置。視線判定部230d根據在眼睛區域檢測部230b中檢測到的眼睛區域和眼珠區域的位置坐標、以及在眼珠位置計算部230c中計算出的位置，判定檢測到的面部的視線是否朝向預定方向。在實施方式I中，判定視線是否朝向正面(照相機I的方向)，在檢測到的眼珠區域處於水平方向上的眼睛區域的大致中央的情況下，判定為視線朝向正面。面部檢測框合成部230e根據面部範圍信息，將分別包圍檢測到的面部的面部檢測框合成到圖像中。此時，面部檢測框合成部230e在通過視線判定部230d進行了判定的情況下，合成用根據該判定結果確定的屬性(線的粗細、顏色、種類、閃爍周期等，以下稱作·顯示屬性)來顯示的面部檢測框。具體而言，面部檢測框合成部230e針對判定為視線朝向正面的面部、以及判定為視線沒有朝向正面的面部，合成用相互不同的顏色和線種類顯示的面部檢測框。此時，面部檢測框合成部230e相當於通知視線判定部230d的判定結果的通知單元。面部選擇部230f根據視線判定部230d的判定結果、和/或利用觸摸面板12和操作按鈕組13a 19輸入的選擇信號，選擇圖像內的一個或多個面部。眼珠編輯部230g針對由面部選擇部230f 選擇的面部，進行編輯眼珠區域的處理。該編輯包含變更眼睛區域中的眼珠區域的位置。另外，這種視線編輯處理部230可以通過專用的硬體實現，也可以通過將視線編輯處理程序讀入到CPU來實現。壓縮解壓縮電路231用JPEG、TIFF等形式壓縮存儲在SDRAM 238中的圖像數據。另外，圖像壓縮不限於JPEG和TIFF，還能夠應用其它壓縮方法。視頻信號輸出電路233經由顯示部驅動電路235與顯示部26 (並且在附件埠29上安裝取景器的情況下，為取景器內顯示面板)連接。視頻信號輸出電路233將存儲在SDRAM 238或記錄介質245中的圖像數據轉換為用於顯示在顯示部26 (和/或取景內液晶監視器)上的視頻信號。SDRAM 238經由SDRAM控制電路237與數據總線261連接。SDRAM 238是臨時存儲由圖像處理電路229進行圖像處理後的圖像數據或由壓縮解壓縮電路231進行壓縮後的圖像數據的緩衝存儲器。在SDRAM 238的緩衝存儲器上進行圖像編輯等編輯處理，將編輯圖像存儲到與SDRAM 238的存儲原圖像的區域不同的區域中。在存儲器的存儲容量較少的情況下也可以重疊存儲到相同的區域中。輸入輸出電路239與防塵過濾器驅動電路211、快門驅動機構213以及攝像元件驅動電路223連接，控制經由數據總線261與序列控制器227等各電路之間的數據的輸入輸出。通信電路241與數據總線261連接，並且經由通信接點300與鏡頭控制器111連接。通信電路241進行鏡頭控制器111與序列控制器227等其他各電路之間的數據收發和控制命令的發送等通信。記錄介質控制電路243與記錄介質245連接,進行向記錄介質245的圖像數據等的記錄和再現的控制。記錄介質245構成為能夠安裝Compact Flash卡(註冊商標)、SD存儲卡(註冊商標)或存儲盤(註冊商標)等可改寫的記錄介質，相對於照相機主體200拆裝自如。另外，也可以構成為連接微驅動(Micro drive)(註冊商標)等硬碟單元或無線通信單元。快閃記憶體控制電路247與快閃記憶體(Flash Memory) 249連接。快閃記憶體249是可電改寫的非易失性存儲器，存儲用於控制照相機的動作的程序、和控制用的調整值等。序列控制器227依照存儲在快閃記憶體249中的程序和調整值等進行數位照相機的控制。開關檢測電路253與模式轉盤11、觸摸面板12、操作按鈕組13a 19、電源開關20以及拆裝檢測開關259連接，對這些各部分的開關狀態進行檢測，或者受理從這些各部分輸入的輸入信號，並經由數據總線261發送到各部。另外，在電源開關20變為斷開狀態 時，電源開關20以外的操作部件的動作均不能被檢測到。抖動校正驅動機構292具有由壓電元件驅動電機等構成的致動器作為驅動源，通過使攝像元件單元290在與攝影光學系統101的光軸垂直的XY平面內二維地移位，防止圖像中的抖動。致動器驅動電路294對抖動校正驅動機構292內的致動器進行驅動。抖動檢測部297是包含利用了陀螺儀的角速度傳感器297a和角速度檢測電路297b的抖動檢測部297。角速度傳感器297a輸出與在照相機主體200中產生的抖動對應的抖動信號。角速度檢測電路297b對從角速度傳感器297a輸出的抖動信號進行放大，並且進行AD轉換，並輸出到序列控制器227。序列控制器227根據由抖動檢測部297檢測到的抖動信號，將消除照相機主體200的抖動的抖動控制信號輸出到致動器驅動電路294，使其輸出針對抖動校正驅動機構292內的致動器的驅動信號。由此，驅動致動器，使攝像元件221在與攝影光學系統101的光軸垂直的方向上移動。其結果，消除施加到照相機主體200的抖動，防止圖像的劣化。另外，將這種手抖校正的方式稱作攝像元件移動方式。參照圖4來說明實施方式I的照相機的動作。圖4是示出序列控制器227進行的電源接通重置後的照相機I的動作的流程圖。在照相機主體200中安裝電池、或連接外部電源後，利用序列控制器227開始圖4所示的動作。首先，在步驟SOl中，照相機I判定電源開關20是否接通。在電源開關20接通的情況下(步驟SOl :是)，開始向照相機主體200和更換鏡頭100內的各機構和各電路等的電源供給(S02)。另一方面，在電源開關20斷開的情況下(步驟SOl :否)，照相機I成為作為低功耗狀態的休眠狀態(步驟S12)。另外，該休眠狀態通過電源開關20從斷開變為接通來解除。在步驟S03中，照相機I取得鏡頭信息。具體而言，序列控制器227從鏡頭控制器111經由通信電路241取得鏡頭信息，該鏡頭信息包含由光學位置檢測機構105檢測到的攝影光學系統101的焦點位置信息和焦距信息，以及最近側焦距/長焦點側焦距、打開光圈值、每個焦距的曝光校正值、周邊光量的校正值(陰影)、周邊的顏色校正值、畸變像差校正值等更換鏡頭100的固有信息。此時，也可以取得包括中間環、增距鏡等與鏡頭相關的附件的裝配有無的信息在內的與這些附件相關的信息。在步驟S04中，照相機I進行工作模式和參數的設定。具體而言，照相機主體200根據利用模式轉盤11設定的攝影模式、ISO感光度、使用操作按鈕組13a 19進行了手動設定的快門速度、光圈值等信息，進行攝影條件的讀入。在接下來的步驟S05中，照相機I進行測光和曝光值的運算。詳細地說，照相機I根據攝像元件221的輸出求出被攝體亮度，並使用該被攝體亮度依照攝影模式和攝影條件計算使得成為適當曝光的快門速度和光圈值等曝光控制值。在步驟S06中，照相機I進行實時取景顯示。具體而言，圖像處理電路229通過取入從攝像元件221輸出的圖像信號並實施預定的圖像處理，生成以一定的微小時間間隔連續再現的顯示用的圖像數據。顯示部26對與該顯示用的圖像數據對應的圖像(實時取景圖像)進行顯示。在步驟S07中，照相機I判定再現開關是否已接通。即，判定是否檢測到了與再現按鈕14連動的再現開關信號。在再現開關已接通的情況下(步驟S07 :是)，照相機I在顯示部26上再現顯示與記錄在記錄介質245中的圖像數據對應的圖像(步驟S20)。另一方面，在再現開關未接通的情況下(步驟S07 :否)、或步驟S20的再現動作已結束的情況下，照相機I判定菜單開關是否已接通(步驟S08)。即，判定是否檢測到了與菜單按鈕15連動的菜單開關信號。在菜單開關已接通的情況下(步驟S08 :是)，照相機I進行菜單設定(步驟S30)。詳細地說，照相機I根據菜單開關的接通，在顯示部26上顯示ISO感光度、白平衡、手動對焦(MF)模式、自動對焦(AF)模式、防振模式等各種設定用的畫面。照相機I根據利用對這種畫面(觸摸面板12)的觸摸、和對十字按鈕18和確定按鈕19的操作而輸入的指示信號，進行各種模式和參數的設定，並使各部執行所設定的模式。例如，在設定了防振模式的情況下，在實時取景動作中和攝影動作時執行防振動作。另一方面，在菜單開關未接通的情況下(步驟S08 :否)、或步驟S30的菜單設定已結束的情況下，照相機I判定第I釋放開關(IR開關)是否已接通(步驟S09)。具體而言，判定是否檢測到基於釋放按鈕10的半按的第I釋放開關信號。在第I釋放開關已接通的情況下(步驟S09 :是)，照相機I執行攝影(步驟S40)。具體而言，照相機I在例如設定為AF模式的情況下，通過對比度AF進行攝影光學系統101的對焦，利用測光和曝光運算進行成為適當曝光的曝光控制值的運算。並且，在利用釋放按鈕10的全按下而接通了第2釋放開關時進行曝光動作，將通過攝像取得的靜態圖像的圖像數據記錄到記錄介質245中。另一方面，在第I釋放開關未接通的情況下(步驟S09 :否)、或步驟S40的攝影已結束的情況下，照相機I判定電源開關20是否接通(步驟S10)。在電源開關20接通的情況下(步驟S10:是)，動作返回步驟S05。另一方面，在電源開關20被斷開的情況下(步驟S10:否)，照相機I成為電源斷開模式，停止電源供給(步驟S11)。之後，動作轉移到步驟 S12。接著，參照圖5說明照相機I的再現動作(步驟S20)。圖5是示出照相機I的再現動作的流程圖。首先，在步驟S201中，照相機I讀出記錄在記錄介質245中的圖像數據。此時，照相機I讀出與最新的攝影圖像對應的圖像數據。在接下來的步驟S202中，照相機I將與所讀出的圖像數據對應的圖像顯示在顯示部26上。圖6是示出顯示在顯示部26上的圖像的例子。以下,作為一例,說明對圖6所示的圖像Gl的處理。圖像Gl包含具有面部Ftll F05的被攝體像。在步驟S203中，面部檢測部230a從顯示在顯示部26上的圖像中檢測面部Ftll F
丄050在步驟S204中，眼睛區域檢測部230b從檢測到的各面部Ftll Ftl5中檢測眼睛區域和眼珠區域。詳細地說，眼睛區域檢測部230b根據各面部Ftll Ftl5的面部範圍信息取得面部範圍內的顏色信息，檢測白色(白眼珠)與周圍膚色的邊界，並將該邊界設為眼睛區域的輪廓。接著，眼睛區域檢測部230b從眼睛區域內檢測黑色(或茶色或灰色)的區域，並將該黑色區域的輪廓設為眼珠區域的輪廓。眼睛區域檢測部230b生成眼睛區域和眼珠區 域的輪廓的位置坐標作為眼睛區域信息。在步驟S205中，視線判定部230d根據眼睛區域信息，判定各面部Ftll Ftl5的視線是否朝向正面。參照圖7對該視線的判定方法進行說明。圖7是放大示出包含圖6所示的面部Fm的被攝體像的一部分的圖。通常，在左右雙眼中，在眼珠區域PK、匕處於眼睛區域Ek、El的大致中央時，可以看作視線朝向正面。因此，眼珠位置計算部230c取得從被攝體像觀察從右側(朝著紙面為左側)的眼珠區域Pk的中心到眼睛區域Ek的外側(外眼角側)的端部的距離Lk_)、從右側的眼珠區域Pk的中心到眼睛區域Ek的內側(大眼角側)的端部的距離1^( )、從被攝體像觀察從左側(朝著紙面為右側)的眼珠區域的中心到眼睛區域4內側端部的距離U(IN)、從左側的眼珠區域的中心到眼睛區域El的外側的端部的距離U(OTT)，並使用下式(I)計算評價值W。數學式IW=-ttW-I-1 ~--_ _ _ (I )
Ll(W) + Ll(Out)/+ LR(0[jrj視線判定部230d根據該評價值W的值和下式(2)判定視線。即，在評價值W滿足下式(2)的情況下，判定為視線朝向正面。0. 8 ^ W ^ I. 2 (2)在評價值W等於I. 0的情況下，眼珠區域PK、Pl處於各個眼睛區域Ek、El的中心，視線真正朝向正面。此外，在評價值W處於上式(2)的範圍內的情況下，眼珠區域PK、處於各個眼睛區域EK、El的大致中央，視線大致朝向正面。在步驟S206中，面部檢測框合成部230e根據面部範圍信息，生成包圍各面部的範圍的面部檢測框，並對該面部檢測框賦予與步驟S205中的判定結果對應的顯示屬性來合成到圖像中。圖8是示出視線的判定結果與面部檢測框的顯示屬性的對應的表。如圖8所示，在面部檢測框的顯示屬性中，有線的粗細、線的顏色、線的種類、框的形狀、閃爍周期等。作為線的粗細，可使用例如細線、粗線、中線，針對如判定為視線從正面偏離(看別處)的面部那樣希望引起用戶的注意的面部，可以合成線較粗的框。作為線的顏色，可使用綠色、紅色、黃色等，對想引起用戶注意的面部可以合成紅色的框。作為線的種類(I)，可使用連續線、虛線、點劃線等。作為另一種線的種類(2)，可使用單層線、雙層線、三層線等，可以對想引起用戶注意的面部合成增加了重疊的線的數量的框(例如三層線的框)。作為框的形狀，可使用圓形、四邊形、五邊形以上的多邊形(例如六邊形)，可以對想引起用戶注意的面部合成邊數較少的框(例如三角形或四邊形的框)。作為閃爍周期，可應用亮燈(不閃爍)、以4Hz進行閃爍、以IHz進行閃爍等。面部檢測框合成部230e針對判定為視線朝向正面的面部，例如合成具有細線、綠色、連續線、單層線、圓形或亮燈，或者將它們組合的顯示屬性的面部檢測框。此外，面部檢測框合成部230e針對判定為看別處的面部，例如合成具有粗線、紅色、虛線、三層線、四邊形或4Hz的閃爍，或者將它們組合的顯示屬性的面部檢測框。並且，如後所述，對編輯視線後的面部，例如合成具有中線、黃色、點劃線、二層線、六邊形或IHz的閃爍，或者將它們組合的顯示屬性的面部檢測框。另外，為了與各種用戶(例如色弱)對應，優選組合多種顯示屬性。
圖9是示出合成了面部檢測框後的圖像Gl的示意圖。在圖9中，針對判定為視線朝向正面的被攝體像匕2、Ftl3，例如合成實線(或實線且綠色等)的面部檢測框％、％3。另一方面，針對判定為視線從正面偏離(看別處)的被攝體像Fc^ Fc^Ftl5，例如合成虛線(或虛線且紅色等)的面部檢測框Kpbc^bci5t5另外，照相機I也可以在圖像Gl內設置警告顯示區域M，在存在判定為看別處的面部的情況下，將向用戶警告該情況的消息顯示在警告顯示區域M中。在步驟S207中，照相機I判定是否操作了十字按鈕18 (是否從十字按鈕18輸入了操作信號)。在操作了十字按鈕18的情況下(步驟S207:是)，照相機I變更顯示在顯示部26上的圖像(步驟S220)。具體而言，照相機I在從十字按鈕18內的上按鈕18a輸入了信號的情況下，從記錄介質245讀出與10張前的圖像對應的圖像數據。此外，在從下按鈕18b輸入了信號的情況下，從記錄介質245讀出與10張後的圖像對應的圖像數據。此夕卜，在從左按鈕18c輸入了信號的情況下，從記錄介質245讀出與前I張的圖像對應的圖像數據。並且，在從右按鈕18d輸入了信號的情況下，從記錄介質245讀出與後I張的圖像對應的圖像數據。另一方面，在沒有操作十字按鈕18的情況下(步驟S207 :否)，照相機I判定是否操作了放大按鈕13a或縮小按鈕13b (步驟S208)。在操作了放大按鈕13a或縮小按鈕13b的情況下(步驟S208 :是)，照相機I變更顯示在顯示部26上的圖像的顯示範圍(步驟S230)。具體而言，照相機I在從放大按鈕13a輸入了信號的情況下，將顯示在顯示部26上的圖像的顯示範圍縮小為中央部的預定範圍，並將該預定範圍放大顯示到顯示部26上。另一方面，照相機I在從縮小按鈕13b輸入了信號的情況下，將顯示在顯示部26上的圖像的範圍擴大為外周側的預定範圍，並將該預定範圍縮小顯示到顯示部26上。此時，在已經在顯示部26上對圖像進行了等倍顯示的情況下，照相機I進行排列多張(例如配置成2行2列、3行3列、4行4列等)縮略圖像進行顯示的索引圖像顯示(參照後述的圖22)。並且，照相機I在檢測到來自十字按鈕18的信號的情況下，根據檢測到的按鈕(上按鈕18a、下按鈕18b、左按鈕18c、右按鈕18d)的方向，使顯示在顯示部26上的圖像的顯示範圍移動。在沒有操作放大按鈕13a或縮小按鈕13b的情況下(步驟S208 :否)，照相機I判定是否操作了編輯按鈕17(步驟S209)。在操作了編輯按鈕17的情況下(步驟S209:是)，照相機I對從顯示中的圖像檢測到的面部的視線進行手動編輯(步驟S250)。另一方面，在沒有操作編輯按鈕17(步驟S209 :否)、而操作了視線按鈕16的情況下(步驟S210 :是)，照相機I對在顯示中的圖像中檢測到的面部的視線進行自動或匯總編輯(步驟S270)。之後，在操作了再現按鈕14的情況下(步驟S211 :是)，照相機I的動作返回主例程。另一方面，在沒有操作再現按鈕14的情況下(步驟S211 :否)，照相機I的動作返回步驟 S202。接著，參照圖10對視線的手動編輯(步驟S250)進行詳細說明。圖10是示出照相機I的視線的手動編輯動作的流程圖。另外，以下，作為一例，說明對於圖9所示的圖像Gl的處理。首先，在步驟S251中，照相機I判定是否通過用戶的手指或觸摸筆等物體觸摸了 觸摸面板12。在觸摸了觸摸面板12的情況下(步驟S251 :是)，接著照相機I判定是否觸摸了顯示在圖像Gl中的面部中的任意一個(步驟S252)。詳細地說，視線編輯處理部230判定所觸摸的位置坐標是否包含在面部檢測框Stll 中的任意一個的範圍內。在觸摸了任意一個面部的情況下(步驟S252 :是)，眼珠編輯部230g取得所觸摸的面部的眼睛區域信息(步驟S253)。詳細地說，面部選擇部230f 選擇包含所觸摸的位置坐標的面部檢測框，眼珠編輯部230g取得與所選擇的面部檢測框對應的眼睛區域信息。另夕卜，此時，面部檢測框合成部230e也可以改變所選擇的面部檢測框的顯示屬性，使得用戶可識別選擇中的面部檢測框。例如，可以加粗所選擇的面部檢測框的線寬、或進行閃爍顯
/Jn o在步驟S254中，照相機I對觸摸面板12判定是否存在物體觸摸的移動。在存在觸摸的移動的情況下(步驟S254 :是)，眼珠編輯部230g根據觸摸的軌跡編輯眼珠區域(步驟 S255)。作為具體例子，對在圖6所示的圖像Gl中選擇了與面部檢測框Btl5對應的被攝體像Ftl5的情況進行說明。圖11是面部檢測框的區域的放大圖。另外，在編輯眼珠區域時，可以在步驟S208中對放大按鈕13a進行操作，預先對圖像進行放大顯示(步驟S230)。如圖11所示，右邊的眼珠區域Pk和左邊的眼珠區域分別位於右邊的眼睛區域Ee和左邊的眼睛區域El的端部，因此可以看出面部Fci5的視線不朝向正面。用戶利用物體(在圖11中為自身的手指)2針對這種圖像觸摸一個眼珠區域(在圖11中為右側的眼珠區域PK)，進行使觸摸位置在水平方向上移動的操作。對應於此，眼珠編輯部230g使所觸摸的眼珠區域移動到與觸摸的軌跡對應的位置。具體的圖像處理如下所述。首先，如圖12(a)所示，眼珠編輯部230g用與周圍的白色相同的顏色塗覆最初的眼珠區域PK。接著，如圖12的(b)所示，以觸摸的移動停止的坐標為中心，描繪以最初的眼珠區域Pk的半徑r為半徑的圓，用相同的顏色塗覆最初的眼珠區域PK。其成為移動後的眼珠區域PK。另外，眼珠區域Pk的可移動範圍限定於眼睛區域Ek內。因此，眼珠編輯部230g在觸摸的軌跡超過了眼睛區域Ek的情況下，不執行使眼珠區域Pk移動的處理。或者，在這種情況下，也可以將眼珠區域Pk配置於超過的一側的眼睛區域Ek的端部。此處，一般而言，眼睛區域Ek的中央附近的寬度h。比端部附近的寬度he大。因此，當處於眼睛區域Ek的端部的眼珠區域Pk保持寬度Cl1地移動到中央附近時，在眼珠區域Pk的上下產生與眼睛區域Ek的間隙gaPl、gap2。因此，眼珠編輯部230g通過與寬度h。匹配地放大眼珠區域Pk、或者用與眼珠區域Pk的端部區域相同的顏色對眼珠區域Pk的周圍進行描繪並擴展，生成對與眼睛區域Ek的間隙gaPl、8& 2進行了插補的眼珠區域P/ (參照圖12(c))。並且，眼珠編輯部230g使所觸摸的一側的相反側(在圖11中為左側)的眼珠區域^與眼珠區域Pk連動地在水平方向上移動。此時，將眼珠區域匕的位置確定成使得從眼珠區域的中心到眼睛區域的兩端的距離的比率與從眼珠區域P/的中心C到眼睛區域Ek的兩端的距離LpL2的比率相等。由此，使右眼和左眼的視線方向一致。此外，在移動後的眼珠區域的上下產生與眼睛區域^的間隙的情況下，對眼珠區域進行擴大或擴展，從而生成對與眼睛區域^之間的間隙進行了插補的眼珠區域IV。由此，能夠使面部Ftl5的視線朝向正面。
在步驟S256中，照相機I將利用視線編輯處理部230進行編輯後的編輯圖像顯示在顯示部26上。此外，此時，面部檢測框合成部230e對合成到編輯後的面部中的面部檢測框的顯示屬性進行變更(參照圖8)。圖13示出了對面部Ftl5的眼珠區域進行編輯後的圖像。在圖13所示的圖像G2中，針對面部Ftl5，合成了表示是編輯後的例如點劃線(或點劃線且黃色等)的面部檢測框cQ5。在步驟S257中，照相機I判定是否操作了確定按鈕19。在操作了確定按鈕19的情況下(步驟S257 :是)，照相機I以與對應於原圖像的圖像數據不同的文件名將對應於編輯圖像的圖像數據記錄到記錄介質245中(步驟S258)。另一方面，在沒有對觸摸面板12進行觸摸的情況下(步驟S251 :否)，或觸摸了觸摸面板12上的面部以外的區域的情況下(步驟S252:否)，在操作了編輯按鈕17時(步驟S261 :是)，照相機I的動作返回主例程。另一方面，在沒有操作編輯按鈕17的情況下(步驟S261 :否)，照相機I等待對觸摸面板12進行觸摸。此外，在沒有檢測到觸摸的移動的情況下(步驟S254 :否)，或沒有操作確定按鈕19的情況下(步驟S257 :否)，在操作了編輯按鈕17時(步驟S262 :是)，照相機I的動作返回主例程。此時，捨棄眼珠位置的編輯。另一方面，在沒有操作編輯按鈕17的情況下(步驟S262 :否)，照相機I的動作返回步驟S254。此時，用戶能夠利用對觸摸面板12的觸摸操作，對眼珠位置進行再次編輯。眼珠編輯部230g在第2次或第2次以後進行眼珠編輯處理時，如果存在針對與第I次所觸摸的一側相同側的眼珠區域(在上述說明中為右側的眼珠區域Pk)的觸摸移動操作，則根據觸摸的軌跡使所觸摸的一側的眼珠區域移動，並且另一個眼珠區域也連動地移動。另一方面，眼珠編輯部230g在存在針對與第I次所觸摸的一側相反側的眼珠區域(在上述說明中為左側的眼珠區域PJ的觸摸移動操作的情況下，根據觸摸的軌跡僅使所觸摸的一側的眼珠區域移動，而不使另一個連動。由此，用戶能夠對與針對另一個眼珠區域(眼珠區域Pk)的觸摸操作連動地進行了移動的眼珠區域(眼珠區域1\)的位置進行微調。接著，參照圖14和圖15對視線的自動或匯總編輯(步驟S270)進行詳細說明。圖14是用於選擇視線的自動或匯總編輯的菜單畫面的顯示例。此外，圖15是示出照相機I的視線的自動或匯總編輯動作的流程圖。另外，以下，作為例子，說明對於圖9所示的圖像Gl的處理。在步驟S271中，照相機I將針對顯示中的圖像的視線編輯菜單顯示在顯示部26上。在圖14所示的視線編輯菜單M1中，顯示有如下圖標用於選擇對各面部的視線單獨地進行自動編輯的模式(單獨自動編輯模式)的圖標I1、用於選擇對所有面部的視線進行自動編輯的模式(全部自動編輯模式)的圖標I2、用於選擇對所有的面部的視線匯總地進行手動編輯的模式(手動匯總編輯模式)的圖標I3和取消圖標14。用戶針對這種視線編輯菜單M1,能夠利用對上按鈕18a、下按鈕18b和確定按鈕19的操作、或對觸摸面板12的觸摸操作，選擇期望的圖標I1 14。由此，輸入對用戶期望的視線編輯模式進行選擇的選擇信號。照相機I在檢測到單獨自動編輯模式的選擇信號的情況下(步驟S272 :是)，接著判定是否觸摸了觸摸面板12 (步驟S273)。在觸摸了觸摸面板12的情況下(步驟S273 是)，照相機I進一步判定是否觸摸了被判定為看向別處的面部(步驟S274)。具體而言視線編輯處理部230判定所觸摸的位置坐標是否包含在面部檢測框1 Ic^btl5中的任意一個的範圍內。 在觸摸了被判定為看向別處的面部的情況下(步驟S274 :是)，視線編輯處理部230對所觸摸的面部的眼珠區域進行自動編輯(步驟S275)。詳細地說，首先，面部選擇部230f選擇被觸摸的面部，眼珠位置計算部230c計算所選擇的面部的眼睛區域的中心坐標。接著，眼珠編輯部230g使眼珠區域在水平方向上移動，使得眼珠區域的中心坐標與眼睛區域的中心坐標一致。另外，具體的圖像處理與在步驟S254中說明的處理相同。並且，眼珠編輯部230g在眼珠區域與眼睛區域之間產生間隙的情況下，對眼珠區域進行擴大或擴展來對間隙進行插補(參照圖12(c))。在步驟S276中，照相機I將利用眼珠編輯部230g進行編輯後的編輯圖像顯示在顯示部26上。此外，此時，面部檢測框合成部230e對合成到眼珠區域的編輯後的面部中的面部檢測框的顯示屬性進行變更。由此，生成對面部Ftl5的眼珠區域進行了自動編輯後的圖像。此時，與圖13同樣，針對面部Ftl5合成表示是編輯後的例如點劃線(或點劃線且黃色等)的面部檢測框cQ5。在步驟S277中，照相機I判定是否操作了確定按鈕19。在操作了確定按鈕19的情況下(步驟S277 :是)，照相機I以與對應於原圖像的圖像數據不同的文件名將對應於編輯圖像的圖像數據記錄到記錄介質245中(步驟S278)。另一方面，在沒有對觸摸面板12進行觸摸的情況下(步驟S273 :否)、沒有觸摸視線偏離的面部的情況下(步驟S274 :否)、或沒有操作確定按鈕19的情況下(步驟S277 否)，照相機I判定是否操作了編輯按鈕17(步驟S279)。在操作了編輯按鈕17的情況下(步驟S279 :是)，照相機I的動作返回主例程。另一方面，在沒有操作編輯按鈕17的情況下(步驟S279 :否)，照相機I的動作返回步驟S273。在步驟S272中沒有檢測到單獨自動編輯模式的選擇信號的情況下(步驟S272 否)，照相機I判定是否檢測到全部自動編輯模式的選擇信號(步驟S280)。在檢測到全部自動編輯模式的選擇信號的情況下(步驟S280 :是)，視線編輯處理部230針對看向別處的所有面部，進行眼珠區域的位置的自動編輯(步驟S281)。詳細地說，首先，面部選擇部230f選擇看向別處的所有面部(在圖9中，為Fc^ Ftl4、F05)，眼珠位置計算部230c計算所選擇的各面部的眼睛區域的中心坐標。接著，眼珠編輯部230g針對各面部，使眼珠區域在水平方向上移動，使得眼珠區域的中心坐標與眼睛區域的中心坐標一致。另外，具體的圖像處理與在步驟S254中說明的處理相同。並且，眼珠編輯部230g在眼珠區域與眼睛區域之間產生間隙的情況下，對眼珠區域進行擴大或擴展來對間隙進行插補(參照圖 12(c))。在步驟S282中，照相機I將利用眼珠編輯部230g進行編輯後的編輯圖像顯示在顯示部26上。此外，此時，面部檢測框合成部230e對合成到眼珠區域的編輯後的面部中的面部檢測框的顯示屬性進行變更。圖16示出對面部Fc^ F04, F05的眼珠區域進行自動編輯後的圖像。在圖16所示的圖像G3中,針對面部Fcil'Fc^Fci5,合成表示是編輯後的例如點劃線(或點劃線且黃色等)的面部檢測框^、(^、(^。在步驟S283中，照相機I判定是否操作了確定按 19。在操作了確定按鈕19的情況下(步驟S283 :是)，照相機I的動作轉移到步驟S278。另一方面，在沒有操作確定按鈕19的情況下(步驟S283 :否)，接著照相機I判定是否操作了編輯按鈕17 (步驟S284)。在操作了編輯按鈕17的情況下(步驟S284:是)，照相機I的動作返回主例程。此時，捨棄眼珠區域的編輯。另一方面，在沒有操作編輯按鈕17的情況下(步驟S284:否)，照相機I的動作返回步驟S283。在步驟S280中沒有檢測到全部自動編輯模式的選擇信號的情況下(步驟S280 否)，照相機I進入手動匯總編輯模式(步驟S285)。此處，所謂手動匯總編輯模式，是指如下的編輯模式在用戶針對在圖像內檢測到的面部的任意一個，手動地對眼珠區域進行了編輯的情況下，針對其他所有面部進行同樣的編輯。此時，在步驟S286中，照相機I判定是否觸摸了觸摸面板12。在觸摸了觸摸面板12的情況下(步驟S286 :是)，接著照相機I判定是否觸摸了顯示在圖像中的面部內的任意一個面部(步驟S230)。詳細地說，視線編輯處理部230判定所觸摸的位置坐標是否包含在面部檢測框1 ' a02, a03> bM、b05中的任意一個的範圍內。在觸摸了任意一個面部的情況下(步驟S287 :是)，眼珠編輯部230g取得所觸摸的面部的眼睛區域信息(步驟S288)。詳細地說，面部選擇部230f 選擇包含所觸摸的位置坐標的面部檢測框，眼珠編輯部230g取得與所選擇的面部檢測框對應的眼睛區域信息。在接下來的步驟S289中，照相機I判定對於觸摸面板12是否存在觸摸的移動。在存在觸摸的移動的情況下(步驟S289 :是)，眼珠編輯部230g根據觸摸的軌跡編輯眼珠區域(步驟S290)。另外，步驟S290中的詳細處理與步驟S255相同。在步驟S291中，眼珠編輯部230g進一步與針對所選擇的面部的眼珠區域的編輯同樣地進行其他所有面部的眼珠區域的編輯。詳細地說，眼珠編輯部230g取得已編輯完畢的眼珠區域的中心與眼睛區域的兩端的距離U、L2(參照圖12(c))，並計算兩者的比率L1/L2。並且，在其他面部中，也使眼珠區域移動，使得眼珠區域的中心與眼睛區域的兩端的比率變為相同的比率L1/!^並且，眼珠編輯部230g在眼珠區域與眼睛區域之間產生間隙的情況下，對眼珠區域進行擴大或擴展來對間隙進行插補(參照圖12(c))。在步驟S292中，照相機I將在眼珠編輯部230g中進行編輯後的編輯圖像顯示在顯示部26上。此外，此時，面部檢測框合成部230e對合成到眼珠區域的編輯後的面部中的面部檢測框的顯示屬性進行變更。圖17示出被編輯成所有的面部Ftll Ftl5的視線都朝向右方(朝著紙面為左方)的圖像。在圖17所示的圖像G4中，針對面部Ftll Ftl5，合成表示是編輯後的例如點劃線(或點劃線且黃色等)的面部檢測框Ctll C05O在步驟S293中，照相機I判定是否操作了確定按鈕19。在操作了確定按鈕19的情況下(步驟S293 :是)，照相機I的動作轉移到步驟S278。另一方面，在沒有對觸摸面板12進行觸摸的情況下(步驟S286 :否)、或沒有進行針對面部的觸摸的情況下(步驟S287 :否)，照相機I判定是否操作了編輯按鈕17(步驟S294)。在操作了編輯按鈕17的情況下(步驟S294 :是)，照相機I的動作返回主例程。另一方面，在沒有操作編輯按鈕17的情況下(步驟S294 :否)，照相機I等待對觸摸面板12進行觸摸。此外，在沒有觸摸的移動的情況下(步驟S289 :否)、或沒有操作確定按鈕19的情況下(步驟S293 :否)，照相機I判定是否操作了編輯按鈕17(步驟S295)。在操作了編輯 按鈕17的情況下(步驟S295:是)，照相機I的動作返回主例程。另一方面，在沒有操作編輯按鈕17的情況下(步驟S295 :否)，照相機I的動作返回步驟S286。如以上所說明那樣，根據實施方式1，照相機I或用戶對於從圖像檢測到的面部的眼睛區域使眼珠區域移動，因此能夠生成被攝體像的視線朝向了期望方向的圖像。此外，根據實施方式I，在對視線單獨地進行手動編輯的模式中，用戶能夠通過對觸摸面板12進行觸摸操作，使眼珠區域移動到期望位置，因此能夠進行眼珠區域的位置的微調。此外，使未觸摸的一側的眼珠區域與最初所觸摸的一側的眼珠區域連動地移動，因此能夠簡單地使左右的視線一致。並且，在使沒有觸摸的一側的眼珠區域移動時，使另一個眼珠區域固定，因此能夠進行視線的微妙調節。此外，根據實施方式1，在對視線進行自動編輯的模式中，將眼珠區域配置到眼睛區域的中央，因此能夠利用簡單的操作使視線朝向正面。另外，在上述實施方式I中，利用對觸摸面板12的觸摸，選擇了編輯對象的面部，但是也可以通過十字按鈕18和確定按鈕19的操作選擇面部檢測框，由此選擇編輯對象的面部。並且，在上述實施方式I中，在步驟S258、步驟S278中以與原圖像數據不同的文件名將編輯圖像數據記錄到了記錄介質245中，但是上述編輯在SDRAM 238的存儲器上進行，因此也可以直接將編輯圖像存儲到SDRAM 238上，根據用戶的指示以與原圖像數據不同的文件名將編輯圖像數據記錄到記錄介質245中。(變形例1-1)在實施方式I中，在對視線進行手動編輯時，用戶直接利用手指或觸摸筆等直接觸摸眼珠區域使其移動，但是想移動的眼珠區域與觸摸的位置也可以不一定一致。例如，也可以如圖18所示，在編輯對象的面部Ftl5以外的區域(面部Ftl5的附近或觸摸面板12上的預定區域)中，設置眼珠區域的編輯用的觸摸區域At。此時，用戶在預先觸摸編輯對象的面部(例如面部Ftl5)並指定了編輯位置後，當進行了針對編輯用的觸摸區域At的觸摸操作時，眼珠編輯部230g根據向觸摸區域At的觸摸的軌跡，使編輯對象的面部(面部Ftl5)中的眼珠區域(例如眼珠區域Ptl5)移動。根據該變形例1，用戶能夠一邊觀察眼珠區域Ptl5—邊移動觸摸位置，而不受自身手指等的妨礙，因此能夠容易地進行眼珠區域Ptl5的微調。(變形例1-2)在對視線進行手動編輯時，也可以使用觸摸面板12以外的操作部件使眼珠區域移動。例如，可以利用對十字按鈕18的按鈕操作，進行待移動的眼珠區域的選擇以及移動方向和移動量的輸入，也可以另外設置滑鼠或觸摸輸入板等指示設備，並利用這些指示設備進行眼珠區域的選擇和移動。(變形例1-3)視線編輯處理部230也可以在視線的手動編輯模式(步驟S250)中，對用戶手動進行了編輯後的眼珠區域，判定編輯後的圖像看起來是否自然，在看起來不自然的情況下通知給用戶。例如，在圖7中，如果眼珠區域PK、P[的中心Ck、(^均與各自的眼睛區域EK、E[的中心相比位於外側，則左右各自的視線分離，好像相互看著外側而看起來不自然。為了防止生成這種圖像，視線判定部230d取得從眼珠區域Pk、Pl的中心Ck、Cl到眼睛區域Ek、El的兩端的距尚Lr (out)、 Lr (IN)、Ll (IN)、Ll (out)， 並使用下式(3)和(4)進行判定。Le(oUT)/ (Lr(0UT)+Lr(IN))〈 0. 5(3) LL(oUT)/ (Ll(out)+Ll(in))〈 0. 5(4)在編輯後的眼珠區域的位置同時滿足式(3)和⑷的情況下，成為不自然的圖像。因此，在進行了滿足上式(3)和(4)那樣的編輯的情況下，視線編輯處理部230對合成到編輯後的面部中的面部檢測框的顯示屬性進行變更，或在顯示部26上顯示警告消息。(變形例1-4)在上述實施方式I中，使圖像內的面部的視線朝向正面，但是也可以使視線朝向正面以外的方向。此時，在視線的手動編輯模式中，在編輯對象的面部中，利用觸摸操作將眼珠區域Pk(或PJ移動到期望的位置即可。此外，在視線的自動或匯總編輯模式中，例如，也可以在圖9所示的圖像Gl中，當利用觸摸選擇了視線朝向用戶期望的方向的面部(例如視線朝向了右方的面部Ftll)時，對眼珠區域進行編輯以使得其他所有面部(例如面部Ftl2 Ftl5)的視線與所選擇的面部的視線朝向相同方向。此時，也可以對眼珠區域進行編輯以使得沒有選擇的面部中的眼珠區域的中心與眼睛區域的兩端的距離的比率和所選擇的面部中的眼珠區域的中心與眼睛區域的兩端的距離的比率相等。(變形例I-5)在實施方式I中，照相機I通過使合成到圖像中的面部檢測框的顯示屬性不同，將視線的判定結果通知給了用戶，但是除此以外，照相機I還可以利用各種手段將視線的判定結果通知給用戶。例如，照相機I也可以針對判定為視線沒有朝向正面的面部合成警告標記進行顯示、或者進行對白眼珠的部分進行著色來加深印象的警告顯示。(變形例I-6)在實施方式I中，照相機I根據眼睛區域中的眼珠區域在水平方向上的位置，判定了被攝體像的視線是否朝向正面，但是也可以與水平方向一起，還根據垂直於水平方向的方向(以下稱作上下方向)上的眼珠區域的位置判定視線的方向。此時，照相機I不僅能夠判別水平方向上的看向別處、還能夠判別上下方向上的看向別處。此外，照相機I在對在上下方向上看向別處的視線進行編輯時，使眼珠區域移動到眼睛區域在上下方向上的大致中央的位置即可。
(實施方式2)接著，說明本發明的實施方式2。圖19是示出實施方式2的攝像裝置具有的視線編輯處理部的結構的框圖。如圖19所示，視線編輯處理部230-2相對於圖3所示的視線編輯處理部230，還具有警告顯示合成部230h。另外，關於實施方式2的攝像裝置整體的結構，與圖I和圖2所示的照相機I相同。此外，關於實施方式2的攝像裝置整體的動作和再現動作，與圖4和圖5所示的相同。圖20是示出實施方式2的攝像裝置的實時取景顯示動作(圖4的步驟S06)的流程圖。首先，在步驟S301中，圖像處理電路229取入從攝像元件221輸出的圖像信號。
·
在接下來的步驟S302中，圖像處理電路229對所取入的圖像信號實施預定的圖像處理，生成以一定的微小時間間隔連續再現的顯示用的圖像數據。在步驟S303中，面部檢測部230a從實施了圖像處理後的各圖像中檢測面部，並生成與檢測到的面部對應的面部範圍信息。在面部檢測的結果為面部檢測部230a從圖像中檢測到了一個以上的面部的情況下(步驟S304 :是)，眼睛區域檢測部230b根據面部範圍信息，從各面部中檢測眼睛區域和眼珠區域，並生成眼睛區域信息(步驟S305)。在步驟S306中，視線判定部230d根據眼睛區域信息進行各面部的視線是否朝向正面的判定。另外，視線的判定方法的詳細情況與步驟S205相同。在步驟S307中，面部檢測框合成部230e生成具有與視線的判定結果對應的顯示屬性的面部檢測框(參照圖8)，併合成到圖像中。另外，面部檢測框合成部230e還作為將與視線判定部230d的判定結果對應的警告顯示合成到圖像中的警告顯示合成單元發揮作用。在視線判定部230d對視線的判定結果為存在視線從正面偏離(看向別處)的面部的情況下(步驟S308 :是)，警告顯示合成部230h生成用於警告存在看向別處的人的警告顯示，併合成到圖像中(步驟S309)。此時，警告顯示合成部230h也可以在警告顯示中包含看向別處的人數。具體而言，警告顯示合成部230h生成用於顯示在例如圖9所示的警告顯示區域M內的「看向別處的人有n個。」這樣的警告內容。在步驟S310中，顯示部26顯示合成了面部顯示框和警告顯示的圖像作為實時取景圖像。例如在圖9所示的圖像Gl的情況下，面部Fc^ F04, F05的視線從正面偏離，因此與這些面部FciPFc^Fci5對應的面部檢測框IDciPbc^btl5用表示看向別處的例如虛線(或者虛線且紅色等)進行顯示。此外，在圖像Gl右上的警告顯示區域M中，顯示表示存在看向別處的人的警告。在該警告中，還包含看向別處的人數n(即具有與看向別處對應的屬性的面部檢測框的數量。在圖像Gl中，n = 3)。另一方面，在沒有從圖像中檢測到面部的情況下(步驟S304 :否)、或者沒有檢測到看向別處的面部的情況下(步驟S308 :否)，動作轉移到步驟S310。在這種實時取景圖像中，根據被攝體的視線的狀態，警告顯示的有無或內容(例如在消息區域M內的警告內容中記載的人數n)時刻發生變化。因此，用戶能夠參照警告顯示，在沒有顯示警告顯示(即沒有視線偏離的人)的時機、或警告顯示中的看向別處的人數n變少的時機，操作釋放按鈕10進行攝像。此外，在警告顯示中，也可以根據視線偏離的人數將警告內容的顯示顏色變更為紅色或綠色等。例如，如果如在視線偏離的人數為兩人以上時為紅色、在I人時為綠色那樣地改變顯示顏色，則用戶能夠立即掌握警告的內容(人數n)，能夠在適當的時機對釋放按鈕10進行操作。(變形例2)接著說明變形例2。圖21是示出變形例2的攝像裝置具有的圖像處理電路的結構的框圖。如圖21所示，變形例2的圖像處理電路229-2除了視線編輯處理部230_2以外，還具有警告信息附加部230-3和圖像選擇部230-4。警告信息附加部230-3在當在實時取景圖像上進行著警告顯示的時刻第2釋放開關被接通的情況下，將存在看向別處的人的警告信息附加到該圖像數據。
圖像選擇部230-4依照操作按鈕組13a 19的操作輸入，從記錄在記錄介質245中的圖像數據中，根據上述警告信息選擇圖像數據。具體而言，圖像選擇部230-4在對所拍攝的圖像進行再現顯示時，例如僅選擇附加了警告信息的圖像數據。對應於此，視頻信號輸出電路233在顯示部26上對與所選擇的圖像數據對應的圖像依次進行顯示或一覽顯示。圖22是示出對附加了警告信息的圖像Gll G14進行一覽顯示(索引顯示)的例子的示意圖。另外，此時，也可以在圖像Gll G14中，顯示針對判定為看向別處的面部合成的面部檢測框。此時，用戶能夠僅觀察需要視線編輯的圖像，因此能夠高效地進行視線的編輯作業。或者，用戶能夠容易地選擇並刪除視線偏離的圖像等。此外，此時，已經針對所有面部進行了眼睛區域和眼珠區域的檢測，因此能夠高速地進行視線編輯處理。另一方面，圖像選擇部230-4也可以僅選擇沒有附加警告顯示的圖像數據。此時，在顯示部26上，僅對沒有附加警告信息(即沒有檢測到看向別處的人)的圖像進行依次顯示或一覽顯示。圖23是示出對沒有附加警告信息的圖像G21 G24進行一覽顯示的例子的示意圖。此時，用戶能夠高效地僅觀察不需要視線編輯的圖像。另外，在上述實施方式2和變形例2中，對被攝體的視線是否朝向正面進行了判定，但是還能夠通過變更在評價值W的計算式和判定中使用的閾值，進行被攝體的視線是否朝向期望方向的判定。在以上所說明的實施方式I和2中，將攝像裝置I說明為數位照相機，但是還能夠應用於例如單反數字靜物照相機、數字攝像機、帶照相機的行動電話等具有攝影功能的各種電子設備、以及對所拍攝的圖像進行編輯的圖像編輯設備。
權利要求
1.一種圖像記錄裝置，其特徵在於，具有 顯示單元，其對與被攝體的電子圖像數據對應的圖像進行顯示； 面部檢測單元，其從所述圖像中檢測面部； 眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部的範圍中，檢測眼睛區域和眼珠區域； 眼珠編輯單元，其進行包含在所述眼睛區域中變更所述眼珠區域的位置的編輯；以及 記錄單元，其對通過所述眼珠編輯單元進行編輯後的圖像數據進行記錄。
2.根據權利要求I所述的圖像記錄裝置，其特徵在於， 該圖像記錄裝置還具有視線判定單元，該視線判定單元根據所述眼睛區域中的所述眼珠區域的位置，判定所述面部的視線是否朝向預定方向。
3.根據權利要求2所述的圖像記錄裝置，其特徵在於， 所述預定方向是正面方向， 所述視線判定單元在所述眼珠區域處於所述眼睛區域的大致中央的情況下，判定為所述視線朝向正面。
4.根據權利要求3所述的圖像記錄裝置，其特徵在於， 該圖像記錄裝置還具有通知所述視線判定單元的判定結果的通知單元。
5.根據權利要求4所述的圖像記錄裝置，其特徵在於， 所述通知單元是面部檢測框合成單元，該面部檢測框合成單元將具有根據所述視線判定單元的判定結果而確定的顯示屬性，且包圍所述面部的面部檢測框合成到所述圖像中。
6.根據權利要求5所述的圖像記錄裝置，其特徵在於， 所述面部檢測框合成單元將具有兩種以上的顯示屬性的所述面部檢測框合成到所述圖像中。
7.根據權利要求6所述的圖像記錄裝置，其特徵在於， 該圖像記錄裝置還具有選擇由所述視線判定單元判定為所述視線沒有朝向預定方向的面部的面部選擇單元， 所述眼珠編輯單元對由所述面部選擇單元選擇的面部中的所述眼珠區域進行編輯。
8.根據權利要求6所述的圖像記錄裝置，其特徵在於，該圖像記錄裝置還具有 操作輸入單元，其將與來自外部的操作對應的信號輸入到該圖像記錄裝置；以及 面部選擇單元，其在通過所述操作輸入單元輸入了選擇由所述面部檢測單元檢測到的面部內的任意一個面部的選擇信號的情況下，選擇相應被選擇的面部， 所述眼珠編輯單元對由所述面部選擇單元選擇的面部中的所述眼珠區域進行編輯。
9.根據權利要求I 8中的任意一項所述的圖像記錄裝置，其特徵在於，該圖像記錄裝置還具有 攝像單元，其經由攝影鏡頭拍攝被攝體來取得電子圖像數據；以及 進行攝影指示的釋放單元， 所述記錄單元對與通過依照所述釋放單元的攝影指示進行攝影而取得的圖像對應的圖像數據進行記錄，並且以與原圖像數據不同的文件名記錄與由所述眼珠編輯單元進行編輯後的圖像對應的圖像數據。
10.一種圖像編輯裝置，其特徵在於，具有操作輸入單元，其輸入與來自外部的操作對應的信號； 顯示單元，其對與存儲在存儲器中的被攝體的電子圖像數據對應的圖像進行顯示； 面部檢測單元，其從所述圖像中檢測面部； 眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部範圍中，檢測眼睛區域和眼珠區域； 眼珠編輯單元，其根據由所述操作輸入單元輸入的信號，進行包含在所述眼睛區域中使所述眼珠區域移動並在所述眼睛區域中變更所述眼珠區域的位置的編輯；以及 存儲單元，其將通過所述眼珠編輯單元進行編輯後的圖像數據存儲到所述存儲器中。
11.根據權利要求10所述的圖像編輯裝置，其特徵在於， 所述操作輸入單元是重疊在所述顯示單元上而設置的觸摸面板， 所述眼珠編輯單元根據針對所述觸摸面板的向所述眼珠區域的觸摸軌跡，使所述眼珠區域移動。
12.根據權利要求10所述的圖像編輯裝置，其特徵在於， 所述操作輸入單元是重疊在所述顯示單元上而設置的觸摸面板， 所述眼珠編輯單元根據所述觸摸面板上的向所述眼珠區域以外的區域的觸摸軌跡，使所述眼珠區域移動。
13.根據權利要求10 12中的任意一項所述的圖像編輯裝置，其特徵在於， 所述眼珠編輯單元在通過所述操作輸入單元輸入了使一個眼珠區域移動的信號的情況下，使另一個眼珠區域連動地移動。
14.根據權利要求13所述的圖像編輯裝置，其特徵在於， 所述眼珠編輯單元在使所述另一個眼珠區域與所述一個眼珠區域連動地移動後，在通過所述操作輸入單元輸入了使所述另一個眼珠區域移動的信號的情況下，不使所述一個眼珠區域連動，而僅使所述另一個眼珠區域移動。
15.根據權利要求9所述的圖像編輯裝置，其特徵在於， 該圖像編輯裝置還具有計算在所述眼睛區域中視線朝向預定方向的情況下的眼珠區域的位置的眼珠位置計算單元， 所述眼珠編輯單元使通過所述眼睛區域檢測單元檢測到的所述眼珠區域移動到通過所述眼珠位置計算單元計算出的位置處。
16.根據權利要求14或15所述的圖像編輯裝置，其特徵在於， 所述眼珠編輯單元在使所述眼珠區域移動後，在所述眼珠區域的上下產生了與所述眼睛區域之間的間隙的情況下，通過對所述眼珠區域進行擴大或擴展來對所述間隙進行插補。
17.一種攝像裝置，其特徵在於，具有 攝像單元，其經由攝影鏡頭拍攝被攝體來取得電子圖像數據； 進行攝影指示的釋放單元； 顯示單元，其對與所述圖像數據對應的圖像進行顯示； 圖像處理單元，其生成以一定的微小時間間隔進行連續再現的實時取景圖像； 記錄單元，其對通過依照所述釋放單元的攝影指示進行攝影而取得的圖像進行記錄； 面部檢測單元，其從所述圖像中檢測面部；眼睛區域檢測單元，其從通過所述面部檢測單元檢測到的面部的範圍中，檢測眼睛區域和眼珠區域； 視線判定單元，其根據所述眼睛區域中的所述眼珠區域的位置，判定所述面部的視線是否朝向預定方向；以及 警告顯示合成單元，其將與所述視線判定單元的判定結果對應的警告顯示合成到所述圖像中。
18.根據權利要求17所述的攝像裝置，其特徵在於， 所述預定方向是正面方向， 所述視線判定單元在所述眼珠區域處於所述眼睛區域的大致中央的情況下，判定為所 述視線朝向正面。
19.根據權利要求18所述的攝像裝置，其特徵在於， 所述警告顯示合成單元是面部檢測框合成單元，該面部檢測框合成單元將具有根據所述視線判定單元的判定結果而確定的顯示屬性，且包圍所述面部的面部檢測框合成到所述圖像中。
20.根據權利要求19所述的攝像裝置，其特徵在於， 所述面部檢測框合成單元將具有兩種以上的顯示屬性的所述面部檢測框合成到所述圖像中。
21.根據權利要求20所述的攝像裝置，其特徵在於， 所述警告顯示合成單元對具有預定屬性的所述面部檢測框的數量進行顯示。
22.根據權利要求17 21中的任意一項所述的攝像裝置，其特徵在於， 該攝像裝置還具有警告信息附加單元，該警告信息附加單元將與所述視線判定單元的判定結果對應的警告信息附加到與所述圖像對應的圖像數據中。
23.根據權利要求22所述的攝像裝置，其特徵在於， 該攝像裝置還具有根據所述警告信息選擇要在所述顯示單元上顯示的圖像的圖像選擇單元。
24.根據權利要求23所述的攝像裝置，其特徵在於， 所述圖像選擇單元選擇附加了所述警告信息的圖像。
25.根據權利要求23所述的攝像裝置，其特徵在於， 所述圖像選擇單元選擇沒有附加所述警告信息的圖像。
26.根據權利要求23所述的攝像裝置，其特徵在於， 該攝像裝置還具有眼珠編輯單元，該眼珠編輯單元對由所述圖像選擇單元選擇的圖像，進行包含變更所述眼睛區域中的所述眼珠區域的位置的編輯。
全文摘要
本發明提供一種能夠取得被攝體將視線朝向了用戶期望的方向的圖像的圖像記錄裝置、圖像編輯裝置和攝像裝置。圖像記錄裝置具有顯示部，其對與被攝體的電子圖像數據對應的圖像進行顯示；面部檢測部(230a)，其從圖像中檢測面部；眼睛區域檢測部(230b)，其從通過面部檢測部(230a)檢測到的面部的範圍中，檢測眼睛區域和眼珠區域；眼珠編輯部(230g)，其進行包含在眼睛區域中變更眼珠區域的位置的編輯；以及記錄部，其對通過眼珠編輯部(230g)進行編輯後的圖像數據進行記錄。
文檔編號H04N5/91GK102761705SQ20121012282
公開日2012年10月31日 申請日期2012年4月24日 優先權日2011年4月25日
發明者森崎匡子 申請人:奧林巴斯映像株式會社