拍攝設備、拍攝輔助方法、顯示裝置及顯示方法

2023-05-07 10:50:36

拍攝設備、拍攝輔助方法、顯示裝置及顯示方法
【專利摘要】提供拍攝設備、拍攝輔助方法、顯示裝置及顯示方法。拍攝設備具備：攝像部，其拍攝被攝體而得到拍攝圖像；顯示部，其顯示上述拍攝圖像；部位判定部，其在顯示於上述顯示部的拍攝圖像中設定調查區域；分析部，其對與上述調查區域相關的圖像和設定中的至少一方進行分析；以及檢索部，其通過使用上述分析部的分析結果來參照預先設置的資料庫，尋求上述調查區域的圖像的不良情況的因素。
【專利說明】拍攝設備、拍攝輔助方法、顯示裝置及顯示方法

【技術領域】
[0001] 本發明涉及適合於具有觸摸面板的拍攝設備、拍攝輔助方法、顯示裝置以及顯示 方法。本發明不僅能夠應用於消費者的照相機，還能夠應用於具有拍攝和顯示功能的便攜 信息終端、以及產業用和醫療用的觀察裝置。

【背景技術】
[0002] 近年來，數位照相機等帶拍攝功能的便攜設備（拍攝設備）已經普及。在這種拍 攝設備中，存在具有顯示部、從而具有顯示拍攝圖像的功能的拍攝設備。此外，還具有在顯 示部上顯示菜單畫面、從而使得拍攝設備的操作變得容易的拍攝設備。並且還具有為了提 高操作性而在顯示面板上配置觸摸面板、從而能夠通過針對觸摸面板的觸摸操作進行拍攝 設備的操作的拍攝設備。
[0003] 在這種拍攝設備中，存在具有將各種拍攝參數自動地設定為最優值的自動模式的 拍攝設備。例如，採用了自動調整對焦的自動對焦功能、和將色溫設定為最優值的色溫自動 調整功能等各種自動模式。
[0004] 此外，為了能夠表現豐富多彩的影像，不僅採用了自動模式，還採用了手動進行各 種拍攝參數的設定的手動模式。但是，一般用戶應該是不熟知基於自動模式和手動模式的 所有拍攝參數的設定，不一定能進行用戶所想要的拍攝。
[0005] 因此，在日本特開2010-252074號公報中公開了自動進行模式選擇的拍攝設備。


【發明內容】

[0006] 本發明的拍攝設備具備：攝像部，其拍攝被攝體而得到拍攝圖像；顯示部，其顯示 上述拍攝圖像；部位判定部，其在顯示於上述顯示部的拍攝圖像中設定調查區域；分析部， 其對與上述調查區域相關的圖像和設定中的至少一方進行分析；以及檢索部，其通過使用 上述分析部的分析結果來參照預先設置的資料庫，尋求上述調查區域的圖像在拍攝時產生 不良情況的因素。
[0007] 此外，本發明的拍攝輔助方法具備以下步驟：拍攝被攝體而得到拍攝圖像；顯示 上述拍攝圖像；在所顯示的上述拍攝圖像中設定調查區域；對與上述調查區域相關的圖像 和設定中的至少一方進行分析而得到分析結果；以及通過使用上述分析結果來參照預先設 置的資料庫，尋求上述調查區域的圖像的與拍攝和觀察的操作相關的不良情況的因素。
[0008] 此外，本發明的顯示裝置具備：顯示圖像的顯示部；部位判定部，其在顯示於上述 顯示部的拍攝圖像中設定調查區域；分析部，其對與上述調查區域相關的圖像和設定中的 至少一方進行分析；以及檢索部，其通過使用上述分析部的分析結果來參照資料庫，尋求上 述調查區域的圖像的不良情況的因素。
[0009] 此外，本發明的顯示方法具備以下步驟：顯示步驟，顯示圖像；部位判定步驟，在 顯示於上述顯示部的拍攝圖像中設定調查區域；分析步驟，對與上述調查區域相關的圖像 和設定中的至少一方進行分析；以及檢索步驟，通過使用上述分析部的分析結果來參照數 據庫，尋求在上述調查區域的圖像的拍攝或觀察時產生的不良情況的因素，並從資料庫中 確定顯不用?η息。
[0010] 根據參照附圖的以下描述，本發明的上述及其他目標、特徵和優點將被更清楚地 理解。

【專利附圖】

【附圖說明】
[0011] 圖1是示出本發明一個實施方式的拍攝設備的框圖。
[0012] 圖2Α和圖2Β是用於說明失敗DB19a的內容的說明圖。
[0013] 圖3是用於說明尋求有關拍攝狀態的不滿因素的方法的流程圖。
[0014] 圖4A和圖4B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0015] 圖5是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0016] 圖6是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0017] 圖7是用於說明尋求有關拍攝狀態的不滿因素的方法的流程圖。
[0018] 圖8A和圖8B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0019] 圖9A和圖9B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0020] 圖10A和圖10B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0021] 圖11是用於說明尋求有關拍攝狀態的不滿因素的方法的流程圖。
[0022] 圖12A和圖12B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0023] 圖13A和圖13B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0024] 圖14是用於說明尋求有關拍攝狀態的不滿因素的方法的流程圖。
[0025] 圖15A和圖15B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0026] 圖16A和圖16B是用於說明尋求有關拍攝狀態的不滿因素的方法的說明圖。
[0027] 圖17是用於說明照相機控制的流程圖。
[0028] 圖18是具體示出圖17中的意圖判定處理的流程圖。
[0029] 圖19是用於說明用戶對調查區域的指定的說明圖。
[0030] 圖20A?圖20E是示出操作輔助顯示的說明圖。

【具體實施方式】
[0031] 下面，參照附圖詳細說明本發明的實施方式。
[0032] 圖1是示出本發明一個實施方式的拍攝設備的框圖。在本實施方式中，通過在記 錄部等中設置與用戶可能對拍攝圖像感到不滿的圖像的特徵以及拍攝參數的設定相關的 資料庫（失敗資料庫），能夠向用戶提示圖像不良情況的因素，並且，能夠有效地輔助用於 得到認為是用戶所期望的拍攝圖像的拍攝參數設定的方式。由此，在拍攝時能夠喚起注意 是再次拍攝好、還是下次留意點好。這假定了以下情況：不是僅單純地優化圖像的外觀，還 通過對在拍攝時產生的不良情況具體化地進行說明和建議，來解決由於用戶可解決的拍攝 操作以及伴隨拍攝操作的控制而引起的不良情況。當然還能夠應用於觀察裝置，也可以應 用於在實時取景圖像上進行觸摸、從而出現容易觀看的建議那樣的用途。
[0033] 在拍攝被攝體時，作為所得到的圖像畫質等，拍攝結果大多與看到的、以及感覺到 的不同（存在不恰當因素），但拍攝設備中的拍攝參數較多，初學者有時無法立即判斷能夠 通過怎樣的操作得到怎樣的效果，從而即使進行錯誤的操作且一直保持該狀態，也注意不 到而且也不知道對策的狀況較多。
[0034] 本實施方式中的拍攝設備1由主體部10和更換鏡頭20構成。主體部10收納拍 攝設備1的主要的電路部分，在前面拆裝自如地安裝有更換鏡頭20。
[0035] 更換鏡頭20在鏡筒22內具有將被攝體像引導至主體部10的攝像部12的光路部 21。光路部21在從物體側至攝像部12的攝像面（像面）的光軸上配置未圖示的多個鏡頭 而構成。即，在光路部21中，具有可以移動以通過焦點對準而設定為對焦狀態的對焦鏡頭 和在對焦狀態下進行變倍的變焦鏡頭。此外，光路部21具有驅動這些鏡頭和光圈的焦點控 制部21a、變焦控制部21b和光圈機構部21c。
[0036] 焦點控制部21a和變焦控制部21b被驅動部24控制，從而控制這些對焦鏡頭和變 焦鏡頭。此外，光圈機構部21c被光圈控制部25控制，從而驅動未圖$的光圈。光圈例如 配置於光路部21的規定的鏡頭之間。
[0037] 在鏡筒22中，為了由用戶進行與拍攝相關的參數、例如與變焦以及光圈相關的參 數的設定操作，設置有操作環22a。操作檢測部27檢測針對操作環22a的用戶操作並將檢 測結果輸出到控制部23。控制部23由微型計算機等構成，根據操作檢測部27的檢測結果 以及來自後述的主體部10的信號處理和控制部11的信號，控制各部。
[0038] 控制部23的驅動控制部23a依照操作檢測部27的檢測結果以及信號處理和控制 部11的控制而生成各種控制信號。例如驅動控制部23a產生對焦信號和變焦信號，從而控 制驅動部24。此外，驅動控制部23a產生光圈控制信號，從而控制光圈控制部25。
[0039] 驅動部24根據對焦信號來驅動控制焦點控制部21a，根據變焦信號來驅動控制變 焦控制部21b。此外，光圈控制部25根據光圈控制信號來驅動控制光圈機構部21c。
[0040] 焦點控制部21a將與鏡頭的位置對應的信號輸出到鏡頭位置判定部26。此外，變 焦控制部21b將與變焦鏡頭的位置（變焦位置）對應的信號輸出到鏡頭位置判定部26。鏡 頭位置判定部26判定焦點位置和變焦位置並將判定結果輸出到控制部23。控制部23使用 焦點位置和變焦位置的判定結果來控制驅動部24,使得成為與旋轉操作以及來自信號處理 和控制部11的控制信號對應的焦點位置和變焦位置。
[0041] 在更換鏡頭20中設置有通信部28。此外，在主體部10中設置有通信部13。通信 部28經由規定的傳送路徑，與主體部10的通信部13之間進行信息的收發。控制部23在 建立了與主體部10的通信部13之間的通信後，能夠通過通信部28、13將記錄部29所存儲 的鏡頭固有的信息、與變焦操作相關的信息、焦點位置以及光圈狀態等信息作為鏡頭信息 發送到主體部10。
[0042] 另外，鏡頭信息中包含有當前的焦距、F值等的表，還包含與變焦狀態對應的最短 焦距、無限遠距離等的表。根據鏡頭信息，主體部10能夠識別更換鏡頭20具有怎樣的變焦 功能，並識別變焦鏡頭的焦距範圍（倍率）、焦距、最短焦距、無限遠距離、亮度值等。此外， 控制部23還將操作檢測部27的檢測結果信息發送到主體部10。
[0043] 構成拍攝設備1的主體部10具有由(XD或CMOS傳感器等攝像元件構成的攝像部 12。攝像部12對來自設置於主體部10的前表面的更換鏡頭20的被攝體像進行光電轉換 而得到拍攝圖像。攝像部12由信號處理和控制部11進行驅動控制，並輸出拍攝圖像。另 夕卜，作為攝像部12的攝像元件，還可以採用除了用於圖像構成的攝像用像素（通常像素） 以外，還構成有焦點檢測用的像素（以下稱作AF像素）的攝像元件。
[0044] 信號處理和控制部11例如由CPU等構成並控制拍攝設備1的各部。信號處理和 控制部11向攝像部12輸出攝像元件的驅動信號，並且讀出來自攝像部12的拍攝圖像。信 號處理和控制部11對所讀出的拍攝圖像進行規定的信號處理，例如顏色調整處理、矩陣轉 換處理、噪聲去除處理及其他各種信號處理。攝像部12的輸出中有時還包含來自AF像素 的像素信號，該情況下，信號處理和控制部11能夠使用AF像素的輸出進行用於對焦控制的 運算。
[0045] 主體部10中還配置有時鐘部14和操作判定部15。時鐘部14產生信號處理和控 制部11使用的時間信息。操作判定部15產生基於針對操作部的用戶操作的操作信號，並 輸出到信號處理和控制部11，上述操作部包含設置於主體部10的未圖示的釋放按鈕、功能 按鈕和拍攝模式設定等的各種開關等。信號處理和控制部11根據操作信號來控制各部。
[0046] 信號處理和控制部11能夠進行與拍攝圖像的記錄和再現相關的處理。例如，信號 處理和控制部11能夠對信號處理後的拍攝圖像進行壓縮處理，並將壓縮後的圖像提供給 記錄部19使其進行記錄。作為記錄部19,可採用例如卡接口，記錄部19能夠將圖像信息和 聲音信息等記錄到存儲卡等記錄介質中。
[0047] 在本實施方式中，在記錄部19中記錄有後述的失敗資料庫（DB) 19a。此外，記錄 部19保持用於尋求後述的不滿因素的各種判定結果。此外，在記錄部19中還記錄有與用 於消除不滿因素的操作輔助相關的信息（操作輔助信息）。
[0048] 信號處理和控制部11的顯示控制部11a執行與顯示相關的各種處理。顯示控制 部11a能夠將信號處理後的拍攝圖像提供給顯示部17和目鏡顯示部18。顯示部17和目鏡 顯示部18具有IXD等的顯示畫面，顯示從顯示控制部11a提供的圖像。此外，顯示控制部 11a還能夠使顯示部17和目鏡顯示部18進行各種菜單顯示等。
[0049] 信號處理和控制部11能夠讀出記錄部19中所記錄的拍攝圖像並進行解壓縮處 理。顯示控制部11a能夠通過將解壓縮處理後的拍攝圖像提供給顯示部17和目鏡顯示部 18,來進行記錄圖像的再現。
[0050] 如後所述,顯示部17具有顯示拍攝圖像的顯示畫面17b(參照圖19)。此外，在顯 示畫面17b上設置有觸摸面板17a。觸摸面板17a能夠產生與用戶用手指指示的顯示畫面 17b上的位置對應的操作信號。該操作信號被提供給信號處理和控制部11。由此，在用戶 在顯示畫面17b上進行了觸摸或進行了滑動時，信號處理和控制部11能夠檢測用戶的觸摸 位置、閉合分開手指的操作（捏合操作，pinch)、滑動操作、以及通過滑動操作到達的位置、 滑動方向、進行觸摸的期間等各種操作，從而能夠執行與用戶操作對應的處理。
[0051] 另外，顯示部17配置成佔據主體部10的例如背面的大致整個範圍，拍攝者在拍攝 時能夠確認顯示在顯示部17的顯示畫面17b上的實時取景圖像，還能夠一邊確認實時取景 圖像一邊進行拍攝操作。
[0052] 在主體部10中設置有被攝體檢測部16。被攝體檢測部16通過針對拍攝圖像的公 知方法，從拍攝圖像中進行被攝體檢測處理。例如，被攝體檢測部16能夠通過對將面部的 明亮度特徵進行模型化後的多個濃淡圖像和拍攝圖像依次進行比較，檢測人的面部。此外， 被攝體檢測部16不僅能夠檢測人的面部，還能夠檢測人的整個身體。而且，被攝體檢測部 16例如還能夠通過模式判定，檢測寵物及特定物體的被攝體、或者其一部分等的區域。
[0053] 在本實施方式中，為了輔助用戶的拍攝參數設定，在信號處理和控制部11中設置 有部位判定部lib、圖像和設定分析部（圖像分析部）11c、檢索部lid和拍攝輔助部lie。 另外，圖像和設定分析部（圖像分析部）11c可以僅分析圖像，也可以分析包含影響到圖像 和畫質的焦點及曝光對準的位置在內的設定、和拍攝參數的設定變得怎樣。
[0054] 部位判定部lib與被攝體檢測部16協作，判定用戶所指定的部位。例如在用戶通 過觸摸面板17a的觸摸操作等指定了拍攝圖像中的特定區域或被攝體時，部位判定部lib 判定與用戶的觸摸位置對應的拍攝圖像中的被攝體區域（以下稱作調查區域）並輸出判定 結果。另外，部位判定部lib也可以在用戶通過針對觸摸面板17a的滑動操作等指定了區 域時，將該區域設為調查區域。
[0055] 圖像和設定分析部11c以及檢索部lid估計用戶可能對拍攝圖像感到不滿的因素 (以下簡單稱作不滿因素）。圖像和設定分析部11c對部位判定部lib判定出的調查區域 進行圖像和設定的分析，從而得到分析結果。檢索部lid通過根據圖像和設定分析部11c 的分析結果來檢索失敗資料庫（DB)，尋求不滿因素。該失敗資料庫（資料庫）依據照在相 機出貨時的工序中的寫入、或照相機經由網絡進行了通信後的結果，將根據分析出的圖像 的狀態和位置等，將在理論上應與該圖像的特徵關聯的拍攝時的因素置換為照相機的操作 和設定而得到的關係記錄到記錄部中。
[0056] 失敗資料庫19a設定曝光、顏色、焦點、抖動這4個因素作為不滿因素，並存儲與用 於確定這些因素的圖像特徵相關的信息。即，圖像和設定分析部11c通過圖像和設定的分 析來尋求關於調查區域的圖像特徵，檢索部lid根據尋求出的圖像特徵來檢索失敗資料庫 19a，由此尋求表示在圖像中存在怎樣的不良情況（能夠通過圖像取得時的用戶操作來採 取對策的不良情況）的不滿因素。如前所述，該失敗資料庫（資料庫）依據在照相機出貨 時的工序中的寫入、或照相機經由網絡進行了通信後的結果，將根據分析出的圖像的狀態 和位置等，將在理論上應與該圖像的特徵關聯的拍攝時的因素置換為照相機的操作和設定 而得到的關係記錄到記錄部中。作為圖像的特徵，檢測光電轉換結果的等級和平衡，像素間 和區域間的差異等即可，這些圖像特徵難以由人通過目視測定，但利用照相機內的信號分 析是容易測定的。當然，也可以將解像感或對比度等更高精度的判定添加到因素中。該情 況下，壓縮率、有效像素數和像素相加等也變為因素。根據照相機的設定，對比度調整和伽 馬轉換等圖像處理的施加方法等也可能成為判定要素。考慮將這些圖像特徵、畫質等置換 成操作需要經驗、知識以及對應於狀況的複雜判斷，但在該資料庫中預先進行那樣的基於 知識的關聯，給出照相機所具有的且用戶容易理解的建議。一般作為初學者的用戶無法理 解照相機內的設定、運算和處理等，但只要置換為用戶的操作，則理解變得容易，從而能夠 進行接下來的行為。檢索部根據用戶指定的位置的圖像的特徵，從該資料庫中進行檢索，具 有將基於用於消除因此而尋求出的失敗等不恰當因素的操作輔助信息的操作輔助顯示進 行顯示的拍攝輔助部非常有意義，從而成為方便用戶的設備。
[0057] 估計出的不滿因素的信息被提供給拍攝輔助部lie。拍攝輔助部lie根據檢測到 的不滿因素，向用戶提供用於去除該不滿因素的信息。例如，拍攝輔助部lie可以通過讀出 記錄部19中所記錄的信息並提供給顯示控制部11a，進行用於按照每個不滿因素來輔助恰 當的操作的操作輔助顯示。
[0058] 圖2A和圖2B是用於說明失敗DB19a的內容的說明圖。圖2A示出了部分判定用 資料庫，圖2B示出了整體判定用資料庫。圖2A和圖2B利用圓形記號示出了判定不滿因素 的圖像特徵。當然，也可以將解像感或對比度等更高精度的判定也作為圖像的特徵添加到 因素中。
[0059] 圖2A和圖2B尋求曝光、顏色、焦點、抖動作為不滿因素，作為要判定的圖像特徵， 分開記述為部分特徵和圖像整體的特徵。另外，圖像特徵不僅包含通過圖像分析得到的特 徵，還包含通過參數設定得到的特徵。圖2A和圖2B的圓形記號表示在分析結果與各圖像 特徵的項目中的哪一個匹配的情況下設為不滿因素。例如關於抖動，根據分析結果，在運動 矢量、對比度、手抖校正的打開關閉以及快門速度中的任意1個存在不良情況時，表示存在 抖動的不滿因素。即，該不良情況能夠喚起用戶的注意，從而可通過再次操作來挽回。
[0060] 接著，參照圖3至圖16B說明各不滿因素的檢測。圖3、圖7、圖11、圖14是用於 說明尋求有關拍攝狀態的不滿因素的方法的流程圖，圖4A、圖4B、圖5、圖6、圖8A、圖8B、圖 9A、圖 9B、圖 10A、圖 10B、圖 12A、圖 12B、圖 13A、圖 13B、圖 15A、圖 15B、圖 16A、圖 16B 是其 說明圖。
[0061] 圖3示出了檢測與顏色相關的不滿的情況下的流程圖。圖像和設定分析部11c在 圖3的步驟S1中，針對調查區域判定作為拍攝圖像的成分的RGB中的任意一個是否飽和， 並將判定結果記錄到記錄部19 (步驟S2)。此外，圖像和設定分析部1 lc在步驟S3中，針對 調查區域判定作為拍攝圖像的成分的RGB中的任意一個是否為閾值以下的等級，並將判定 結果記錄到記錄部19 (步驟S4)。
[0062] 圖4A、圖4B和圖5是用於說明圖像和設定分析部11c進行的與顏色的不滿相關的 圖像分析的圖。圖4A示出了拍攝圖像31，示出了在拍攝圖像31中拍攝有花的圖像32和人 物的圖像33。拍攝圖像31在顯示部17的顯示畫面17b上進行實時取景圖像顯示。圖4B 在橫軸取與拍攝圖像31的水平位置對應的位置、縱軸取拍攝圖像31中的水平線A上的像 素的像等級，示出了水平線A上的各像素的R、G、B成分的等級。
[0063] 在圖4B的例子中，像等級取0?255的分級性等級。圖4B的例子示出了在拍攝 圖像31中的花的圖像32的部分中，R成分的等級飽和。圖像和設定分析部11c在檢測到 圖4B的狀態時，記錄判定為飽和且為不良情況的判定結果。
[0064] 此外，圖5通過與圖4B相同的顯示方法，示出了在拍攝圖像31中的花的圖像32 的部分中，R成分的等級不足而變為了噪聲等級。圖像和設定分析部11c在檢測到圖5的 狀態時，記錄判定為RGB成分中的任意一個不足且為不良情況的判定結果。對於噪聲等級 也可以採用以下的判定方式，即用戶可允許的等級可能發生變化，例如將閾值設定為飽和 等級的1/100等，並判定是否比閾值低。能夠將噪聲等級也稱作圖像的特徵、像素信號的特 徵。
[0065] 在下一步驟S5中，圖像和設定分析部11c檢測當前的色溫設定是否與基於自動設 定的最優色溫Μ有比較大程度的不同。色溫的設定給圖像整體帶來影響。圖像和設定分析 部11c例如判定由用戶設定的當前的色溫設定與通過自動設定得到的最優色溫設定之差 是否超過了規定的閾值，並將判定結果記錄到記錄部19 (步驟S6)。
[0066] 圖6是用於說明色溫設定的說明圖。圖6的箭頭示出了當前的色溫設定值（設定 色溫）和基於自動設定的最優色溫（自動設定色溫）。圖6的例子示出了用戶的設定色溫 是4000K、且自動設定色溫是12000K，此時，圖像和設定分析部11c判定為色溫設定與最優 色溫設定偏差較大且為不良情況，並記錄該判定結果。這些不良情況還能夠通過改變觀察、 拍攝時的設定而得到改善。
[0067] 圖7示出了檢測與曝光相關的不滿的情況下的流程圖。圖像和設定分析部11c在 圖7的步驟S11中，針對調查區域判定拍攝圖像的亮度值是否飽和，並將判定結果記錄到記 錄部19 (步驟S12)。此外，圖像和設定分析部11c在步驟S13中，針對調查區域判定拍攝圖 像的亮度值是否為閾值以下的等級，並將判定結果記錄到記錄部19 (步驟S14)。
[0068] 圖8A、圖8B、圖9A和圖9B是用於說明圖像和設定分析部11c進行的與曝光的不 滿相關的圖像分析的圖。圖8A、圖9A示出了與圖4A相同的拍攝圖像31，圖8B、圖9B在橫 軸取與拍攝圖像31的水平位置對應的位置、縱軸取拍攝圖像31中的水平線A上的像等級， 示出了水平線A上的各像素的亮度等級。
[0069] 在圖8B的例子中，像等級取0?255的分級性等級。圖8B的例子示出了在拍攝 圖像31中的花的圖像32的部分中，亮度等級飽和。圖像和設定分析部11c在檢測到圖8B 的狀態時，記錄針對調查區域判定為曝光過多且為不良情況的判定結果。
[0070] 此外，圖9B的例子示出了在拍攝圖像31中的花的圖像32的部分中，亮度等級不 足。圖像和設定分析部11c在檢測到圖9B的狀態時，記錄針對調查區域判定為曝光過少且 為不良情況的判定結果。
[0071] 在下一步驟S15中，圖像和設定分析部11c進行直方圖判定並將判定結果記錄到 記錄部19 (步驟S16)。直方圖表示圖像整體的亮度分布，圖像和設定分析部11c例如判定 在直方圖中是否存在偏斜。
[0072] 圖10A和圖10B是用於說明使用了直方圖的圖像整體的亮度判定的說明圖，橫軸 取0?255個等級的亮度值且縱軸取像素數而示出了直方圖。圖10A示出整體過暗的圖像， 圖10B示出整體過亮的圖像，在這些情況下記錄表示判定為不良情況的判定結果。還可以 將這些色溫等的平衡和直方圖等的分布也稱作圖像的特徵。此外，這樣11c不是單純地觀 察畫質（圖像的特徵），還分析設定點、進行了控制的點以及用戶在意的點的差異等，因此 不是簡單地記載為圖像分析部，而是記載為圖像和設定分析部。例如在進行了對準到畫面 內中央來進行曝光的控制時，可能做出不能對準到除此以外的部分來進行曝光的判定。這 樣的判斷有簡單的優點，可以說在沒有差錯地通知給用戶的方面是有意義的。當然，在判定 為畫面內有面部，並將曝光和顏色對準到面部處的照相機中，還存在面部部分和除此以外 的部分這樣的圖像特徵的判定方法。
[0073] 圖11示出了檢測與焦點相關的不滿的情況下的流程圖。圖像和設定分析部11c 在圖11的步驟S21中，針對調查區域，通過與其周邊的比較來判定對比度是否低於規定的 閾值，並將判定結果記錄到記錄部19 (步驟S22)。此外，圖像和設定分析部11c在步驟S23 中，針對調查區域判定通過相位差法求出的散焦量即2像間距離是否大於規定的閾值，並 將判定結果記錄到記錄部19 (步驟S24)。
[0074] 圖12A、圖12B、圖13A和圖13B是用於說明圖像和設定分析部11c進行的與焦點 的不滿相關的圖像分析的圖。圖12A、圖13A示出了與圖4A相同的拍攝圖像31，圖12B在 橫軸取與拍攝圖像31的水平位置對應的位置、縱軸取拍攝圖像31中的水平線A上的對比 度值，示出了水平線A上的對比度的變化，圖13B在橫軸取與拍攝圖像31的水平位置對應 的位置、縱軸取拍攝圖像31中的水平線A上的2像間距離，示出了水平線A上的焦點偏移 的變化。
[0075] 圖12B的例子示出了在拍攝圖像31中的花的圖像32的部分中，對比度比閾值低。 圖像和設定分析部11c在檢測到圖12B的狀態時，記錄判定為對比度低、且焦點未對準調查 區域的不良情況的判定結果。
[0076] 此外，圖13B的例子示出了在拍攝圖像31中的花的圖像32的部分中焦點偏移。圖 像和設定分析部11c在檢測到圖13B的狀態時，記錄針對調查區域判定為焦點偏離的不良 情況的判定結果。
[0077] 在下一步驟S25中，圖像和設定分析部11c進行與基於自動對焦的對焦設定值之 差的判定並將判定結果記錄到記錄部19 (步驟S26)。圖像和設定分析部11c判定當前的 對焦量與自動對焦設定值之差是否大於規定的閾值，在大於規定的閾值的情況下，判定為 圖像整體焦點偏移而將不良情況的判定結果記錄到記錄部19 (步驟S26)。該對焦量也可 以使用對準焦點的距離差異、焦點對準用鏡頭的停止位置差異、以及相位差AF時的相位差 等。此外，根據鏡頭的特性、光圈值和被攝體，該值可能適當發生變化，但也可以切換利用考 慮到這些因素的規定值，或進行用戶的設定。此外，還可以考慮畫面內的焦點對準點與判定 點的差異、或者與設定相關的差異。這樣圖像和設定分析部11c不是單純地觀察畫質，還分 析設定點、進行了控制的點以及用戶在意的點的差異等，因此不是簡單地記載為圖像分析 部，而是記載為圖像和設定分析部。例如在進行了將焦點對準到畫面內中央的控制時，容易 簡單地判定為不能將焦點對準到周邊，可以說在用其中一個方式沒有差錯地通知給用戶方 面是有意義的。該情況下，也可以將與焦點對準位置之間的位置差判定為圖像的特徵。當 然，在判定為畫面內存在面部，並將焦點對準到面部處的照相機中，還存在面部的部分和除 此以外的部分的圖像特徵的判定方法。
[0078] 圖14示出了檢測與抖動相關的不滿的情況下的流程圖。圖像和設定分析部11c在 圖14的步驟S31中判定快門速度是否長於規定的閾值，並將判定結果記錄到記錄部19 (步 驟S32)。此外，圖像和設定分析部11c在步驟S33中判定手抖校正功能是否關閉，並將判定 結果記錄到記錄部19 (步驟S34)。
[0079] 而且，圖像和設定分析部11c在步驟S35中判定針對調查區域的運動矢量是否大 於規定的閾值，並將判定結果記錄到記錄部19 (步驟S36)。此外，圖像和設定分析部11c在 步驟S37中判定針對圖像整體的平均運動矢量是否大於規定的閾值，並將判定結果記錄到 記錄部19 (步驟S38)。
[0080] 圖15A、圖15B、圖16A和圖16B是用於說明圖像和設定分析部11c進行的與抖動 的不滿相關的圖像分析的圖。圖15A、圖16A示出了與圖4A相同的拍攝圖像31，圖15B、圖 16B在橫軸取與拍攝圖像31的水平位置對應的位置、縱軸取拍攝圖像31中的水平線A上的 像等級，示出了水平線A上的運動矢量的變化。
[0081] 在圖15B的例子，示出了在拍攝圖像31中的花的圖像32的部分中運動矢量比閾 值大。圖像和設定分析部lie在檢測到圖15B的狀態時，記錄針對調查區域判定為運動矢 量較大、且成為存在抖動的圖像的判定結果。
[0082] 此外，圖16B的例子示出了在拍攝圖像31中的花的圖像32的部分和人物的圖像 33的部分中運動矢量比閾值大。圖像和設定分析部11c在檢測到圖16B的狀態時，記錄針 對圖像整體判定為運動矢量較大、且成為存在抖動的圖像的判定結果。該運動矢量不需要 是在動態圖像拍攝等中使用的嚴格的運動矢量，而可以是利用了兩個圖像（幀）間的對比 度的差異以及變化的值。在更長的曝光等中像流動，可以根據分布的特徵分析在規定的方 向上是否存在像的流動。例如在某個方向上縮放、對比度上升那樣的情況下，能夠認為圖像 抖動，這也是圖像的特徵，能夠進行分析。可以將其稱作畫面內的圖像的變化方向的分析。 特別是圖像內不是一律都為對象物的移動引起的被攝體抖動，而是用戶應注意的手抖等的 可能性高。當然也可以分離判定這些抖動。此外，根據被攝體和拍攝條件，該值可能適當發 生變化，但能夠切換利用考慮到這些因素的規定值，或者進行用戶的設定。例如，作為閾值， 可以用在幾像素內對比度位置是否發生偏移來進行判定等。還存在移攝等有意使背景抖動 的拍攝，可以進行與畫面內的位置及拍攝方法（根據施加到設備的加速度等進行判定）、背 景判定、主被攝體判定等對應的判斷。能夠將這些也稱作圖像的特徵、圖像間的特徵。當 然，在判定為畫面內存在面部並對面部進行拍攝控制的照相機中，還存在檢測面部的部分、 並將除其以外的部分作為背景這樣的圖像特徵的判定方法。
[0083] 另外，示出了在步驟S37中在圖像整體的抖動檢測中使用運動矢量的例子，但也 可以利用其他方法、例如對比度判定。例如在水平的一個方向上對在水平方向上存在抖動 的圖像進行壓縮時，該圖像部分的對比度有時會增加。能夠通過利用該方法在水平的一個 方向上對圖像進行壓縮，來進行圖像整體的抖動檢測。
[0084] 接著，參照圖17至圖20E說明這樣構成的實施方式的動作。圖17是用於說明照 相機控制的流程圖，圖18是具體示出圖17中的意圖判定處理的流程圖。此外，圖19是用 於說明用戶對調查區域的指定的說明圖。
[0085] 在接通拍攝設備1的電源後，信號處理和控制部11在圖17的步驟S41中判定是 否指示了拍攝模式。在未指示拍攝模式的情況下，信號處理和控制部11在步驟S42中判定 是否指示了再現模式。在指示了再現模式時，信號處理和控制部11在步驟S43中進行縮略 圖的一覽顯示。當用戶參照縮略圖一覽選擇了圖像時，將處理從步驟S44轉移到步驟S45， 信號處理和控制部11進行選擇圖像的再現。當再現結束後（步驟S46)，重複進行文件一覽 顯示。在未進行文件選擇的情況下，在步驟S47中判定再現模式的結束。
[0086] 另一方面，當指示了拍攝模式時，信號處理和控制部11在步驟S51中，基於來自攝 像部12的圖像信號，在顯示部17上實時取景顯示拍攝圖像（實時取景圖像）。信號處理和 控制部11在步驟S52中設定各種拍攝參數，在步驟S53中根據拍攝圖像判定運動矢量。 [0087] 在步驟S54中判定是否進行了拍攝操作。例如在通過釋放按鈕操作等指示了靜態 圖像拍攝時，信號處理和控制部11在步驟S55中進行拍攝。即，信號處理和控制部11在對 來自攝像部12的拍攝圖像實施了信號處理並進行了壓縮後，提供給記錄部19進行記錄。 此外，在步驟S55中，與拍攝同時，還將拍攝參數記錄到記錄部19中。而且，還通過圖像和 設定分析部11c進行各部件的相位AF數據（2像間距離）和運動矢量的記錄（步驟S56)。 接著，信號處理和控制部11將所記錄的拍攝圖像提供給顯示部17進行記錄瀏覽顯示（步 驟 S57)。
[0088] 在本實施方式中，在接下來的步驟S58中，進行用戶的意圖判定。圖18示出了圖 17中的意圖判定處理的一個例子，首先在步驟S61中進行由部位判定部lib進行的調查區 域的判定。
[0089] 圖19示出了基於顯示畫面17b的記錄瀏覽顯示的拍攝圖像31。拍攝圖像31中包 含花的圖像32和人物的圖像33。當然設為用戶對花的圖像32的拍攝結果存在不滿。用戶 自身不知道不滿的原因，也不知道其解決方法。此時，本實施方式通過由用戶指定對拍攝結 果存在不滿的圖像部分，能夠提示帶來不滿的因素及其解決方法。另外，用戶也可以指定存 在不滿的圖像部分或圖像整體。
[0090] 例如，用戶對拍攝圖像31中的存在不滿的圖像部分進行觸摸操作。例如圖19所 示，觸摸花的圖像32的部分。部位判定部lib使用用戶的觸摸操作和被攝體檢測部16的 檢測結果，檢測出用戶對花的圖像32的拍攝結果存在不滿，並將花的圖像部分設定為調查 區域。
[0091] 接著，圖像和設定分析部（也稱作圖像分析部、圖像的特徵分析部）11c依次執行 關於顏色的不滿檢測（步驟S62)、關於曝光的不滿檢測（步驟S63)、關於焦點的不滿檢測 (步驟S64)、關於抖動的不滿檢測（步驟S65)。步驟S62?S65的處理中例如採用圖3、圖 7、圖11、圖14的流程。
[0092] 檢索部lid使用步驟S62?S65的不滿檢測處理的檢測結果來檢索失敗資料庫 19a，估計不滿因素。例如在圖2A和圖2B所示的失敗資料庫19a的例子中，在產生了調查 區域的亮度等級的飽和或不足、圖像整體的直方圖的偏斜中的任意一種情況的情況下，估 計為用戶的不滿因素是曝光狀態不良。另外，不滿因素不限於1個。優選這樣的不滿因素 能夠在拍攝和觀察時通過用戶操作進行改善和挽回。
[0093] 拍攝輔助部lie根據由檢索部lid檢索到的不滿因素，向用戶提供用於去除該不 滿因素的信息。例如拍攝輔助部lie控制顯示控制部11a，進行輔助用於得到恰當圖像的操 作的操作輔助顯示。
[0094] 圖20A?圖20E是示出該情況下的操作輔助顯示的說明圖。圖20A示出了不滿因 素顯示。拍攝輔助部lie在顯示部17的顯示畫面17b上進行表示不滿因素的不滿因素顯 示。在圖20A的例子中，通過因素顯示部（因素圖標）41a?41d的顯示色的不同等，示出了 檢測到考慮為不滿因素的顏色、曝光、焦點和抖動中的哪個不滿因素。在圖20A的例子中， 通過用斜線示出的顏色的差異，示出了檢測到曝光是不滿因素。
[0095] 用戶為了想得知用於消除不滿因素的操作，對示出想消除的不滿因素的因素顯示 部41b進行觸摸操作。由此，拍攝輔助部lie進行圖20B所示的操作輔助詳細顯示（輔助 圖標）42a、42b。圖20B示出了與曝光相關的顯示，操作輔助詳細顯示（輔助圖標）42a促使 用戶進行程序（P)模式下的拍攝，操作輔助詳細顯示（輔助圖標）42b促使用戶進行曝光校 正。
[0096] 另外，在程序模式中，例如關於ISO、快門速度、光圈等由信號處理和控制部11進 行自動設定。通過由用戶對顯示42a進行觸摸操作，信號處理和控制部11設定程序模式。 [0097] 此外，在操作輔助詳細顯示42b上還顯示用於曝光校正的按鈕顯示42c，通過由用 戶觸摸按鈕顯不42c的+標記或一標記，信號處理和控制部11使曝光朝+方向或一方向發 生變化。
[0098] 由此，即使在用戶不知道關於拍攝圖像的不滿原因，也不知道其解決方法的情況 下，也能夠通過對存在不滿的圖像部分進行觸摸操作，來顯示不滿因素，進而提示用於消除 不滿的設定方法，從而使用於消除不滿的操作簡單化。能夠不用記住拍攝設備的複雜功能、 和用於實現該功能的菜單的操作方法等而比較簡單地進行期望的拍攝。
[0099] 另外，圖20C示出了與焦點相關的顯示。操作輔助詳細顯示（輔助圖標）43a促使 用戶進行自動對焦（AF)模式下的拍攝，操作輔助詳細顯示（輔助圖標）43b促使用戶進行 手動對焦（MF)模式下的拍攝。
[0100] 此外，圖20D示出了與顏色相關的顯示。操作輔助詳細顯示（輔助圖標）44a促使 用戶進行曝光校正，操作輔助詳細顯示（輔助圖標）44b促使用戶進行色溫的設定。此外， 圖20E示出了與抖動相關的顯示。操作輔助詳細顯示（輔助圖標）45a促使用戶起動手抖 校正，操作輔助詳細顯示（輔助圖標）45b促使用戶設定快門速度優先。另外，圖20E利用 斜線例如示出了灰色顯示，示出了手抖校正已經打開、用戶無法進行選擇的情況。
[0101] 通過由用戶對操作輔助詳細顯示（輔助圖標）43a?45a、43b?45b進行觸摸操 作，信號處理和控制部11轉移到能夠進行對應的模式等的設定的狀態。在用戶有意進行了 主設定的情況下，可以通過用手指輕彈圖標，進行指示的取捨選擇和取消。此外，當在用戶 熟悉的操作的情況下出現輔助圖標時，有時難以觀察畫面而令人厭煩，因此這樣的設置比 較重要。可以使得被輕彈幾次的圖標不出現，也可以僅在必要時，通過開關操作來使圖標出 現。
[0102] 這樣在本實施方式中，使用用於確定用戶可能感到不滿的不滿因素的失敗數據 庫，針對用戶所指定的調查區域分析圖像的特徵和設定，並且檢索失敗資料庫，來自動檢測 不滿因素。由此，用戶能夠針對圖像可靠地識別出感到不滿的因素。而且，能夠通過用於解 決不滿因素的操作輔助顯示，提示用於得到用戶期望的圖像的操作方法，能夠以簡單的操 作進行用於得到期望的拍攝圖像的拍攝。在失敗資料庫中進行檢索的結果可以如圖所示， 也可以與各國語言對應。
[0103] 在高性能的拍攝設備中，拍攝參數比較多，各種因素都會產生影響，因此一般用戶 難以理解所拍攝的圖像的失敗原因和對策，但通過採用本實施方式，用戶能夠簡單地識別 用於得到期望的圖像的正確操作。
[0104] 並且，在本發明的各實施方式中，作為用於拍攝的設備，使用數位照相機進行了說 明，但是作為照相機，可以是數碼單反照相機和袖珍數位照相機，可以是攝像機、電影拍攝 機這樣的動態圖像用的照相機，並且當然可以是內置在行動電話或智慧型手機等便攜信息終 端PDA (Personal Digital Assistants:個人數字助理）等中的照相機。此外，還可以是內 窺鏡、顯微鏡那樣的產業用、醫療用的光學設備。即使不是拍攝設備，通過這樣的設置，能夠 提供用戶可準確地觀察到期望的圖像的觀察裝置、顯示裝置。例如在觀察裝置中，在應用到 出現容易觀察的建議那樣的用途的情況下，作為失敗資料庫，記錄顯示觀察裝置的操作指 南的顯示用信息即可。
[0105] 關於處理圖像那樣的至少二維分布的信息的設備，這樣的觸摸等的畫面指定操 作、位置指定操作等調查區域設定是對於用戶而言非常重要的項目。當然，除了觸摸判定以 夕卜，還可以用光標操作等代替該操作。此外，即使不是拍攝設備，而是拍攝的失敗判定用的 顯示設備中，判定這樣的圖像的特徵，向用戶給出下次拍攝時的啟示、教訓和建議的技術也 是比較重要的。此時，資料庫不需要位於設備內，可以採用能夠通過網絡檢索外部的伺服器 內的信息的結構。此時，可以設置按照照相機的設備種類、智慧型手機的設備種類的資料庫。 如果在這裡分析的圖像文件中包含了照相機的設定信息，則還能夠包含與焦點以及曝光的 控制對象位置相關的設定信息作為圖像的特徵。這裡可稱作圖像的特徵的項目有信號等 級、信號的平衡和分布、畫面內的圖案變化方向、像素時序的差異等。
[0106] 本發明不直接限定為上述各實施方式，在實施階段能夠在不脫離其主旨的範圍內 對結構要素進行變形並具體化。此外，能夠通過上述各實施方式公開的多個結構要素的適 當組合形成各種發明。例如，可以刪除實施方式所示的全部結構要素中的幾個結構要素。並 且，可適當組合不同實施方式的結構要素。
[0107] 另外，關於權利要求、說明書和附圖中的動作流程，即使為了方便，使用"首先"、 "接著"等進行了說明，但不是指必須按該順序進行實施。此外，對於構成這些動作流程的各 步驟，當然還能夠適當省略不影響發明本質的部分。
[0108] 此外，這裡說明的技術中的、主要以流程圖說明的控制和功能大多能夠通過程序 進行設定，能夠通過由計算機讀取並執行該程序而實現上述控制和功能。能夠將該程序的 整體或一部分記錄或存儲到作為電腦程式產品的軟盤、CD - ROM等、非易失性存儲器等 可移動介質，以及硬碟、易失性存儲器等存儲介質中，該程序能夠在產品出貨時，或者經由 可移動介質或通信線路進行流通或提供。使用者能夠通過經由通信網絡下載該程序並安裝 到計算機，或者從記錄介質中將該程序安裝到計算機，容易地實現本實施方式的拍攝設備。
【權利要求】
1. 一種拍攝設備，其特徵在於，具備： 攝像部，其拍攝被攝體而得到拍攝圖像； 顯示部，其顯示上述拍攝圖像； 部位判定部，其在顯示於上述顯示部的拍攝圖像中設定調查區域； 分析部，其對與上述調查區域相關的圖像和設定中的至少一方進行分析；以及 檢索部，其通過使用上述分析部的分析結果來參照預先設置的資料庫，尋求上述調查 區域的圖像的不良情況的因素。
2. 根據權利要求1所述的拍攝設備，其特徵在於， 上述拍攝設備具備拍攝輔助部，所述拍攝輔助部進行基於操作輔助信息的操作輔助顯 示，該操作輔助信息用於消除由上述檢索部尋求出的因素。
3. 根據權利要求1或2所述的拍攝設備，其特徵在於， 上述不良情況的因素是通過拍攝參數的設定變更而消除的圖像特徵。
4. 根據權利要求1或2所述的拍攝設備，其特徵在於， 上述部位判定部具備： 觸摸面板，其配置於上述顯示部；以及 被攝體檢測部，其檢測上述拍攝圖像中的被攝體。
5. 根據權利要求1或2所述的拍攝設備，其特徵在於， 上述調查區域還包含圖像整體。
6. 根據權利要求2所述的拍攝設備，其特徵在於， 上述拍攝輔助部使得通過針對上述操作輔助顯示的操作而顯示對應的拍攝參數的設 定畫面。
7. 根據權利要求3所述的拍攝設備，其特徵在於， 上述圖像特徵是進行了拍攝設備的拍攝控制的畫面內位置與調查區域的差異的特徵。
8. -種拍攝輔助方法，其特徵在於，具備以下步驟： 拍攝被攝體而得到拍攝圖像； 顯示上述拍攝圖像； 在所顯示的上述拍攝圖像中設定調查區域； 對與上述調查區域相關的圖像和設定中的至少一方進行分析而得到分析結果；以及 通過使用上述分析結果來參照預先設置的資料庫，尋求上述調查區域的圖像的不良情 況的因素。
9. 一種顯示裝置，其特徵在於，具備： 顯示圖像的顯示部； 部位判定部，其在顯示於上述顯示部的拍攝圖像中設定調查區域； 分析部，其對與上述調查區域相關的圖像和設定中的至少一方進行分析；以及 檢索部，其通過使用上述分析部的分析結果來參照資料庫，尋求上述調查區域的圖像 的不良情況的因素。
10. -種顯示方法，其特徵在於，具備以下步驟： 顯示步驟，顯示圖像； 部位判定步驟，在顯示於上述顯示部的拍攝圖像中設定調查區域； 分析步驟，對與上述調查區域相關的圖像和設定中的至少一方進行分析；以及 檢索步驟，通過使用上述分析部的分析結果來參照資料庫，尋求在上述調查區域的圖 像的拍攝或觀察時產生的不良情況的因素，並從資料庫中確定顯示用信息。
【文檔編號】H04N5/225GK104144285SQ201410188195
【公開日】2014年11月12日 申請日期:2014年5月6日 優先權日:2013年5月7日
【發明者】星野友宏 申請人:奧林巴斯株式會社