顯示模式控制裝置以及顯示模式控制方法

2023-08-13 18:22:36 4

專利名稱：顯示模式控制裝置以及顯示模式控制方法
技術領域：
本發明涉及顯示模式控制裝置以及顯示模式控制方法。
技術背景
作為該種技術，具有按照預先設定的期間或者時刻進行顯示部的顯示模式的控 制，降低具備該顯示部的顯示裝置的耗電量的顯示模式控制裝置。作為顯示部，例如有液晶 顯示器、有機EL(Organic Electro-Luminescence :0EL，電致發光)顯示器等。作為顯示裝 置，有將數碼照片等顯示在顯示部中的數碼照片架或者個人計算機等，顯示模式控制裝置 有時也是該顯示裝置自身。作為降低耗電量的顯示模式，例如有在顯示部中顯示屏幕保護 的省電模式。在這種省電模式下，例如在預先設定的期間內用戶未對顯示裝置進行操作的 情況下、或者在到達預先設定的時刻的情況下，進行例如使顯示部的顯示面變暗或者中斷 對顯示部的電源供給的控制，由此來實現省電化。
另外，在專利文獻1中公開了如下技術在顯示裝置的前面等設置的照度傳感器 感知顯示裝置周邊的亮度，基於該感知結果，在控制部判斷為明亮的情況下不進行顯示模 式控制，在控制部判斷為黑暗的情況下進行顯示模式控制。
然而，前者的技術存在如下問題在到達預先設定的期間或者時刻的情況下，即使 在用戶正在使用顯示裝置的時候，也進行顯示模式的控制，從而導致顯示部的顯示面變暗， 或者中斷對顯示部的電力供給。另外，後者的技術存在如下問題在用戶不在房間的白天， 在目光導致顯示裝置周邊明亮的情況下，不進行顯示模式的控制。這樣，現有技術進行了沒 有未考慮用戶行為的顯示模式控制，有時給用戶帶來麻煩。
專利文獻1日本特開2002-189450號公報發明內容
鑑於這種問題，本發明的目的在於，提供進行反映了用戶行為的顯示模式控制的 顯示模式控制裝置以及顯示模式控制程序。
本發明的第1觀點的顯示模式控制裝置，是控制顯示部的顯示模式的顯示模式控 制裝置，具備照明位置確定單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得 到的第1攝影圖像的第1攝影圖像數據，利用獲取的上述第1攝影圖像數據，確定分割上述 第1攝影圖像而得到的各個分割區域的亮度，基於確定的每個上述分割區域的上述亮度， 確定拍攝到上述第1攝影圖像中的照明的候補的上述分割區域的位置作為照明位置；和顯 示模式控制單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第2攝影圖 像的第2攝影圖像數據，利用獲取的上述第2攝影圖像數據和上述照明位置確定單元所確 定的上述照明位置，確定上述第2攝影圖像中的位於與上述照明位置對應的位置的上述分 割區域的亮度作為照明的亮度，基於所確定的上述照明的亮度，控制上述顯示模式。
本發明的第2觀點的顯示模式控制裝置，是控制顯示部的顯示模式的顯示模式控 制裝置，具備顯示模式控制單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的攝影圖像的攝影圖像數據，利用獲取的上述攝影圖像數據和預先設定的圖像內的預定 區域，確定上述攝影圖像中的與上述預定區域對應的位置的亮度作為照明的亮度，基於所 確定的上述照明的亮度，控制上述顯示模式。
本發明的第3觀點的顯示模式控制程序，使控制顯示部的顯示模式的計算機執 行照明位置確定步驟，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第1 攝影圖像的第1攝影圖像數據，利用獲取的上述第1攝影圖像數據，確定分割上述第1攝影 圖像而得到的各個分割區域的亮度，基於所確定的每個上述分割區域的上述亮度，確定拍 攝到上述第1攝影圖像中的照明的候補的上述分割區域的位置作為照明位置；和顯示模式 控制步驟，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第2攝影圖像的第 2攝影圖像數據，利用獲取的上述第2攝影圖像數據和在上述照明位置確定步驟中確定的 上述照明位置，確定上述第2攝影圖像中的位於與上述照明位置對應的位置的上述分割區 域的亮度作為照明的亮度，基於所確定的上述照明的亮度，控制上述顯示模式。
根據本發明的顯示模式控制裝置以及顯示模式控制程序，能夠進行反映了用戶行 為的顯示模式控制。


圖1是示出本發明的實施方式1所涉及的顯示模式控制裝置的各部分的關係的框 圖。
圖2是示出本發明的實施方式1所涉及的顯示模式控制裝置的硬體結構的圖。
圖3是從正面看本發明的實施方式1所涉及的顯示模式控制裝置而得到的正面 圖。
圖4是示出本發明的實施方式1所涉及的顯示模式控制裝置所進行的照明位置確 定處理的流程圖。
圖5(a)是示出由攝影圖像數據表現的第1攝影圖像的圖，(b)是示出分割成預定 的每個分割區域的第1攝影圖像的圖。
圖6(a)是示出攝影圖像數據和與其對應的圖像編號以及獲取時刻的數據結構的 圖，(b)是示出分割區域亮度數據的數據結構的圖，(c)是示出照明候補數據的數據結構的 圖，(d)是示出照明位置數據的數據結構的圖。
圖7是示出本發明的實施方式1所涉及的顯示模式控制裝置所進行的顯示模式控 制處理的流程圖。
圖8是示出本發明的實施方式1所涉及的顯示模式控制裝置所進行的點亮、熄滅 處理的流程圖。
圖9是示出本發明的實施方式1所涉及的顯示模式控制裝置所進行的熄滅、點亮 處理的流程圖。
圖10(a)是示出攝影圖像中的照明處於熄滅狀態的樣子的圖。(b)是示出攝影圖 像中的照明被障礙物擋住的樣子的圖。
圖11是示出本發明的實施方式2所涉及的顯示模式控制裝置的各部分的關係的 框圖。
圖12是示出本發明的實施方式2所涉及的顯示模式控制裝置的硬體結構的圖。
圖13是示出本發明的實施方式2所涉及的顯示模式控制裝置所進行的移動檢測 處理的流程圖。
圖14是示出過去(最近)的攝影圖像數據所表示的攝影圖像的圖。
圖15是示出從過去的攝影圖像向左側平行移動的、現在的攝影圖像數據所表示 的攝影圖像的圖。
圖16是示出從過去的攝影圖像向左旋轉移動90度的、現在的攝影圖像數據所表 示的攝影圖像的圖。
圖17是示出本發明的實施方式2所涉及的顯示模式控制裝置所進行的照明位置 確定處理的流程圖。
圖18是示出用於說明本發明的實施方式2所涉及的顯示模式控制裝置所進行的 模式匹配的圖。
符號說明
1 顯示模式控制裝置；10 控制部；IOa 照明位置確定部；IOb 顯示模式控制部； 11 =CPU ；12 一次存儲裝置；20 存儲部；21 二次存儲裝置；22 顯示模式控制程序；30 攝 影部；31 攝影裝置；40 顯示部；41 驅動電路；42 顯示面板；43 發光電路；45 框架；50 輸入部(操作部)；51 輸入裝置；60 讀出、寫入部；61 讀出、寫入裝置；80 傳感器部；81 3軸加速度傳感器；82 振動檢測傳感器；100 存儲卡具體實施方式
(實施方式1)
下面，參照

本發明的實施方式1。此外，本發明不受下述實施方式和附圖 的限定。毋容置疑，可以在不變更本發明要點的範圍內對下述實施方式以及附圖實施變更。 本發明所涉及的顯示模式控制裝置可以由例如計算機來實現。
首先，利用圖1說明顯示模式控制裝置1的結構的一個例子。本實施方式的顯示 模式控制裝置1是數碼照片架(也稱為數碼照片框)(參照圖3)。數碼照片架顯示播放由 例如數位照相機攝影得到的數碼照片等的圖像。
在本實施方式所涉及的顯示模式控制裝置1中，顯示模式控制裝置1的攝影裝置 31 (攝影部30)對顯示模式控制裝置1的顯示面板42 (顯示部40)的顯示面的前方進行攝 影，以表示由此而得到的攝影圖像的攝影圖像數據為基礎，確定在房間內設置的螢光燈、電 燈等的照明的位置。另外，顯示模式控制裝置1對於每隔預定時間獲取的攝影圖像數據，判 斷所確定的照明的位置的照明的點亮/熄滅狀態，按照該判斷結果進行顯示模式的控制。
顯示模式控制裝置1具備控制部10、存儲部20、攝影部30、顯示部40、輸入部50 以及讀出、寫入部60。此外，各部分的功能的至少一部分也可以設置在能通過網絡與顯示模 式控制裝置1進行通信的其它裝置中。
控制部10進行各部分的控制，進行顯示模式控制裝置1整體的控制。另外，控制 部10具備照明位置確定部IOa和顯示模式控制部10b，它們進行上述照明的位置的確定、顯 示模式的控制。
存儲部20根據控制部10的控制，適當存儲控制部10在處理中生成的數據、以及 讀出、寫入部60從存儲卡100讀出的記錄圖像數據等各種數據。
攝影部30的至少一部分，按照攝影鏡頭面向顯示部40的顯示面的前方的方式固 定在顯示部40的框架等中(參照圖幻。攝影部30根據控制部10的控制，對顯示部40的 顯示面的前方進行攝影。在此，顯示面的前方是例如從顯示面射出的光的方向的至少一部 分的方向、或者從顯示面的法線方向起一定範圍內的方向。攝影部30對顯示部40的顯示 面的前方進行攝影，生成表示攝影到的靜止圖像的攝影信號，以生成的攝影圖像為基礎，生 成數字的靜止圖像元數據。攝影部30將生成的靜止圖像元數據提供給控制部10。
顯示部40根據控制部10的控制，顯示攝影部30攝影到的顯示部40的顯示面的 前方的攝影圖像、操作畫面、以及讀出、寫入部60讀出的記錄在存儲卡100中的記錄圖像數 據所表現的記錄圖像等。
輸入部50是接受用戶的操作輸入的操作部，將與所接受的操作輸入的內容對應 的操作輸入數據提供給控制部10。
讀出、寫入部60根據控制部10的控制，讀出記錄在存儲卡100中的記錄圖像數 據，提供給控制部10。
存儲卡100由閃速存儲器類型的存儲卡等構成。作為存儲卡，有記錄作為數碼照 相機攝影到的攝影圖像(數碼照片等)的數據的記錄圖像數據的SD存儲卡等。
下面，利用圖2說明顯示模式控制裝置1的硬體結構的一個例子。顯示模式控制 裝置1具備CPU (Central Processing Unit 中央處理單元)11、一次存儲裝置12、二次存 儲裝置21、攝影裝置31、驅動電路41、顯示面板42、輸入裝置51以及讀出、寫入裝置61。
圖1的控制部10由例如CPUll和一次存儲裝置12構成。控制部10還可以含有 CPUll 和 ASIC(Application Specific Integrated Circuit 特定用途集成電路)等而構 成。該情況下，CPUll所進行的處理中的圖像數據的處理等也可以由ASIC等進行。ASIC例 如是DSP (Digital Signal Processor 數位訊號處理器)。一次存儲裝置12由RAM (Random Access Memory 隨機存取存儲器)等構成。
圖1的存儲部20由二次存儲裝置21構成。二次存儲裝置21由閃速存儲器或者 硬碟等構成。二次存儲裝置21記錄了顯示模式控制程序22。
CPU 11將顯示模式控制程序22從二次存儲裝置21讀出到一次存儲裝置12，基於 讀出的顯示模式控制程序22的指令進行後述處理。另外，一次存儲裝置12發揮CPU 11的 工作存儲器等的功能。CPUll接收的數據以及CPUll提供的數據被臨時存儲在一次存儲裝 置12的存儲區域中。CPUll讀出在一次存儲裝置12中記錄的數據，利用讀出的數據進行 運算，將運算結果數據存儲在一次存儲裝置12中。此外，控制部10具備的照明位置確定部 IOa和顯示模式控制部IOb分別由按照顯示模式控制程序22來進行後述處理的CPUl 1和一 次存儲裝置12構成。
一次存儲裝置12以及二次存儲裝置21適當存儲在後述處理中生成的數據以及從 存儲卡100讀出的記錄圖像數據等各種數據。另外，一次存儲裝置12以及二次存儲裝置21 存儲的各種數據，可由CPUll根據需要而刪除或者被其它數據覆蓋。
圖1的攝影部30由攝影裝置31 (還參照圖3)構成。攝影裝置31按照其攝影鏡 頭面向顯示面板42的顯示面的前方的方式，使攝影裝置31的至少一部分固定在固定顯示 面板42的框架45等中(參照圖3)。攝影裝置31由具備CCD (Charge Coupled Device:電 荷耦合器件)影像傳感器或者CMOS (Complementary Metal Oxide kmiconductor :互補金屬氧化物半導體)影像傳感器等攝像元件的照相機等構成。
攝像元件生成表示由攝影而得到的攝影圖像的靜止圖像元數據。即，攝影裝置31 利用攝像元件生成表示對顯示面板42 (顯示部40)的前方進行攝影而得到的靜止圖像的攝 影信號，利用各種電路對生成的攝影信號進行控制處理，由此生成數字的靜止圖像元數據。 此外，控制處理中例如有相關二重採樣(Correlated Double Sampling)、對採樣後的攝影 信號實施的自動增益調整(Automatic Gain Control)以及將自動增益調整後的模擬攝影 信號變換成數位訊號的模擬、數字變換等。
靜止圖像元數據是包括攝像元件的各有效像素的像素值的、表示一幀的量的圖像 的數據。攝影裝置31將生成的靜止圖像元數據提供給例如一次存儲裝置12。一次存儲裝 置12存儲從攝影裝置31接收到的靜止圖像元數據。
圖1的顯示部40由驅動電路41、顯示面板42、發光電路43以及框架45構成。 CPUll利用各種圖像數據，生成顯示用的RGB數據(RED-GREEN-BLUE數據紅-綠-藍數 據)，通過一次存儲裝置12將生成的RGB數據提供給驅動電路41。驅動電路41基於接收 到的RGB數據驅動顯示面板42，將由各種圖像數據表現的各種圖像提供給顯示面板42。顯 示面板42例如由液晶顯示面板或者有機EL (Organic Electro-Luminescence :0EL 電致發 光)顯示面板等構成。顯示面板42顯示從驅動電路41接收到的各種圖像。發光電路43 是將由顯示模式控制裝置1進行的處理正常與否通知給用戶的電路，發光電路43根據控制 部10的控制而發光。發光電路43例如由LED(Light Emitting Diode 發光二極體)等構 成。發光電路43固定在顯示面板42的框架45等中(參照圖3)。
圖1的輸入部50 (操作部)由輸入裝置51構成。輸入裝置51是包括例如播放 鍵、停止鍵、菜單鍵、顯示控制模式選擇鍵、設置鍵、電源鍵等多個操作鍵的由用戶進行操作 的接口裝置。當用戶操作這些鍵時，輸入裝置51將與各鍵對應的操作輸入數據提供給一次 存儲裝置12。一次存儲裝置12接收從輸入裝置51提供的操作輸入數據，存儲接收到的操 作輸入數據。CPUll按照一次存儲裝置12存儲的操作輸入數據來進行後述處理。
此外，也可以由觸摸面板構成圖1的顯示部40和輸入部50。該情況下，顯示面板 42以及輸入裝置51由觸摸面板構成。觸摸面板顯示預定的輸入畫面的同時，將操作輸入數 據提供給一次存儲裝置12。
圖1的讀出、寫入部60由讀出、寫入裝置61構成。讀出、寫入裝置61是進行數據 的讀出、寫入的接口裝置。讀出、寫入裝置61讀出記錄在存儲卡100中的記錄圖像數據，將 讀出的記錄圖像數據提供給一次存儲裝置12。一次存儲裝置12接收從讀出、寫入裝置61 提供的記錄圖像數據，存儲接收到的記錄圖像數據。CPUll利用一次存儲裝置12存儲的記 錄圖像數據來進行後述處理。
下面，說明顯示模式控制裝置1進行的處理。顯示模式控制裝置1進行的處理是 照明位置確定處理以及顯示模式控制處理。此外，顯示模式控制裝置1在下述處理中只要 不變成省電模式，就從存儲卡100依次獲取記錄圖像數據，將由獲取的記錄圖像數據所表 現的記錄圖像依次顯示在顯示部40中。
顯示模式控制裝置1進行的照明位置確定處理，由用戶對輸入部50的操作為契 機而開始。例如，用戶利用輸入部50接通顯示模式控制裝置1的電源，從顯示在顯示部40 中的顯示控制模式的選擇畫面進行使自動顯示控制模式動作的選擇。由此，輸入部50對控制部10提供與用戶操作對應的操作輸入數據，控制部10接收來自輸入部50的操作輸入數 據。由此，照明位置確定部IOa執行照明位置確定處理。此外，在照明位置確定處理結束為 止的期間，無法自動進行顯示模式控制，因此該期間也可以根據控制部IO(CPUll)的控制， 通過使發光電路43發光來通知用戶。另外，優選在未確定照明位置的時候進行該照明位置 確定處理。
照明位置確定部IOa在照明位置確定處理(參照圖4)中使攝影部30對顯示部40 的顯示面的前方進行攝影。照明位置確定部IOa基於表示由此而得到的攝影圖像(即，第 1攝影圖像501)的攝影圖像數據(即，第1攝影圖像數據)，進行確定設置在房間內的照明 的位置的處理。照明位置確定部IOa每隔預定時間使攝影部30進行攝影，每隔預定時間獲 取表示攝影到的第1攝影圖像的第1攝影圖像數據。在本實施方式中，一個小時一次，獲取 24次的量的第1攝影圖像數據。
首先，照明位置確定部IOa設定n = 0 (步驟S401)。η是表示照明位置確定部IOa 要獲取的攝影圖像數據的編號的值。接著，照明位置確定部IOa使η = n+1 (步驟S402)。
攝影部30根據照明位置確定部IOa的控制進行攝影。攝影部30生成表示對顯示 部40的顯示面的前方進行攝影而得到的靜止圖像(第1攝影圖像501)的攝影信號，以生 成的攝影信號為基礎，生成數字靜止圖像元數據。攝影部30將生成的靜止圖像元數據提供 給照明位置確定部10a。照明位置確定部IOa接收從攝影部30提供的靜止圖像元數據，對 接收到的靜止圖像元數據進行輪廓加強、白平衡調整、伽馬校正、壓縮處理等必要的控制處 理，進行向YUV(亮度、色差)數據的變換。由此，照明位置確定部IOa獲取一個圖像的量的 YUV數據作為第η個第1攝影圖像數據，並進行存儲(保存)(步驟S403)。
此外，此時，照明位置確定部IOa針對獲取的第1攝影圖像數據，對應地存儲圖像 編號(即，上述η)以及獲取時刻(由未圖示的定時器獲取。)(記錄在一次存儲裝置12中)。 圖6(a)表示對攝影圖像數據對應了攝影圖像編號以及獲取時刻的數據結構。此外，攝影圖 像數據除了上述YUV數據以外，還可以是變更了大小以及解析度的YUV數據，對它們進行變 換而得到的RGB數據或者壓縮它們而得到的壓縮數據等。另外，第1攝影圖像數據也可以 在適當的時刻記錄在存儲部20 ( 二次存儲裝置21)中。
接著，照明位置確定部IOa按照預定的每個區域(S卩，分割區域)來對由獲取的第 1攝影圖像數據所表現的第1攝影圖像501(參照圖5 (a))進行分割(參照圖5(b))。此 外，在本實施方式中，將攝影圖像數據均等地分割成縱IlX橫13的分割區域，但是分割的 分割區域的數量可以適當地設定，另外，各分割區域也可以不均等地分割。此外，分割區域 的位置、大小是預先設定的，在處理中不變。利用預先設定的、能夠唯一地識別分割區域在 第1攝影圖像501中的位置的識別信息(在此，識別編號)，確定分割區域的位置。例如，假 設圖5(a)的第1攝影圖像內的最左上的分割區域為編號1，最右上的分割區域為編號13， 從第1攝影圖像內的最左上開始第二個分割區域為編號14。由此，確定分割區域的位置。
並且，照明位置確定部IOa利用按照各分割區域的每個像素而得到的亮度值或者 RGB值等亮度的數值信息，算出其平均值或者相加值，由此獲取各分割區域的亮度(確定亮 度的數據)(步驟S404)。亮度也可以基於從分割區域的全部像素按照每個像素得到的亮度 值或者RGB值來算出，也可以基於從分割區域的預先設定的預定數量以及預定位置的像素 中選擇性地或者任意地獲取的亮度值或者RGB值來算出。
這樣，照明位置確定部IOa利用第1攝影圖像數據，確定分割上述第1攝影圖像 501而得到的分割區域各自的亮度。此時，照明位置確定部IOa對各分割區域對應了分割區 域的識別信息、和由該識別信息確定的分割區域的亮度，並且生成包括圖像編號和獲取時 刻的分割區域亮度數據，存儲生成的分割區域亮度數據(記錄在一次存儲裝置12中)。圖 6(b)表示分割區域亮度數據的數據結構。
接著，照明位置確定部IOa比較各分割區域的亮度和預先設定的閾值(第1閾值) (步驟S405)。在此所述的第1閾值是用於確定照明的值。用於確定照明的值，被設定為 設置在房間內的螢光燈、電燈等的照明能夠取的亮度的值(例如，255灰度級中的200灰度 級)。
照明位置確定部IOa利用步驟S405的比較結果，確定具有第1閾值以上的值(或 者比第1閾值大的值)的亮度的分割區域的位置作為拍攝到照明的候補的分割區域(下面 稱為照明候補區域。)的位置(下面稱為照明候補位置。)(步驟S406)。照明位置確定部 IOa將確定照明候補位置的上述識別信息和該照明候補位置的照明候補區域的亮度對應起 來，作為照明候補數據而存儲(記錄在一次存儲裝置12中)。另外，照明候補數據包括上述 圖像編號以及獲取時刻。圖6(c)所示的數據是照明候補數據的一個例子。
在圖5(a)中，在第1攝影圖像501中，有一個照明502和兩個窗口 503。如圖5(b) 所示，通過照明位置確定部IOa所進行的亮度與第1閾值的比較，作為與照明502對應的部 分的9個分割區域被確定為照明候補區域50 ，另外，作為與窗口 503對應的部分的15個 分割區域被確定為照明候補區域504b。照明位置確定部IOa把這些照明候補區域的位置確 定為照明候補位置(步驟S406)。
照明位置確定部IOa在以1個圖像的量的第1攝影圖像數據為基礎確定了照明候 補位置之後，判斷與照明候補位置信息對應的圖像編號「η」是否是預定值「m」(步驟S407)。 預定值「m」是表示照明位置確定部IOa在照明位置確定處理中在每隔預定時間攝影、獲取 的第1攝影圖像數據的數量的值。在本實施方式中，照明位置確定部IOa—個小時一次，獲 取M次的攝影圖像數據，因此預定值是「m = 24
照明位置確定部IOa在判斷為不是「n = m」的情況下(步驟S407 ；否)，在經過預 定時間(在此為1個小時)後，返回到步驟S402，設為η = n+1 (在此，η = 2)(步驟S402)。 然後，照明位置確定部IOa進行步驟S403 S406的處理，以一個圖像的量的第1攝影圖像 數據為基礎，確定照明候補位置。
照明位置確定部IOa在判斷為是「n = m」 (在此，η = 24)的情況下(步驟S407 ； 是)，進行以下處理，以每隔預定期間確定的照明候補位置為基礎，確定攝影圖像中的照明 位置。此外，假定照明位置確定部IOa在確定照明時不使用經過了一定時間(在此為對個 小時)以上的照明候補數據。即，照明位置確定部IOa(CPUll)從一次存儲裝置12的存儲 區域刪除經過了一定時間(在此為M個小時)以上的照明候補數據等。
照明位置確定部IOa從使用對象中剔除每一預定期間生成的照明候補數據(照明 候補位置)中的受外光影響的時段的照明候補數據，以便在照明位置的確定中不對其進行 使用(步驟S408)。如圖5(b)所示，在步驟S406中確定的照明候補區域中，有時會由於從 設置在房間中的窗口 503射入的外光(S卩，日光)而使拍攝到窗口 503的分割區域被確定 為照明候補區域。照明位置確定部IOa不使用受這種外光影響的時段的、例如包括從上午6點開始到下午6點的白天獲取時刻的數據作為照明候補數據(例如，刪除包括該獲取時 刻的數據的照明候補數據)。即，照明位置確定部IOa在照明位置的確定中，以在不受外光 影響的時間的夜間時間(例如從下午6點開始到上午6點等，根據季節的不同，有時也會發 生變動，可適當地設定)獲取的照明候補數據為基礎，進行照明位置的確定。這樣，照明位 置確定部IOa利用表示攝影時刻滿足預定基準(例如，不是上述夜間時刻的時段(白天時 段))的上述第1攝影圖像501的上述第1攝影圖像數據。
接著，照明位置確定部IOa判斷每隔預定時間確定的照明候補位置中是否存在， 在每隔預定時間獲取的多個第1攝影圖像數據中，在預定次數以上處於相同位置的照明候 補位置(步驟S409)。該判斷通過參照構成照明候補數據的識別信息來進行。例如，判斷在 多個第1攝影圖像中，成為相同識別信息的照明候補數據是否存在3次以上。並且，在判斷 為是的情況下(步驟S409 ；是)，照明位置確定部IOa確定由該照明候補數據的識別信息確 定的照明候補位置作為照明位置(步驟S410)。照明位置確定部IOa生成並存儲確定照明 位置的照明位置數據(記錄在一次存儲裝置12中)。照明位置數據是確定被認為拍攝到照 明的分割區域的位置(照明位置)的數據，具體地，由確定該位置的識別信息構成(參照圖 6(d))。
在位於這樣確定的照明位置的分割區域中被拍攝到的被拍攝體，與不受外光影響 的夜間時刻無關，是亮度在整個預定的期間超過一定基準的區域，這種區域很可能是長時 間點亮的照明的區域。因此，照明位置確定部IOa確定這種分割區域的位置作為照明位置。
另一方面，照明位置確定部IOa在判斷為沒有預定次數以上處於相同位置的照明 候補位置的情況下(步驟S409 ；否)，對於位於照明候補位置的各分割區域，判斷多個第1 攝影圖像數據中的亮度變化(即，亮度的差或者比)在第2閾值以上(或者大於第2閾值) 的分割區域(即，亮度變化大的分割區域)是否存在(步驟S411)。具體地，比較各第1攝 影圖像中的任意兩個第1攝影圖像的照明候補數據和分割區域亮度數據，比較照明候補數 據所含有的各識別信息所對應的亮度和分割區域亮度數據所含有的與上述各識別信息相 同的識別信息所對應的亮度，來進行上述判斷。針對各第1圖像進行該比較。該第2閾值 採用與由照明的熄滅以及點亮而產生的亮度的差對應的值。
照明位置確定部IOa在判斷出存在亮度變化大的分割區域的情況下(步驟S411 ； 是)，確定該亮度的分割區域的位置作為照明位置(步驟S412)，照明位置確定部IOa生成 並存儲確定照明位置的照明位置數據(記錄在一次存儲裝置12中)。照明位置數據是與上 述相同的數據(參照圖6(d))。
在位於這樣確定的照明位置的分割區域中拍攝到的被拍攝體，亮度變化大，這種 區域很可能是拍攝到由於熄滅和點亮的變化而使亮度大幅度變化的照明的區域。因此，照 明位置確定部IOa確定這種分割區域的位置作為照明位置。
照明位置確定部IOa在判斷為不存在亮度變化大的分割區域的情況下(步驟 S411 ；否)，處理結束。照明位置確定部IOa此時無法在顯示部40中確定照明位置，因此照 明位置確定部IOa顯示無法進行後述顯示模式的控制的意思的畫面。
由此，以每隔預定時間獲取的照明候補位置為基礎，確定照明位置，照明位置確定 處理結束。由此，在圖5(b)中，作為照明候補位置信息而獲取的與窗口 503對應的部分即 15個分割區域不是作為照明位置而確定的(該區域是在白天時間明亮的區域，由步驟S408從照明候補區域中剔除。)，實際上與照明502對應的部分即9個分割區域的位置是作為照 明位置而獲取的。此外，照明位置數據適當記錄在存儲部20中，在後述的預定處理中被讀出ο
照明位置確定部IOa參照確定的照明位置(識別信息)並以它們為基礎，在存在 相互相鄰的照明位置的情況下，位於該照明位置的分割區域可看作是拍攝到相同照明的分 割區域，並將這樣相鄰的各分割區域作為一組照明位置(下面稱為照明區域組)而處理。 即，在圖5(b)中，作為與照明502對應的部分的9個分割區域(照明候補區域505)的位置 被確定為照明位置，但是各分割區域相互相鄰，因此能夠被看作是以相同照明為對象來確 定照明位置的，並且該9個分割區域可以作為照明區域組來處理。另外，該情況下，也可以 設定成為照明區域組的代表的分割區域。例如，在圖5(b)的照明區域組的情況下，能夠將 表示分割區域組的中心位置的分割區域(在不存在表示中心位置的分割區域的情況下，將 中央附近的分割區域中的隨機確定的分割區域作為表示中心位置的分割區域。)設定為代 表分割區域506。照明位置確定部IOa在該情況下確定分割區域組的至少一個分割區域的 位置作為照明位置。即使這樣，由於能夠判別後述照明的熄滅以及點亮(照明作為整體而 熄滅以及點亮)，因此有助於減輕處理的負擔。
在利用照明位置確定部IOa確定了照明位置之後，顯示模式控制部IOb在每一定 期間獲取第2攝影圖像數據(與第1攝影數據相同的數據)，基於獲取的第2攝影圖像數據 和照明位置確定部IOa獲取的照明位置，進行判斷攝影圖像中的照明位置的亮度的顯示模 式控制處理。
顯示模式控制部IOb與上述照明位置確定處理相同，在每一定期間獲取第2攝影 圖像數據。在此所述的一定期間可以與在照明位置確定處理中設定的預定期間相同，也可 以另行設定。例如，在本實施方式中，顯示模式控制部IOb使攝影部30每10分鐘攝影一次， 獲取第1攝影圖像數據。此外，第1攝影圖像數據的獲取與上述照明位置確定處理相同地 進行，因此省略說明。
另外，顯示模式控制部IOb與上述照明位置確定處理相同，以獲取的第2攝影圖像 數據為基礎，確定各分割區域的亮度(生成並存儲分割區域亮度數據)。此外，分割區域的 亮度確定與在上述照明位置確定處理中的亮度確定相同，因此省略說明。顯示模式控制部 IOb以第2攝影圖像為單位，按照時間順序累積存儲各分割區域的亮度預定次數以上，確定 2個以上的第2攝影圖像的各分割區域的亮度，每當確定第2個以後的各分割區域的亮度 時，進行如圖7所示的顯示模式控制處理。
此外，下面在顯示模式控制部IOb所獲取的第2攝影圖像數據中，將最新的第2攝 影圖像數據稱為現在圖像數據，將由現在圖像數據表現的第2攝影圖像稱為現在圖像。另 外，下面在顯示模式控制部IOb所獲取的第2攝影圖像數據中，將最新的第2攝影圖像數據 的一個之前獲取的第2攝影圖像數據稱為過去圖像數據，將由過去圖像數據表現的第2攝 影圖像數據稱為過去圖像。另外，將位於照明位置的分割區域稱為照明區域。
顯示模式控制部IOb參照與現在圖像數據相關的分割區域亮度數據來確定位於 由現在圖像數據表現的現在圖像的照明位置的照明區域的亮度(步驟S701)。顯示模式控 制部IOb以照明位置數據的識別信息為基礎，確定與該識別信息對應的亮度，由此進行位 於照明位置的照明區域的亮度的確定。顯示模式控制部IOb存儲(記錄在一次存儲裝置12中)該亮度值，作為現在圖像亮度信息(適當地包括識別信息和與各識別信息對應的亮 度)。此外，在確定了多個照明區域的情況下，例如確定各照明區域的亮度的平均值作為照 明區域的亮度。
顯示模式控制部IOb參照與過去圖像數據相關的分割區域亮度數據來確定位於 由過去圖像數據表現的過去圖像的照明位置的照明區域的亮度(步驟S702)。顯示模式控 制部IOb以照明位置數據的識別信息為基礎，確定與該識別信息對應的亮度，由此進行位 於照明位置的照明區域的亮度的確定。顯示模式控制部IOb存儲(記錄在一次存儲裝置 12中)該亮度值，作為過去圖像亮度信息(適當地包括識別信息和與各識別信息對應的亮 度)。此外，在確定了多個照明區域的情況下，確定例如各照明區域的亮度的平均值作為照 明區域的亮度。
顯示模式控制部IOb比較現在圖像的照明區域的亮度和過去圖像的照明區域的 亮度，確定照明區域的亮度變化(差、比)(步驟S703)。
顯示模式控制部IOb判斷所確定的亮度變化大與否(步驟S704)。這由變化值是 否在第3閾值以上(或者是否超過，下面相同)來判定。第3閾值由照明的變化(從點亮 到熄滅或者從熄滅到點亮等的照明的狀態變化)而產生的亮度的變化值來設定。此外，在 此，在變化值是亮度差的情況下，將該差的絕對值設為變化值。
若變化值不到第3閾值(或者以下，下面相同)，則顯示模式控制部IOb判斷出所 確定的亮度的變化較小(步驟S704 ；否)。若變化值不到第3閾值(或者以下，下面相同)， 則亮度大致未發生變化，或者變化較小，因此認為沒有照明變化。當判斷出顯示模式控制部 IOb確定的亮度變化較小(步驟S704 ；否)時，認為沒有照明的變化，因此無需變更顯示模 式，顯示模式控制部IOb結束本處理。
若變化值在第3閾值以上，則顯示模式控制部IOb判斷出確定的亮度變化較大 (步驟S704 ；是)。若變化值在第3閾值以上，則亮度大幅度地變化，因此認為存在照明的 變化。當判斷出顯示模式控制部IOb確定的亮度變化較大(步驟S704;是)時，認為存在 照明的變化，需要變更顯示模式，因此顯示模式控制部IOb判斷亮度的變化是否是從點亮 狀態(亮狀態)向熄滅狀態(暗狀態)變化(步驟S7(^)。步驟S705的判斷可利用亮度的 變化值來進行。
在變化值由亮度差(現在圖像的照明區域的亮度-過去圖像的照明區域的亮度) 求出的情況下，當變化值表示負值時，現在圖像的照明區域的亮度值小於過去圖像的照明 區域的亮度，因此該照明區域從「亮狀態」變化到「暗狀態」。即，在該照明區域中拍攝的照明 有從點亮向熄滅變化的可能性。另一方面，當變化值表示正值時，現在圖像的照明區域的亮 度值大於過去圖像的照明區域的亮度，因此該照明區域從「暗狀態」變化到「亮狀態」。艮口， 在該照明區域中拍攝的照明有從熄滅向點亮變化的可能性。在變化值表示負值時，顯示模 式控制部IOb判斷出照明從點亮狀態向熄滅狀態變化(步驟S705 ；是)，則進行點亮、熄滅 處理(步驟S706)。另外，在變化值表示正值時，顯示模式控制部IOb判斷出照明從熄滅狀 態向點亮狀態變化(步驟S705 ；否)，則進行熄滅、點亮處理(步驟S707)。
在變化值由亮度比(現在圖像的照明區域的亮度+過去圖像的照明區域的亮度) 求出的情況下，在變化值不到1的情況下，現在圖像的照明區域的亮度值小於過去圖像的 照明區域的亮度，因此該照明區域從「亮狀態」變化到「暗狀態」。即，在該照明區域中拍攝的照明有從點亮向熄滅變化的可能性。另一方面，在變化值超過1的情況下，現在圖像的照 明區域的亮度值大於過去圖像的照明區域的亮度，因此該照明區域從「暗狀態」變化到「亮 狀態」。即，在該照明區域中拍攝的照明有從熄滅向點亮變化的可能性。在變化值不到1的 情況下，顯示模式控制部IOb判斷出照明從點亮狀態向熄滅狀態變化(步驟S705 ；是)，於 是進行點亮、熄滅處理(步驟S706)，結束處理。另外，在變化值超過1的情況下，顯示模式 控制部IOb判斷出照明從熄滅狀態向點亮狀態變化(步驟S705 ；否)，於是進行熄滅、點亮 處理(步驟S707)，結束處理。
在此，利用圖8說明顯示模式控制部IOb所進行的點亮、熄滅處理。顯示模式控制 部IOb比較上述確定的現在圖像的各分割區域和亮度、和上述確定的過去圖像的各分割區 域和亮度，確定各分割區域的亮度變化(步驟S801)。顯示模式控制部IOb利用與過去圖像 數據相關的分割區域亮度數據和與現在圖像數據相關的分割區域亮度數據，針對每個識別 信息算出與相同識別信息對應的亮度的變化(差或者比)，存儲表示算出結果的數據(記錄 在一次存儲裝置12中)。
顯示模式控制部IOb判斷是否存在在確定的各分割區域的亮度變化中，變化小的 分割區域(步驟SSO》。顯示模式控制部IOb判斷是否存在亮度的變化值在第4閾值以下 (或者不到，下面相同)的分割區域，由此判斷是否存在變化小的分割區域。第4閾值採用 小於由照明的點亮、熄滅而產生的亮度的變化值的值。若存在第4閾值以下的分割區域，則 顯示模式控制部IOb判斷為存在變化小的分割區域。
在不存在變化小的分割區域的情況下(步驟S802 ；否)，可以判斷出照明502從點 亮狀態變成熄滅狀態。即，該情況下，可以預想到即使在攝影圖像的照明位置以外的位置， 也與照明位置同樣地從「亮狀態」變化成「暗狀態」。該情況下，可以預測到由於照明從點亮 狀態變成熄滅狀態，房間內的亮度會整體性地變暗，在該攝影圖像中拍攝到的房間中沒有 人的可能性較高(參照圖10 (a))。顯示模式控制部IOb根據該判斷結果，使顯示部40的顯 示面(顯示面板42)變暗，或者中斷顯示部40的電源供應，或者顯示屏幕保護，從而進行使 顯示模式轉移到省電模式的顯示模式控制(步驟80；3)。此外，在顯示模式已是省電模式的 情況下，顯示模式控制部IOb維持省電模式。若在房間內沒有人，則無需在顯示部中進行數 碼照片的顯示等。
另一方面，在存在變化小的分割區域的情況下(步驟S802 ；是)，照明區域變暗，但 是其它分割區域未變暗。即，此時只是在攝影部30之前有人、物等障礙物，照明未熄滅的可 能性較高(參照圖10(b))。該情況下，可能有人還在房間中，因此顯示模式控制部IOb不進 行顯示模式的控制而結束處理。
利用圖9，說明顯示模式控制部IOb所進行的熄滅、點亮處理。在該處理中，照明點 亮了，因此人進入房間的可能性較高。顯示模式控制部IOb將顯示模式變更為通常的動作 模式(順序顯示上述記錄圖像(數碼照片)的模式)(步驟S901)。此外，在顯示模式已是 通常的動作模式的情況下，顯示模式控制部IOb維持通常的動作模式。
上面，本實施方式所涉及的顯示模式控制裝置1是控制顯示部的顯示模式的顯示 模式控制裝置1，具備照明位置確定部IOa和顯示模式控制部10b。並且，照明位置確定部 IOa獲取表示對顯示部40的顯示面的前方進行攝影而得到的第1攝影圖像的第1攝影圖 像數據，利用獲取的第1攝影圖像數據，確定分割第1攝影圖像而得到的各個分割區域的亮度，基於確定的每個分割區域的亮度，確定拍攝到第1攝影圖像中的照明的候補的分割區 域的位置作為照明位置。另外，顯示模式控制部IOb獲取表示對顯示部40的顯示面的前方 進行攝影而得到的第2攝影圖像的第2攝影圖像數據，利用獲取的第2攝影圖像數據和照 明位置確定部IOa確定的照明位置，確定第2攝影圖像中的位於與照明位置對應的位置的 分割區域的亮度作為照明的亮度，基於確定的照明的亮度，控制顯示模式。若人在房間中， 則照明點亮的可能性較高。顯示模式控制裝置1能夠根據上述那樣的照明的狀態來控制顯 示模式，因此能夠進行反映了用戶行為的顯示模式的控制。
另外，如上所述，照明位置確定部IOa利用表示攝影時刻滿足預定基準的第1攝影 圖像的第1攝影圖像數據，來確定照明位置。由此，能夠防止將外光射入的窗等誤認為照 明。
照明位置確定部IOa多次獲取第1攝影圖像數據，針對獲取的多個第1攝影圖像 數據的每一個，確定每個分割區域的亮度，利用確定的亮度，確定在各個第1攝影圖像數據 中亮度都滿足第1基準的分割區域的位置作為照明位置，因此照明位置的確定精度更好。
照明位置確定部IOa確定第1攝影圖像數據各自的、亮度滿足第1基準預定次數 以上的分割區域作為照明位置，因此照明位置的確定精度更好。
照明位置確定部IOa確定上述第1攝影圖像數據各自的、上述亮度的變化滿足第 2基準的上述分割區域的位置作為照明位置，因此照明位置的確定精度更好。
顯示模式控制部IOb多次獲取第2攝影圖像數據，利用獲取的多個第2攝影圖像 數據，多次確定照明的亮度，基於確定的多個照明的亮度，確定照明亮度的變化狀態，基於 確定的變化狀態來控制顯示模式，因此能夠精度良好地把握照明的狀態，並根據把握到的 照明的狀態控制顯示模式。
顯示模式控制部IOb在變化狀態是向變暗變化的狀態、並且變化狀態的變化度滿 足第3基準的情況下，將顯示模式切換為省電模式，因此能夠精度良好地把握照明的狀態， 並根據把握到的照明的狀態控制顯示模式。
顯示模式控制部IOb在變化狀態是向變暗變化的狀態的情況下，檢測由多個第2 攝影圖像數據表現的第2攝影圖像中的照明位置對應的分割區域以外的分割區域的亮度 的變化，在分割區域的亮度的變化滿足第4基準的情況下，不將顯示模式切換為省電模式， 因此即使有障礙物等，也能夠精度良好地把握照明的狀態，並根據把握到的照明的狀態控 制顯示模式。
顯示模式控制部IOb在變化狀態是向亮變化的狀態、並且變化狀態的變化度滿足 第5基準的情況下，將顯示模式從省電模式切換為其它模式，因此能夠基於把握到的照明 狀態來精度良好地控制顯示模式。
另外，在本實施方式中，顯示模式控制部IOb確定由照明位置確定單元IOa獲取的 照明位置，利用確定的照明位置，判斷每一定期間獲取的第2攝影圖像數據所表示的第2攝 影圖像中的照明位置的狀態。但是，本發明所涉及的顯示模式控制裝置1不限於此。即，顯 示模式控制部IOb也可以在到照明位置確定部IOa確定照明位置為止的期間中，將照明位 置確定單元IOa所獲取的照明候補位置確定為臨時的照明位置。並且，也可以利用該照明 位置，來判斷每一定期間時間獲取的第2攝影圖像數據所表示的第2攝影圖像中的照明位 置的狀態。因此，照明位置是一個還包括臨時的照明位置的概念。是否利用臨時的照明位置來進行顯示模式的控制，用戶可以自由地選擇、設定。另外，照明位置等也可以是用戶等 適當地設定的預定區域。該情況下，有時照明位置確定部IOa是不需要的。即使在該情況 下，也能夠進行反映了用戶行為的顯示模式的控制。
(實施方式2)
下面，參照

本發明的實施方式2。此外，在本實施方式2中，對於與實施 方式1的結構相同的結構標註相同的附圖標記，省略重複說明。圖11是示出本實施方式所 涉及的顯示模式控制裝置2的結構的框圖。顯示模式控制裝置2除了實施方式1的顯示模 式控制裝置1的結構以外，還在控制部10中具備檢測顯示部40的移動的移動檢測部10c。 另外，顯示模式控制裝置2具備傳感器部80。並且，在本實施方式所涉及的顯示模式控制裝 置2中，輸入部50接受來自用戶的照明位置的指定操作，據此進行照明位置確定部IOa確 定照明位置的處理。
傳感器部80檢測顯示模式控制裝置2的移動、轉動、振動。傳感器部80將與各個 檢測結果對應的傳感器數據提供給控制部10。
圖12是示出本實施方式所涉及的顯示模式控制裝置2的硬體結構的框圖。顯示 模式控制裝置2除了實施方式1的顯示模式控制裝置1的結構之外，還具備3軸加速度傳 感器81和振動檢測傳感器82。
圖11的傳感器部80由3軸加速度傳感器81和振動檢測傳感器82構成。3軸加 速度傳感器81搭載在數碼照片架(顯示模式控制裝置幻內。3軸加速度傳感器81是用 一個元件來測量XYZ的3個軸全部的加速度的傳感器，當顯示模式控制裝置2移動或者轉 動時，檢測其加速度。3軸加速度傳感器81在檢測到顯示模式控制裝置2的移動或者轉動 時，將加速度傳感器數據提供給一次存儲裝置12。振動檢測傳感器82搭載在數碼照片架 (顯示模式控制裝置幻內。振動檢測傳感器82檢測顯示模式控制裝置2的振動。振動檢 測傳感器82在檢測到顯示模式控制裝置2的振動時，將振動傳感器數據提供給一次存儲裝 置12。
另外，圖11的移動檢測部IOc由CPUll和一次存儲裝置12構成。
對於以上那樣構成的顯示模式控制裝置2，下面說明顯示模式控制裝置2所進行 的控制處理。此外，在此說明移動檢測部IOc所進行的移動檢測處理，而省略在實施方式1 中說明的照明位置確定處理以及顯示模式控制處理的說明。
利用圖13說明移動檢測部IOc所進行的移動檢測處理。移動檢測部IOc與照明 位置確定部IOa或者顯示模式控制部IOb所進行的處理並行，以預定間隔重複進行該處理。 移動檢測部IOc以用戶對輸入部50的操作為契機而開始。例如，用戶利用輸入部50接通 顯示模式控制裝置2的電源，從顯示在顯示部40中的顯示控制模式的選擇畫面進行使自動 顯示控制模式動作的選擇。由此，輸入部50向控制部10提供與用戶操作對應的操作輸入 數據，控制部10接收來自輸入部50的操作輸入數據。據此，移動檢測部IOc執行移動檢測 處理。
移動檢測部IOc獲取現在圖像數據以及過去圖像數據(步驟S1301)。這些圖像 數據也可以是照明位置確定部IOa或者顯示模式控制部IOb獲取的第1攝影圖像數據或者 第2攝影圖像數據，也可以是移動檢測部IOc自身每隔一定間隔獲取的攝影圖像數據。移 動檢測部IOc在獲取過去圖像數據之後，待機到獲取現在圖像數據為止，在獲取現在圖像數據之後，前進到後述步驟的處理。
移動檢測部IOc以獲取的現在圖像數據以及過去圖像數據為基礎，確定現在圖像 以及過去圖像中的各分割區域的亮度，利用確定的亮度，判斷攝影圖像之間有無變化(步 驟S13(^)。例如，通過在兩圖像之間檢測預先設定的攝影圖像中的四個角落位置的圖像變 化而進行。若四個角落的圖像變化(例如，背景的移動度)滿足預定條件，則可以判斷為背 景在移動。若四個角落的圖像變化不滿足預定條件，則可以判斷為背景未移動。此外，四個 角落的圖像變化可以利用運動向量、差分絕對值和、或者差分平方和等公知的方法進行。
該判斷的結果，在圖像之間存在變化的情況下(步驟S1302 是)，移動檢測部IOc 利用顯示模式控制裝置2 (包括顯示部40)的移動，識別為照明位置確定部IOa所獲取的照 明位置信息或者照明候補位置信息發生了變化，進行修正照明位置信息或者照明候補位置 信息的處理(即，再次確定照明位置的處理)。此時，移動檢測部IOc保持了變化前不久的 過去圖像數據(下面，將該保持的過去圖像數據稱為保持數據，將由保持數據表現的圖像 稱為保持圖像)。
另外，在圖像之間沒有變化的情況下(步驟S1302 ；否)，移動檢測部IOc識別為 照明位置確定部IOa所獲取的照明位置信息或者照明候補位置信息未發生變化，結束本處理。
移動檢測部IOc以現在圖像數據以及保持數據為基礎，確定照明候補位置(步驟 S1303)。S卩，移動檢測部IOc確定識別為照明位置或者照明候補位置變化了的前後照明候 補位置。照明候補位置的確定由在實施方式1中所說明的處理相同的處理來進行，此處省 略說明。
之後，移動檢測部IOc判斷現在圖像以及保持圖像中的照明候補區域組的數量是 否為多個(步驟S1304)。在此，照明候補區域組是相鄰的照明候補區域的集合，移動檢測部 IOc利用該照明候補區域組來進行該判斷。此外，照明候補區域組可以由上述確定的照明候 補位置來確定。具體地，例如移動檢測部IOc根據照明候補數據所含有的識別信息(作為 能夠確定照明候補位置的位置的信息)來確定照明候補區域組。移動檢測部IOc通過生成 並存儲確定照明候補區域組圖像內的位置、大小、形狀等的照明候補區域組數據(記錄在 一次存儲裝置12中)，確定照明候補區域組。
例如，圖14示出了以保持圖像中的照明候補位置為基礎而確定的兩個照明候補 區域組1401a以及1401b。另外，圖15示出了根據以現在圖像中的照明候補位置為基礎而 確定的兩個照明候補區域組1501a以及1501b。該情況下，現在圖像以及保持圖像中的分割 區域組的數量均是多個(兩個)，因此移動檢測部IOc判斷為現在圖像以及保持圖像中的照 明候補區域組的數量是多個。
移動檢測部IOc的判斷結果，在判斷為現在圖像以及保持圖像中的照明候補區域 組的數量不是多個的情況下(步驟S1304 ；否)，不進行後述的處理，因此移動檢測部IOc結 束處理，照明位置確定部IOa利用在實施方式1中說明了的照明位置確定處理，進行照明候 補位置、照明位置的再次確定。
另一方面，移動檢測部IOc進行判斷的結果，在判斷為現在圖像以及保持圖像中 的照明候補區域組的數量是多個的情況下(步驟S1304 ；是)，移動檢測部IOc利用確定 的現在圖像以及保持圖像中的照明候補區域組的位置關係，進行攝影圖像之間的照明候補區域組的匹配處理(例如，後述的模式匹配(pattern matching)處理)，判斷是否能進行 照明位置的修正，以由此確定的移動內容為基礎，判斷是否能進行照明位置的修正(步驟 S13(^)。在不能的情況下(步驟S1305;否)，不能進行照明位置的修正，因此移動檢測部 IOc結束處理，照明位置確定部IOa通過在實施方式1中說明的照明位置確定處理，進行照 明候補位置、照明位置的再確定。在可能的情況下(步驟S1305 ；是)，可以進行照明位置的 修正，因此移動檢測部IOc進行照明位置的修正(步驟S1306)。
說明這些處理的具體例，例如移動檢測部IOc首先將保持圖像中的照明候補區域 的分割區域設為「1」，將除此之外的分割區域設為「0」，將分割區域作為一個像素生成表示 第1圖像的第1圖像數據。其能夠利用上述確定的照明候補位置來生成。同樣，移動檢測部 IOc將現在圖像中的照明候補區域的分割區域設為「1」，將除此之外的分割區域設為「0」， 將分割區域作為一個像素生成表示第2圖像的第2圖像數據。
移動檢測部IOc存儲生成的第1以及第2圖像數據(記錄在一次存儲裝置12中)。 並且，移動檢測部IOc進行如下處理(模式匹配)利用存儲的第1以及第2圖像數據，使 如圖18所示的第1圖像1801在第2圖像1802上每次一個像素地上下左右錯開(參照圖 18的箭頭)，在兩圖像中確定「1」像素最多重疊的兩圖像的相對位置。此外，在確定的相對 位置是多個的情況下，隨機地確定一個相對位置。該相對位置能夠通過檢測第1圖像和第2 圖像向哪個方向錯開多大的量來把握。例如，能夠通過兩圖像的任意角的像素錯開幾個像 素的量等來把握。此外，在圖18中，為了容易理解，僅記入與照明候補區域的分割區域對應 的像素「1」，對於其它像素(0像素)未記入任何數值。另外，各圖像的大小、分割區域的數 量等也變更成了圖14的圖像等。
移動檢測部IOc在確定「1」像素最多地重疊的兩圖像的相對位置之後，判斷該相 對位置的兩圖像的「1」像素是否有預定基準以上(例如，9成以上)的數量的像素重疊，在 重疊有預定基準以上的數量的像素的情況下，判斷為可以進行照明位置的修正，生成確定 相對位置的數據(例如，「1」像素最多地重疊的情況下的第1圖像和第2圖像在哪個方向錯 開多大的量的像素的量的數據)，將其作為移動內容數據來存儲(記錄在一次存儲裝置12 中)。由此，移動檢測部IOc確定照明位置的移動內容(相對位置)。一個像素是一個分割 區域，因此移動內容確定移動方向和移動了幾個分割區域的量(例如，向左一像素，向下四 像素)。
另外，在上述關於「1」像素未重疊預定基準以上的數量的像素的情況下，移動檢測 部IOc利用存儲的第1圖像數據，以任意角(例如，觀察者的左下角)的像素為中心使第1 圖像向左或者右轉動90度。這通常是由於顯示模式控制裝置2從縱置向橫置轉動等、以90 度為單位轉動而導致的。並且，與上述相同，首先進行如下處理使第1圖像在第2圖像上 每次一個像素地上下左右錯開，在兩圖像中確定「1」像素最多地重疊的兩圖像的相對位置。 該相對位置能夠通過檢測第2圖像的轉動方向、轉動角以及轉動中心的像素(下面稱為轉 動中心像素。)和轉動後的第2像素的轉動中心像素以及與第1像素的轉動中心像素對應 的像素是向哪個方向錯開多大的量來把握。
移動檢測部IOc在確定「1」像素最多地重疊的兩圖像的相對位置之後，判斷該相 對位置的兩圖像的「1」像素是否有預定基準以上(例如，9成以上)的數量的像素重疊，在 重疊有預定基準以上的數量的像素的情況下，判斷為可以進行照明位置的修正，生成確定相對位置的數據(例如，確定關於「1」的像素重疊有預定基準以上(例如，9成以上)的數 量的像素的情況下的、第2圖像的轉動方向、轉動角以及轉動中心像素和轉動後的第2像素 的轉動中心像素以及與第1像素的上述轉動中心像素對應的像素向哪個方向錯開多大的 量的數據)，將其作為移動內容數據來存儲(記錄在一次存儲裝置12)。由此，移動檢測部 IOc確定照明位置的移動內容(相對位置)。一個像素是一個分割區域，因此移動內容確定 轉動方向、轉動角、轉動中心的分割區域、轉動後的移動方向以及移動了幾個分割區域的量 (例如，以左下角的像素為中心，向右轉動90度，向左邊移動一像素，向下邊移動四像素)。
另外，在上述「1」像素沒有重疊預定基準以上的數量的像素的情況下，移動檢測部 IOc利用存儲的第1圖像數據，以轉動中心像素為中心使第1圖像向上述轉動方向轉動180 度，進行與上述相同的處理。移動檢測部IOc在處理中，在「1」像素沒有重疊預定基準以上 的數量的像素的情況下，進一步地利用存儲的第1圖像數據，以轉動中心像素為中心，使第 1圖像向上述轉動方向轉動270度，進行與上述相同的處理。
在移動檢測部IOc所進行的最後的處理中，在「1」像素沒有重疊預定基準以上的 數量的像素的情況下，移動檢測部IOc設置無法進行照明位置的修正(步驟S1305 ；否)，移 動檢測部IOc結束處理，照明位置確定部IOa通過在實施方式1中說明了的照明位置確定 處理來進行照明候補位置、照明位置的再確定。
在移動檢測部IOc如上所述，利用照明候補區域(或者照明候補區域組)的位置 關係來確定移動內容的情況下，移動檢測部IOc利用移動內容數據來對存儲的或者記錄在 存儲部20中的照明位置數據進行修正，由此修正照明位置，將確定修正後的照明位置的照 明位置數據作為新的照明位置進行存儲或者記錄在存儲部20中。之後，基於該新的照明位 置來進行顯示模式的控制。
例如，在移動內容確定移動方向和移動了幾個分割區域的量的情況下，移動檢測 部IOc使照明位置數據所確定的各照明位置按照該內容移動(例如，向左邊移動一個分割 區域，向下邊移動四個分割區域)，將與移動了的照明位置對應的分割區域的識別信息作為 照明位置數據。另外，在移動內容確定轉動方向、轉動角、轉動中心的分割區域、轉動後的移 動方向以及移動了幾個分割區域的量的情況下，移動檢測部IOc使照明位置數據所確定的 各照明位置按照該內容轉動以及移動(例如，以左下角的像素為中心，向右轉動90度，向左 邊移動一個分割區域，向下邊移動四個分割區域)，將與移動了的照明位置對應的分割區域 的識別信息作為照明位置數據。
例如，在圖14的圖像和圖15的圖像(移動後的圖像)中，照明候補區域組1501a 以及1501b相對於照明候補區域組1401a和1401b向左錯開三個分割區域的量。因此，顯 示模式控制裝置1的照明位置也向左錯開三份分割區域的量。另外，例如，在圖14的圖像 和圖16的圖像(移動後的圖像)中，照明候補區域組1601a以及1601b相對於照明候補區 域組1401a和1401b以左下的分割區域為中心使圖16的圖像向左方向轉動90度並且向右 錯開一個分割區域、向下錯開兩個分割區域的量。因此，顯示模式控制裝置1的照明位置也 以圖像中左下的分割區域為中心向左方向轉動90度並且向右錯開一個分割區域、向下錯 開兩個分割區域的量。
這樣，移動檢測部IOc對照明位置進行修正。由此，移動檢測部IOc所進行的移動 檢測處理結束。此外，移動檢測部IOc除了以攝影圖像數據為基礎檢測顯示部40的移動之外，在顯示模式控制裝置2中具備的傳感器80檢測到顯示模式控制裝置2 (包括顯示部 40)的移動、轉動、振動的情況下，當接收到所提供的各種傳感器數據時，也可以基於傳感器 數據所表示的移動內容，利用與上述相同的方法對照明位置進行修正。即，移動檢測部IOc 在接收到各種傳感器數據時，檢測顯示部40的移動。並且，移動檢測部IOc根據傳感器數 據，利用公知的方法確定移動內容，根據確定的移動內容使照明位置移動。
下面，利用圖17，說明根據來自用戶的照明位置的確定操作，照明位置確定部IOa 確定照明位置的處理。例如，用戶利用輸入部50接通顯示模式控制裝置1的電源，從顯示 在顯示部40中的顯示控制模式的選擇畫面進行使照明位置確定模式動作的選擇。由此，輸 入部50對控制部10提供與用戶的操作對應的操作輸入數據，控制部10接收來自輸入部50 的操作輸入數據。據此，照明位置確定部IOa執行照明位置確定處理。
照明位置確定部IOa使攝影部30對顯示部40的顯示面的前方進行攝影，獲取表 示攝影圖像的攝影圖像數據(步驟S1701)。照明位置確定部IOa將按照預定的每個分割區 域將由所獲取的攝影圖像數據所表示的攝影圖像分割而成的分割圖像(例如，用如圖5(b) 所示那樣的分隔線對分割區域進行分隔而成的圖像)顯示在顯示部40中(步驟S1702)。
此時，照明位置確定部IOa最好在實施上述處理時進行使圖像左右翻轉的處理。 即，攝影部30從與觀看顯示部40的方向相反的方向進行攝影，因此在將攝影部30所攝影 的顯示部40前方的攝影圖像顯示在顯示部40的顯示面中的情況下，用戶難以比較實際的 顯示部40前方的位置關係與顯示在顯示部40的顯示面中的顯示部40的前方的位置關係。 因此，照明位置確定部IOa進行使顯示部40前方的攝影圖像左右翻轉的處理，由此在將攝 影部30攝影的顯示部40前方的攝影圖像顯示在顯示部40的顯示面的情況下，能夠如同映 射在鏡子中那樣進行顯示。由此，在將攝影部30攝影的顯示部40前方的攝影圖像(S卩，分 割圖像)顯示在顯示部40的顯示面中的情況下，用戶比較實際的顯示部40前方的位置關 系與顯示在顯示部40的顯示面中的顯示部40前方的位置關係就變得容易。
該狀態下，輸入部50接受用戶的操作。即，用戶能夠利用輸入部50，從顯示在顯 示部40中的分割圖像確認照明，指定拍攝到該照明的分割區域。輸入部50將表示所指定 的分割區域的識別信息提供給照明位置確定部10a。照明位置確定部IOa接收從輸入部50 提供的識別信息，確定由接收的識別信息確定的分割區域的位置作為照明位置。此外，利用 觸摸面板構成圖11的顯示部40和輸入部50，由此用戶能夠利用觸摸面板指定照明位置分 割區域。
照明位置確定部10a，到有照明位置分割區域的指定結束的操作為止，接受用戶的 操作(步驟S1703;否)。並且，隨著檢測到用戶利用輸入部50進行了照明位置分割區域的 指定結束的操作(步驟S1703;是)，照明位置確定部IOa對獲取的照明位置進行存儲(步 驟 S1704)。
上面，根據本實施方式所涉及的顯示模塊控制裝置2，還具備檢測顯示部40的移 動的移動檢測部10c，照明位置確定部IOa在移動檢測部IOc檢測到移動的情況下，重新確 定照明位置。據此，在顯示部40已移動、轉動或者振動等的情況下，照明位置確定部IOa能 夠適當地重新設定照明位置，能夠繼續自動顯示控制模式。
另外，根據本實施方式所涉及的顯示模塊控制裝置2，根據來自用戶的照明位置確 定操作，進行照明位置確定部IOa確定照明位置的處理。即，顯示模塊控制裝置2具備顯示模式控制單元，上述顯示模式控制單元獲取表示對顯示部40的顯示面的前方進行攝影而 得到的攝影圖像的攝影圖像數據，利用獲取的攝影圖像數據和在預先設定的圖像內確定照 明位置的照明位置，確定攝影圖像中的與照明位置對應的位置的亮度作為照明的亮度，根 據確定的照明的亮度控制上述顯示模式，照明位置根據來自用戶的照明位置的指定操作而 預先設定。由此，能夠僅確定用戶想作為顯示模式控制的對象的照明位置，能夠進行更為符 合用戶意圖的顯示模式控制。
此外，實施方式1和2的顯示模式控制程序22也可以記錄在可搬運的存儲介 質等中。可搬運的記錄介質包括例如CD_R0M(Compact Disk Read Only Memory)或者 DVD-ROM (Digital Versatile Disk Read Only Memory)等。另外，顯示模式控制程序 22 也 可以從可搬運的存儲介質通過各種讀取裝置安裝在顯示模式控制裝置1或者2中。並且， 顯示模式控制程序22也可以從網際網路等網絡通過未圖示的通信部下載以及安裝到顯示模 式控制裝置1或者2中。另外，顯示模式控制程序22也可以保存在能與顯示模式控制裝置 1或者2進行通信的伺服器等的存儲裝置中，從而進行對CPUll的指示。存儲了顯示模式 控制程序22的可讀取存儲介質(例如，RAM、ROM (Read Only Memory 只讀存儲器)、⑶-R、 DVD-R、硬碟或者閃速存儲器)成為計算機可讀取的程序產品。
權利要求
1. 一種控制顯示部的顯示模式的顯示模式控制裝置，其特徵在於照明位置確定單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第1 攝影圖像的第1攝影圖像數據，利用獲取的上述第1攝影圖像數據，確定分割上述第1攝影 圖像而得到的各個分割區域的亮度，基於所確定的每個上述分割區域的上述亮度，確定拍 攝到上述第1攝影圖像中的照明的候補的上述分割區域的位置作為照明位置；和顯示模式控制單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第2 攝影圖像的第2攝影圖像數據，利用獲取的上述第2攝影圖像數據和上述照明位置確定單 元所確定的上述照明位置，確定上述第2攝影圖像中的、位於與上述照明位置對應的位置 的上述分割區域的亮度作為照明的亮度，基於所確定的上述照明的亮度來控制上述顯示模 式。
2.根據權利要求1所述的顯示模式控制裝置，其特徵在於上述照明位置確定單元利用表示攝影時刻滿足預定基準的上述第1攝影圖像的上述 第1攝影圖像數據。
3.根據權利要求1或者2所述的顯示模式控制裝置，其特徵在於上述照明位置確定單元多次獲取上述第1攝影圖像數據，對於獲取的多個上述第1攝 影圖像數據中的每一個第1攝影圖像數據，確定每個上述分割區域的上述亮度，利用所確 定的上述亮度，確定在各個上述第1攝影圖像數據中上述亮度都滿足第1基準的上述分割 區域的位置作為上述照明位置。
4.根據權利要求3所述的顯示模式控制裝置，其特徵在於上述照明位置確定單元確定關於各個上述第1攝影圖像數據的、上述亮度滿足第1基 準預定次數以上的上述分割區域作為上述照明位置。
5.根據權利要求3所述的顯示模式控制裝置，其特徵在於上述照明位置確定單元確定關於各個上述第1攝影圖像數據的、上述亮度的變化滿足 第2基準的上述分割區域的位置作為上述照明位置。
6.根據權利要求1 5中的任一項所述的顯示模式控制裝置，其特徵在於上述顯示模式控制單元多次獲取上述第2攝影圖像數據，利用獲取的多個上述第2攝 影圖像數據，多次確定上述照明的亮度，基於所確定的多個上述照明的亮度，確定上述照明 的亮度的變化狀態，基於所確定的上述變化狀態來控制上述顯示模式。
7.根據權利要求6所述的顯示模式控制裝置，其特徵在於上述顯示模式控制單元，在上述變化狀態是向變暗變化的狀態、並且上述變化狀態的 變化度滿足第3基準的情況下，將上述顯示模式切換成省電模式。
8.根據權利要求6或者7所述的顯示模式控制裝置，其特徵在於上述顯示模式控制單元，在上述變化狀態是向變暗變化的狀態的情況下，檢測與通過 多個上述第2攝影圖像數據表現的上述第2攝影圖像中的上述照明位置對應的上述分割區 域以外的分割區域的亮度的變化，在上述分割區域的亮度的變化滿足第4基準的情況下， 不將上述顯示模式切換成省電模式。
9.根據權利要求6 8中的任一項所述的顯示模式控制裝置，其特徵在於上述顯示模式控制單元，在上述變化狀態是向變亮變化的狀態、並且上述變化狀態的變化度滿足第5基準的情況下，將上述顯示模式從省電模式切換成其它模式。
10.根據權利要求1 9中的任一項所述的顯示模式控制裝置，其特徵在於還具備檢測上述顯示部的移動的移動檢測單元，上述照明位置確定單元，在上述移動檢測單元檢測到移動的情況下，重新確定上述照 明位置。
11.根據權利要求1 10中的任一項所述的顯示模式控制裝置，其特徵在於還具備接受用戶操作的操作部，上述照明位置確定單元根據用戶對上述操作部的操作確定上述照明位置。
12.—種控制顯示部的顯示模式的顯示模式控制裝置，其特徵在於具備顯示模式控制單元，其獲取表示對上述顯示部的顯示面的前方進行攝影而得到 的攝影圖像的攝影圖像數據，利用獲取的上述攝影圖像數據和預先設定的圖像內的預定區 域，確定上述攝影圖像中的與上述預定區域對應的位置的亮度作為照明的亮度，基於所確 定的上述照明的亮度，控制上述顯示模式。
13.—種顯示模式控制程序，其特徵在於，使控制顯示部的顯示模式的計算機執行以下步驟照明位置確定步驟，獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第1攝 影圖像的第1攝影圖像數據，利用獲取的上述第1攝影圖像數據，確定分割上述第1攝影圖 像而得到的各個分割區域的亮度，基於所確定的每個上述分割區域的上述亮度，確定拍攝 到上述第1攝影圖像中的照明的候補的上述分割區域的位置作為照明位置；和顯示模式控制步驟，獲取表示對上述顯示部的顯示面的前方進行攝影而得到的第2攝 影圖像的第2攝影圖像數據，利用獲取的上述第2攝影圖像數據和在上述照明位置確定步 驟中所確定的上述照明位置，確定上述第2攝影圖像中的位於與上述照明位置對應的位置 的上述分割區域的亮度作為照明的亮度，基於所確定的上述照明的亮度，控制上述顯示模 式。
全文摘要
本發明提供一種考慮用戶的行動來進行顯示模式控制的顯示模式控制裝置以及顯示模式控制程序。顯示模式控制裝置具備顯示模式控制單元，其獲取表示對顯示部的顯示面的前方進行攝影而得到的攝影圖像的攝影圖像數據，利用獲取的上述攝影圖像數據和確定預先設定的圖像內的照明的位置的照明位置，確定上述攝影圖像中的與上述照明位置對應的位置的亮度作為照明的亮度，基於所確定的上述照明的亮度，控制顯示模式。
文檔編號G09G3/20GK102034421SQ201010546029
公開日2011年4月27日 申請日期2010年9月28日 優先權日2009年9月29日
發明者菊地正哲 申請人:卡西歐計算機株式會社