手勢判別裝置、手勢判別方法、以及電腦程式的製作方法
2023-10-07 10:15:24 2
手勢判別裝置、手勢判別方法、以及電腦程式的製作方法
【專利摘要】本發明涉及手勢判別裝置、手勢判別方法、以及電腦程式。在基於手勢進行處理的裝置中使用戶的便利性比以往提高。在具有選擇性地顯示多個畫面中的一個的觸摸面板顯示器的圖像形成裝置中，預先存儲這些畫面的每一個的、多個手勢的各自的區分規則。然後，圖像形成裝置如果檢測出用戶對觸摸面板顯示器的動作，則讀出顯示中的畫面的規則（#701），並基於讀出的規則來判別該動作所表示的手勢（#703～#708）。
【專利說明】手勢判別裝置、手勢判別方法、以及電腦程式
【技術領域】
[0001]本發明涉及判別例如敲擊(tap)以及輕拂(flick)等手勢(gesture)的技術。
【背景技術】
[0002]近年來,觸摸面板的技術在提高，能夠實現敲擊、長按(long tap)、雙擊(doubletap)、輕拂、拖動(drag)、捏合(pinch in)、以及拉伸(pinch out)等各種各樣的手勢。此夕卜，被稱為「3D手勢輸入設備」或者「3D動作(mot1n)輸入設備」等的、檢測三維空間中的手勢的裝置也在開始得到普及。
[0003]用戶通過靈活運用手勢，能夠比以往更容易進行數據以及指令的輸入。
[0004]另一方面，如果手勢的種類變得豐富，則用戶所想的手勢通過計算機被識別為是另一手勢的情況會增多。
[0005]因此，為了更準確地進行手勢的區分，提出了如下的技術。如果在定時器計時的時間T經過規定時間Tmax之前進行了觸摸，則CPU基於在存儲器中記錄的各觸摸位置的坐標信息，算出觸摸位置的方差S。當算出的各方差Sx、Sy分別小於閾值Sxmax、Symax時，CPU將輸入操作判別為是不包含移動的操作(敲擊操作)。當各方差Sx、Sy不是分別小於閾值Sxmax>Symax時,CPU將輸入操作判別為是包含移動的操作(拖動操作或者輕拂操作)(專利文獻I)。
[0006]或者，即便在取得了對操作面進行的輸入操作的接觸時間後，也檢查操作體是否還置留在操作面上，在尚且置留時判定為觸摸操作，在沒有置留時判定為敲擊操作(專利文獻2)。
[0007]或者，設定與手寫筆(stylus)或手指等指示器(pointer)的移動量或者移動時間相應的基準速度，並基於指示器的移動速度和基準速度，判定基於指示器的輕拂操作的產生(專利文獻3)。
[0008][專利文獻I](日本)特開2011-134212號公報
[0009][專利文獻2](日本)特開2007-156634號公報
[0010][專利文獻3](日本)特開2012-128830號公報
[0011]但是，對於人而言始終進行同一動作是困難的。因此，即使用戶打算進行同一手勢，計算機也未必會始終判別為是同一手勢。其結果，由裝置執行用戶意圖外的處理，可能會對用戶產生不利。或者，對於用戶而言有時不易使用。
【發明內容】
[0012]本發明鑑於這樣的問題點，其目的在於在基於手勢進行處理的裝置中比以往提高用戶的便利性。
[0013]本發明的一個方式的手勢判別裝置具有:顯示部件，選擇性地顯示多個畫面中的一個；存儲部件，存儲所述多個畫面的各自的、多個手勢的各自的區分規則；檢測部件，檢測用戶的動作；以及判別部件，從所述多個手勢中，將通過所述檢測部件檢測出的所述動作所表示的手勢，基於在檢測出該動作時所述多個畫面中的由所述顯示部件所顯示的畫面即當前畫面的所述規則進行判別。
[0014]優選的是，所述顯示部件顯示目的地選擇畫面作為所述多個畫面中的一個，該目的地選擇畫面使用於通過所述用戶進行第一手勢而選擇數據的目的地的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現，所述存儲部件存儲如下規則作為所述目的地選擇畫面的所述規則，即與所述當前畫面為所述目的地選擇畫面以外的其他畫面的情況相t匕，當所述當前畫面為該目的地選擇畫面的情況下，所述動作所表示的手勢更容易被判別為是所述第二手勢。
[0015]或者，所述顯示部件顯示作業一覽畫面作為所述多個畫面中的一個，該作業一覽畫面使用於通過所述用戶進行第一手勢而選擇輸出屬性的作業的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現，所述存儲部件存儲如下規則作為所述作業一覽畫面的所述規則，即與所述當前畫面為所述作業一覽畫面以外的其他畫面的情況相比，當所述當前畫面為該作業一覽畫面的情況下，所述動作所表示的手勢更容易被判別為是所述第一手勢。
[0016]例如，所述第一手勢是敲擊，所述第二手勢是輕拂。或者，所述第一手勢是長按，所述第二手勢是拖動。或者，所述第一手勢是空中敲擊，所述第二手勢是空中輕拂。
[0017]根據本發明，在基於手勢進行處理的裝置中能夠比以往提高用戶的便利性。
【專利附圖】
【附圖說明】
[0018]圖1是表示內聯網的整體結構的例子的圖。
[0019]圖2是表示圖像形成裝置的硬體結構的例子的圖。
[0020]圖3是表示圖像形成裝置的功能結構的例子的圖。
[0021 ]圖4是表示敲擊閾值數據的例子的圖。
[0022]圖5是表示區分敲擊以及輕拂的處理的流程的例子的流程圖。
[0023]圖6是表示文檔發送畫面的例子的圖。
[0024]圖7是表示作業歷史確認畫面的例子的圖。
[0025]圖8 (A)?(B)是表示每個畫面的敲擊以及輕拂的判別結果的例子的圖。
[0026]圖9是表示圖像形成裝置的功能結構的變形例的圖。
[0027]圖10是表示長按閾值數據的例子的圖。
[0028]圖11是表示區分長按以及拖動的處理的流程的例子的流程圖。
[0029]圖12是表示長按前的箱(box)文檔(document)輸出畫面的例子的圖。
[0030]圖13是表示長按前的作業歷史確認畫面的例子的圖。
[0031]圖14是表示長按後的箱文檔輸出畫面的例子的圖。
[0032]圖15是表示長按後的作業歷史確認畫面的例子的圖。
[0033]圖16 (A)?(B)是表示每個畫面的長按以及拖動的判別結果的例子的圖。
[0034]圖17是表示圖像形成裝置的功能結構的變形例的圖。
[0035]圖18是表示空中敲擊閾值數據的例子的圖。
[0036]圖19是表示區分空中敲擊以及空中輕拂的處理的流程的例子的流程圖。
[0037]圖20 (A)?(B)是表示每個畫面的空中敲擊以及空中輕拂的判別結果的例子的圖。
[0038]圖21是表示區分敲擊以及輕拂的處理的流程的變形例的流程圖。
[0039]標號說明
[0040]I圖像形成裝置(手勢判別裝置)
[0041]1e觸摸面板顯示器(檢測部件、顯示部件)
[0042]1n視頻攝像機(檢測部件)
[0043]121敲擊閾值存儲部(存儲部件)
[0044]123動作特性信息取得部(檢測部件、接收部件)
[0045]126手勢確定部(判別部件)
[0046]131長按閾值存儲部(存儲部件)
[0047]133動作特性信息取得部(檢測部件、接收部件)
[0048]136手勢確定部(判別部件)
[0049]151空中敲擊閾值存儲部(存儲部件)
[0050]153動作特性信息取得部(檢測部件、接收部件)
[0051]156手勢確定部(判別部件)
[0052]5PD敲擊閾值數據
[0053]5PE長按閾值數據
[0054]5PF空中敲擊閾值數據
[0055]5MT動作特性數據
[0056]5MU動作特性數據
[0057]61文檔發送畫面
[0058]62作業歷史確認畫面
[0059]63箱文檔輸出畫面
[0060]64作業歷史確認畫面
【具體實施方式】
[0061][第一實施方式]
[0062]圖1是表示內聯網3的整體結構的例子的圖。圖2是表示圖像形成裝置I的硬體結構的例子的圖。圖3是表示圖像形成裝置I的功能結構的例子的圖。
[0063]如圖1所示，內聯網3由圖像形成裝置1、終端裝置2、以及通信線路3NW等構成。圖像形成裝置I和終端裝置2能夠經由通信線路3NW進行通信。作為通信線路3NW，可利用公共線路、專用線、網際網路、或者所謂的LAN (區域網)線路等。
[0064]圖像形成裝置I 一般是被稱為複合機或者MFP (多功能外圍設備)等的裝置，是匯集了複印、網絡列印、掃描、傳真、箱、郵件收發器(mailer)等功能的裝置。
[0065]「網絡列印(network printing)功能」是從終端裝置2接收圖像數據，並基於該圖像數據將圖像印刷到用紙上的功能。有時也被稱為「網絡列印(network print)」或者「PC列印」。
[0066]「箱功能」是用戶預先對每個用戶提供被稱為「箱」或者「個人箱(personal box)」等的存儲區域，各個用於通過自己的存儲區域來保存並管理圖像數據等數據的功能。箱相當於個人計算機中的「文件夾(folder)」或者「目錄(directory)」。
[0067]如圖2所示，圖像形成裝置I由中央處理裝置10a、RAM(隨機存取存儲器)10b、R0M(只讀存儲器)10c、大容量存儲裝置10d、觸摸面板顯示器10e、硬鍵面板10f、NIC (網絡接口卡)10g、數據機10h、掃描單元101、圖像存儲部10j、圖像處理單元10k、列印單元10m、以及視頻攝像機1n等構成。
[0068]觸摸面板顯示器1e適當選擇性地顯示用於對用戶提供消息的畫面、表示處理結果的畫面、或者用戶用於對圖像形成裝置I輸入數據以及指令的畫面等。此外，觸摸面板顯示器1e檢測被觸摸的位置，並將其位置通知給中央處理裝置10a。
[0069]硬鍵面板1f由數字鍵、開始鍵、停止鍵、以及功能鍵等所謂的硬體鍵構成。
[0070]用戶通過操作觸摸面板顯示器1e或者硬鍵面板1f，能夠對圖像形成裝置I提供指令或者輸入數據。尤其，能夠通過進行敲擊、長按、輕拂、以及拖動等手勢而進行輸入。這些手勢可通過一邊觸摸觸摸面板顯示器1e的顯示面一邊以規定方式移動手指而進行。
[0071]NIClOg是用於通過TCP/IP (傳輸控制協議/網際網路協議)等協議與終端裝置2等的裝置進行通信的裝置。
[0072]數據機1h是用於通過G3等協議與傳真終端進行通信的裝置。
[0073]掃描單元1i是讀取在用紙中記載的文件、照片、繪畫、或者圖表等文檔而生成圖像數據。
[0074]圖像存儲部1j存儲通過掃描單元1i獲得的圖像數據。此外，還能夠存儲通過NIClOg或者數據機1h接收的圖像數據。
[0075]圖像處理單元1k對圖像存儲部1j中存儲的圖像數據，進行頂底校正、傾斜校正、汙點去除、或者解析度變換等圖像處理。
[0076]列印單元1m基於在圖像存儲部1j中存儲的圖像數據，在用紙上印刷文檔。
[0077]視頻攝像機1n是拍攝用戶的手指的活動的裝置，為了判別空中手勢的種類而使用。空中手勢有時也被稱為「3D手勢」或者「三維手勢」等。
[0078]在ROMlOc或者大容量存儲裝置1d中存儲了用於實現圖3所示的手勢判別部101、畫面顯示控制部102、以及作業執行控制部103等的功能的程序。該程序根據需要被載入RAMlOb,且通過中央處理裝置1a執行。
[0079]作為大容量存儲裝置10d，利用硬碟或者SSD (固態驅動)等非易失性的記錄介質。作為中央處理裝置10a，利用CPU (中央處理單元)或者MPU (微處理單元)等。
[0080]手勢判別部101由敲擊閾值存儲部121、敲擊閾值讀出部122、動作特性信息取得部123、距離比較部124、時間比較部125、以及手勢確定部126等構成。並且，判定用戶對觸摸面板顯示器1e的操作是什麼手勢。
[0081]尤其，在第一實施方式中，手勢判別部101將對觸摸面板顯示器1e的操作(動作)所表示的手勢是敲擊還是輕拂，基於與進行該動作時所顯示的畫面(以下，記載為「當前(current)畫面」)相應的條件進行判定。
[0082]圖1的終端裝置2是用於使用圖像形成裝置I提供的各種功能的客戶機。作為終端裝置2，可利用個人計算機、智慧型手機、平板計算機、或者可攜式電話終端等。
[0083]以下，參照流程圖等說明圖3所示的圖像形成裝置I的手勢判別部101的各部的功能。
[0084]圖4是表示敲擊閾值數據5H)的例子的圖。圖5是表示區分敲擊以及輕拂的處理的流程的例子的流程圖。圖6是表示文檔發送畫面61的例子的圖。圖7是表示作業歷史確認畫面62的例子的圖。圖8是表示每個畫面的敲擊以及輕拂的判別結果的例子的圖。
[0085]如圖4所示，敲擊閾值存儲部121存儲了每個畫面的敲擊閾值數據5PD。在敲擊閾值數據5ro中示出了畫面識別符G1、距離閾值Dmax_a、以及時間閾值Tmin_a。
[0086]畫面識別符Gi是用於識別畫面的識別符。距離閾值Dmax_a以及時間閾值Tmin_a是在區分敲擊以及輕拂時使用的閾值。
[0087]觸摸面板顯示器1e檢測到一根手指的觸摸的情況下，敲擊閾值讀出部122乃至手勢確定部126按照圖5所示的順序進行處理。
[0088]敲擊閾值讀出部122從敲擊閾值存儲部121讀出當前畫面的敲擊閾值數據5PD(#701)。
[0089]動作特性信息取得部123根據觸摸面板顯示器1e的觸摸的檢測結果，取得表示進行了該觸摸的時間(以下，記載為「觸摸持續時間Ta」)以及手指移動的距離(以下，記載為「移動距離Da」)的動作特性數據5MT (#702)。
[0090]距離比較部124比較該動作特性數據5MT所示的移動距離Da和該敲擊閾值數據5PD所示的距離閾值Dmax_a,判別該移動距離Da是否小於該距離閾值Dmax_a (#703)。
[0091]在該移動距離Da小於該距離閾值Dmax_a時(#704中「是」)，時間比較部125比較該動作特性數據5MT所示的觸摸持續時間Ta和該敲擊閾值數據5H)所示的時間閾值Tmin_a，判別該觸摸持續時間Ta是否超過了該時間閾值Tmin_a (#705)。
[0092]手勢確定部126根據距離比較部124以及時間比較部125的判別結果，如下確定對觸摸面板顯示器1e的動作所表示的手勢。在該移動距離Da小於該距離閾值Dmax_a，並且該觸摸持續時間Ta超過了該時間閾值Tmin_a時(#706中「是」)，將本次的動作所表示的手勢判別為敲擊(#707)。在該移動距離Da為該距離閾值Dmax_a以上,或者,該觸摸持續時間Ta為該時間閾值Tmin_a以下時(#704中「否」或者#706中「否」)，將本次的動作所表示的手勢判別為輕拂(#708)。
[0093]這裡，一邊比較顯示著圖6所示的文檔發送畫面61的情況以及顯示著圖7所示的作業歷史確認畫面62的情況，一邊說明手勢的判別結果的差異。
[0094]文檔發送畫面61是用戶用於輸入文檔發送作業的條件以及指令的畫面。「文檔發送作業」是從用紙讀取文檔而將其電子數據化，並通過傳真或者電子郵件發送到用戶指定的目的地的作業。
[0095]文檔發送畫面61中設置了目的地指定區域61e。在目的地指定區域61e中，配置了預先註冊在地址簿上的電子郵件地址以及傳真號各自的選擇按鈕61b。在地址簿中註冊了多個電子郵件地址以及傳真號的情況下，無法一次性地將所有的選擇按鈕61b配置到目的地指定區域61e。該情況下，僅配置一部分(在圖6的例子中為15個)選擇按鈕61b。並且，每當進行規定的手勢時，目的地指定區域61e將滾動，剩餘的選擇按鈕61b依次被配置在目的地指定區域61e。
[0096]用戶通過輕拂目的地指定區域61e中的任意位置，能夠使目的地指定區域61e滾動。此外，關於設為文檔的目的地的電子郵件地址或者傳真號，能夠通過敲擊與其對應的選擇按鈕61b來指定。
[0097]但是，儘管用戶自以為進行了輕拂但圖像形成裝置I識別為選擇按鈕61b被敲擊的情況並不理想。這是因為如果用戶不注意這一點，則文檔會被發送到意料外的目的地。因此，安全的是，就算用戶自以為進行了敲擊，圖像形成裝置I也識別為被輕拂。
[0098]本來，進行敲擊的情況下，用戶應當使觸摸面板顯示器上進行觸摸的位置不改變。但是，如果在位置哪怕有一點(dot)變化時就判斷為不是敲擊而是輕拂，則對於用戶而言，敲擊將會變得困難。因此，一般預先設定作為敲擊而允許的位置變化的標準值(最大值)。以下，將該最大值記載為「距離默認最大值Do_a」。
[0099]此外，通常，觸摸面板顯示器被觸摸的時間在輕拂時比敲擊時更長。以下，將預先設定的、敲擊時被觸摸的時間的一般長度和輕拂時被觸摸的時間的一般長度的中間值記載為「時間默認最小值To_a」。
[0100]在顯示著文檔發送畫面61時，根據上述的理由，期望用戶進行的手勢被判別為是輕拂的傾向比通常更強。
[0101]因此，在文檔發送畫面61的敲擊閾值數據5PD (參照圖4)中，設定比距離默認最大值Do_a還要小的值作為距離閾值Dmax_a。此外，設定比時間默認最小值To_a還要大的值作為時間閾值Tmin_a。
[0102]以下，將文檔發送畫面61的距離閾值Dmax_a以及時間閾值Tmin_a分別記載為「距離閾值d61」以及「時間閾值t61」。
[0103]另一方面，圖7的作業歷史確認畫面62是用戶用於確認過去圖像形成裝置I執行的作業的歷史的畫面。
[0104]在作業歷史確認畫面62中設置了作業一覽區域62e。在作業一覽區域62e中，按照由新到舊的順序，每個作業的選擇按鈕62b從上到下配置成一列。在有多個作業時，無法一次性地將所有的選擇按鈕62b配置到作業一覽區域62e。該情況下，僅配置一部分(在圖7的例子中為7個)選擇按鈕62b。然後，每當進行規定的操作時，作業一覽區域62e將滾動，剩餘的選擇按鈕62b被依次配置在作業一覽區域62e。
[0105]用戶通過向上或者向下輕拂作業一覽區域62e中的任意位置，能夠使作業一覽區域62e滾動。此外，想要使表示作業屬性的細節(執行條件、指令源等)的畫面顯示時，能夠通過敲擊與該作業對應的選擇按鈕62b來發出指令。
[0106]一般，用戶大多會確認更加新的作業的細節。因此，認為在作業歷史確認畫面62中與輕拂相比主要更多地進行敲擊。
[0107]因此，在作業歷史確認畫面62的敲擊閾值數據5H)中，設定比文檔發送畫面61的敲擊閾值數據5PD中所示的距離閾值Dmax_a (B卩，距離閾值d61)還要大的值作為距離閾值Dmax_a。或者，也可以設定比距離默認最大值Do_a還要大的值。
[0108]此外，在作業歷史確認畫面62的敲擊閾值數據5H)中，設定比文檔發送畫面61的敲擊閾值數據5PD中所示的時間閾值Tmin_a (即，時間閾值t61)還要小的值作為時間閾值Tmin_a。或者，也可以設定比時間默認最小值To_a還要小的值。
[0109]以下,將作業歷史確認畫面62的距離閾值Dmax_a以及時間閾值Tmin_a分別記載為「距離閾值d62」以及「時間閾值t62」。
[0110]如上所述，距離閾值d62大於距離閾值d61。此外，時間閾值t62小於時間閾值t61。因此，若根據圖5的處理，則比較圖8 (A)和(B)可知，與顯示了作業歷史確認畫面62的情況相比，顯示了文檔發送畫面61的情況下，用戶進行的手勢更多地被判別為是輕拂。此外，與顯示了文檔發送畫面61的情況相比，顯示了作業歷史確認畫面62的情況下，用戶進行的手勢更多地被判別為是敲擊。
[0111]另外，在顯示了沒有提供敲擊閾值數據5H)的畫面的情況下，手勢判別部101基於距離默認最大值Do_a或者時間默認最小值To_a等，根據以往的方法來判別對觸摸面板顯示器1e的動作表示什麼手勢。此外，在顯示了文檔發送畫面61以及作業歷史確認畫面62等提供了敲擊閾值數據5PD的畫面的情況下，敲擊以及輕拂以外的手勢也通過以往的方法來判別。
[0112]返回到圖3，畫面顯示控制部102以及作業執行控制部103基於由手勢判別部101判別的手勢以及其對象(以下，記載為「操作內容」)，如下執行處理。
[0113]畫面顯示控制部102根據操作內容來滾動或者變更當前畫面。
[0114]作業執行控制部103控制圖2所示的各個硬體，以便根據操作內容執行各種作業。
[0115]畫面顯示控制部102以及作業執行控制部103能夠通過現有的作業系統、固件、或者應用程式等來實現。
[0116]根據第一實施方式，能夠根據畫面比以往更好地區分敲擊以及輕拂。由此，能夠比以往減少對用戶產生不利的情況。或者，能夠比以往更容易使用。
[0117][第二實施方式]
[0118]圖9是表示圖像形成裝置I的功能結構的變形例的圖。圖10是表示長按閾值數據5PE的例子的圖。圖11是表示區分長按以及拖動的處理的流程的例子的流程圖。圖12是表示長按前的箱文檔輸出畫面63的例子的圖。圖13是表示長按前的作業歷史確認畫面64的例子的圖。圖14是表不長按後的箱文檔輸出畫面63的例子的圖。圖15是表不長按後的作業歷史確認畫面64的例子的圖。圖16是表示每個畫面的長按以及拖動的判別結果的例子的圖。
[0119]在第一實施方式中，圖像形成裝置I基於與當前畫面相應的閾值判別了敲擊以及輕拂。在第二實施方式中，基於與當前畫面相應的閾值來判別長按以及拖動。
[0120]第二實施方式中的內聯網3的結構與第一實施方式的情況相同，如圖1所示。圖像形成裝置I的硬體結構以及功能結構也基本上與第一實施方式的情況相同，分別如圖2以及圖3所示。但是，如圖9所示，手勢判別部101由長按閾值存儲部131、長按閾值讀出部132、動作特性信息取得部133、距離比較部134、時間比較部135、以及手勢確定部136等構成。
[0121]以下，參照圖11的流程圖等說明手勢判別部101的各部的功能。針對與第一實施方式重複的點則省略說明。
[0122]如圖10所示，長按閾值存儲部131存儲了每個畫面的長按閾值數據5PE。在長按閾值數據5PE中示出了畫面識別符G1、距離閾值Dmax_b、以及時間閾值Tmin_b。距離閾值Dmax_b以及時間閾值Tmin_b是在區分長按和拖動時使用的閾值。
[0123]觸摸面板顯示器1e檢測到一根手指的觸摸的情況下，長按閾值讀出部132乃至手勢確定部136按照圖11所示的順序進行處理。
[0124]長按閾值讀出部132從長按閾值存儲部131讀出當前畫面的長按閾值數據5PE(#721)。
[0125]動作特性信息取得部133取得表示進行該觸摸的時間(以下，記載為「觸摸持續時間Tb」)以及手指移動的距離(以下，記載為「移動距離Db」)的動作特性數據5MU (#722)。
[0126]距離比較部134比較該動作特性數據5MU所示的移動距離Db和該長按閾值數據5PE所示的距離閾值Dmax_b,判別該移動距離Db是否小於該距離閾值Dmax_b (#723)。
[0127]在該移動距離Db小於該距離閾值Dmax_b時(#724中「是」)，時間比較部135比較該動作特性數據5MU所示的觸摸持續時間Tb和該長按閾值數據5PE所示的時間閾值Tmin_b，判別該觸摸持續時間Tb是否超過了該時間閾值Tmin_b (#725)。
[0128]手勢確定部136根據距離比較部134以及時間比較部135的判別結果，如下確定對觸摸面板顯示器1e的操作(動作)所表示的手勢。在該移動距離Db小於該距離閾值Dmax_b，並且，該觸摸持續時間Tb超過了該時間閾值Tmin_b時(#726中「是」)，將本次的動作所表示的手勢判別為長按(#727)。在該移動距離Db為該距離閾值Dmax_b以上,或者,該觸摸持續時間Tb為該時間閾值Tmin_b以下時(#724中「否」或者#726中「否」)，將本次的動作所表示的手勢判別為拖動(#728)。
[0129]這裡，一邊比較顯示著圖12所示的箱文檔輸出畫面63的情況以及顯示著圖13所示的作業歷史確認畫面64的情況，一邊說明手勢的判別結果的差異。
[0130]箱文檔輸出畫面63是用戶用於輸入箱文檔發送作業或者箱文檔印刷作業的指令的畫面。「箱文檔發送作業」是將箱中作為圖像數據而保存的文檔發送到其他裝置的作業。「箱文檔印刷作業」是將箱中作為圖像數據而保存的文檔印刷到用紙上的作業。
[0131]在箱文檔輸出畫面63中設置了文檔指定區域63e。在文檔指定區域63e中配置了箱中作為圖像數據而保存的每個文檔的選擇按鈕63b。在註冊有多個文檔的情況下，無法一次性地將所有的選擇按鈕63b配置到文檔指定區域63e。該情況下，僅配置一部分(在圖12的例子中為8個)選擇按鈕63b。並且，每當進行規定的手勢時，文檔指定區域63e將滾動，剩餘的選擇按鈕63b被依次配置到文檔指定區域63e。
[0132]用戶通過拖動文檔指定區域63e中的任意位置，能夠使文檔指定區域63e滾動。
[0133]此外,用戶通過如下進行長按以及拖放(drag and drop),能夠將箱文檔發送作業或者箱文檔印刷作業的指令提供給圖像形成裝置I。
[0134]用戶長按與想要發送或者印刷的文檔對應的選擇按鈕63b。但是，在該時刻尚未將手指從觸摸面板顯示器1e拿開。即，將選擇按鈕63b持續觸摸一定的時間以上。那麼，在文檔指定區域63e的上方，會如圖14那樣現出兩個作業圖標63il、63i2。作業圖標63il是與箱文檔發送作業對應的圖標。作業圖標63i2是與箱文檔印刷作業對應的圖標。並且，用戶在想要執行箱文檔發送作業時將其選擇按鈕63b拖動到作業圖標63il之上後放開(drop)，在想要執行箱文檔印刷作業時將其選擇按鈕63b拖動到作業圖標63i2之上後放開。
[0135]當選擇按鈕63b在作業圖標63il上放開時，與該選擇按鈕63b對應的文檔的圖像數據被發送到其他裝置。另一方面，在作業圖標63i2上放開時，與該選擇按鈕63b對應的文檔被印刷到用紙上。
[0136]但是，可能會有以下情況，即儘管用戶自以為只進行了拖動，但圖像形成裝置I識別為選擇按鈕63b被長按且接著進行了拖動。但是，這樣的識別並不理想。這是因為有時文檔會被發送到用戶意料外的目的地或者進行無用的印刷。因此，安全的是，就算用戶自以為是在長按後進行了拖動，圖像形成裝置I也識別為只進行了拖動。
[0137]本來，在進行長按的情況下，與進行敲擊的情況同樣，用戶應當使相對於觸摸面板顯示器，用戶觸摸的位置不改變。但是，如果在位置哪怕有一點變化時就判斷為不是長按而是拖動，則對於用戶而言，長按將會變得困難。因此，一般預先設定作為長按而允許的位置變化的標準值(最大值)。以下，將該最大值記載為「距離默認最大值Do_b」。
[0138]此外，通常，觸摸面板顯示器被觸摸的時間在拖動時比長按時更長。以下，將預先設定的、長按時被觸摸的時間的一般長度和拖動時被觸摸的時間的一般長度的中間值記載為「時間默認最小值To_b」。
[0139]在顯示著箱文檔輸出畫面63時，根據上述的理由，期望用戶的動作所表示的手勢與被判別為長按以及拖動相比被判別為只是拖動的傾向比通常更強。
[0140]因此，在箱文檔輸出畫面63的長按閾值數據5PE (參照圖10)中，設定比距離默認最大值Do_b還要小的值作為距離閾值Dmax_b。此外,設定比時間默認最小值To_b還要大的值作為時間閾值Tmin_b。
[0141]以下，將箱文檔輸出畫面63的距離閾值Dmax_b以及時間閾值Tmin_b分別記載為「距離閾值d63」以及「時間閾值t63」。
[0142]另一方面，圖13的作業歷史確認畫面64與作業歷史確認畫面62 (參照圖7)同樣，是用戶用於確認過去圖像形成裝置I執行的作業的歷史的畫面。
[0143]作業歷史確認畫面64的結構也與作業歷史確認畫面62的結構基本相同。即，在作業歷史確認畫面64中設置了作業一覽區域64e。在作業一覽區域64e中，按照由新到舊的順序，每個作業的選擇按鈕64b從上到下配置成一列。在有多個作業時，僅配置一部分選擇按鈕64b。然後，每當進行規定的操作時，作業一覽區域64e將滾動，剩餘的選擇按鈕64b被依次配置在作業一覽區域64e。
[0144]但是，作業一覽區域64e的用於滾動的手勢以及用於選擇作業的手勢與作業歷史確認畫面62的情況不同。
[0145]用戶通過向上或者向下拖動作業一覽區域64e中的任意位置，能夠使作業一覽區域64e滾動。
[0146]此外，想要使表示作業的細節的畫面顯示時，用戶如下進行操作。
[0147]用戶長按與已確認細節的作業對應的選擇按鈕64b。但是，在該時刻尚未將手指從觸摸面板顯示器1e拿開。即，將選擇按鈕64b持續觸摸一定的時間以上。那麼，在作業一覽區域64e的上方，會如圖15那樣現出細節圖標64i。然後，用戶將該選擇按鈕64b拖動到細節圖標64i之上後放開。
[0148]如前所述，一般，用戶大多會確認更加新的作業的細節。因此，認為在作業歷史確認畫面64中，與只有長按的操作相比主要進行將長按和拖動進行了組合的連續操作。
[0149]因此，在作業歷史確認畫面64的長按閾值數據5PE中，設定比箱文檔輸出畫面63的長按閾值數據5PE中所示的距離閾值Dmax_b (B卩，距離閾值d63)還要大的值作為距離閾值Dmax_b。或者，也可以設定比距離默認最大值Do_b還要大的值。
[0150]此外，在作業歷史確認畫面64的長按閾值數據5PE中，設定比箱文檔輸出畫面63的長按閾值數據5PE中所示的時間閾值Tmin_b (即，時間閾值t63)還要小的值作為時間閾值Tmin_b。或者，也可以設定比時間默認最小值To_b還要小的值。
[0151]以下,將作業歷史確認畫面64的距離閾值Dmax_b以及時間閾值Tmin_b分別記載為「距離閾值d64」以及「時間閾值t64」。
[0152]如上所述，距離閾值d64大於距離閾值d63。此外，時間閾值t64小於時間閾值t63。因此，若根據圖11的處理，則比較圖16 (A)和(B)可知，與顯示了作業歷史確認畫面64的情況相比，顯示了箱文檔輸出畫面63的情況下，用戶進行的手勢更多地被判別為是拖動。此外，與顯示了箱文檔輸出畫面63的情況相比，顯示了作業歷史確認畫面64的情況下，用戶進行的手勢更多地被判別為是長按。
[0153]返回到圖9，畫面顯示控制部102以及作業執行控制部103與第一實施方式的情況同樣地發揮作用。但是，作為手勢的判別結果，利用手勢確定部136的判別結果。
[0154]根據第二實施方式，能夠根據畫面比以往更好地區分長按以及拖動。由此，能夠比以往減少對用戶產生不利的情況。或者，能夠比以往更容易使用。
[0155][第三實施方式]
[0156]圖17是表示圖像形成裝置I的功能結構的變形例的圖。圖18是表示空中敲擊閾值數據5PF的例子的圖。圖19是表示區分空中敲擊以及空中輕拂的處理的流程的例子的流程圖。圖20是表示每個畫面的空中敲擊以及空中輕拂的判別結果的例子的圖。
[0157]在第一實施方式以及第二實施方式中，圖像形成裝置I基於觸摸面板顯示器1e的顯示面上被觸摸的位置的變化而判別了手勢。在第三實施方式中，圖像形成裝置I判別空中手勢(air gesture).「空中手勢」是通過在觸摸面板顯示器1e的正面的空間中移動手指來表現的手勢。不觸摸觸摸面板顯示器10e。
[0158]尤其，在第三實施方式中，圖像形成裝置I區分空中敲擊以及空中輕拂。「空中敲擊」是敲擊的行為(仕草)或模擬(真似)，是將手指向觸摸面板顯示器1e靠近後立即離開的手勢。「空中輕拂」是輕拂的行為或舉止，是將手指向觸摸面板顯示器1e靠近，並移動手指以便與觸摸面板顯示器1e的顯示面平行地揮動的手勢。
[0159]第三實施方式中的內聯網3的結構與第一實施方式以及第二實施方式的情況相同，如圖1所示。圖像形成裝置I的硬體結構以及功能結構也與第一實施方式以及第二實施方式的情況相同，分別如圖2以及圖3所示。但是，如圖17所示，手勢判別部101由空中尚支擊閾值存儲部151、空中敲擊閾值讀出部152、動作特性信息取得部153、第一距尚比較部154、第二距離比較部155、以及手勢確定部156等構成。
[0160]如圖18所示，空中敲擊閾值存儲部151存儲了每個畫面的空中敲擊閾值數據5PF。在空中敲擊閾值數據5PF中示出了畫面識別符G1、顯示面距離閾值Dmax_C、以及垂直軸距離閾值Dmin_c。顯不面距離閾值Dmax_c以及垂直軸距離閾值Dmin_c是在區分空中敲擊以及空中輕拂時使用的閾值。
[0161]視頻攝像機1n檢測到手指的情況下，空中敲擊閾值讀出部152乃至手勢確定部156按照圖19所示的順序進行處理。
[0162]空中敲擊閾值讀出部152從空中敲擊閾值存儲部151讀出當前畫面的空中敲擊閾值數據 5PF (#731)。
[0163]動作特性信息取得部153通過分析由視頻攝像機1n獲得的手指的圖像，求得在與觸摸面板顯示器1e的顯示面平行的面(XY平面)中的手指的移動距離Dcl以及顯示面的垂直方向(Z軸)中的手指的移動距離Dc2 (#732)。
[0164]第一距離比較部154比較移動距離Dcl和該空中敲擊閾值數據5PF所示的顯示面距離閾值Dmax_c,判別該移動距離Dcl是否小於該顯示面距離閾值Dmax_c (#733)。
[0165]在該移動距離Dcl小於該顯示面距離閾值Dmax_c時(#734中「是」)，第二距離比較部155比較移動距離Dc2和該空中敲擊閾值數據5PF所示的垂直軸距離閾值Dmin_c，判別該移動距離Dc2是否小於該垂直軸距離閾值Dmin_c (#735)。
[0166]手勢確定部156根據第一距離比較部154以及第二距離比較部155的判別結果，如下確定空中手勢的種類。在該移動距離Dcl小於該顯示面距離閾值Dmax_C，並且，該移動距離Dc2小於該垂直軸距離閾值0!1^11_(3時(#736中「是」)，將本次的手勢判別為空中敲擊(#737)。在該移動距離Dcl為該顯示面距離閾值Dmax_c以上,或者,該移動距離Dc2為該垂直軸距離閾值Dmin_c以上時(#734中「否」或者#736中「否」)，將本次的手勢判別為空中輕拂(#738)。
[0167]這裡，一邊比較顯示著圖6所示的文檔發送畫面61的情況以及顯示著圖7所示的作業歷史確認畫面62的情況，一邊說明手勢的判別結果的差異。
[0168]文檔發送畫面61以及作業歷史確認畫面62的結構以及用途等如之前說明的那樣。但是，在第三實施方式中，代替敲擊而使用空中敲擊，代替輕拂而使用空中輕拂。
[0169]因而，在顯示著文檔發送畫面61時，期望用戶進行的手勢被判別為是空中輕拂的傾向比通常更強。
[0170]因此，在文檔發送畫面61的空中敲擊閾值數據5PF (參照圖18)中，設定比距離默認值Do_cl ( —般，作為空中敲擊而允許的XY平面上的位置變化的標準值)還要小的值作為顯示面距離閾值Dmax_C。以下，將設定的值記載為「距離閾值d611」。此外，設定比距離默認值Do_c2 (—般，作為空中敲擊而允許的Z軸方向上的位置變化的標準值)還要小的值作為垂直軸距離閾值Dmin_c。以下，將設定的值記載為「距離閾值d612」。
[0171]另一方面，在顯示著作業歷史確認畫面62時，期望用戶進行的手勢被判別為是空中敲擊的傾向比通常更強。
[0172]因此，在作業歷史確認畫面62的空中敲擊閾值數據5PF中，設定比距離閾值d611還要大的值或者比距離默認值Do_cl還要大的值作為顯示面距離閾值Dmax_C。以下，將設定的值記載為「距離閾值d621」。此外，設定比距離閾值d612還要大的值或者比距離默認值Do_c2還要大的值作為垂直軸距離閾值Dmin_c。以下，將設定的值記載為「距離閾值d622」。
[0173]如上所述，距離閾值d621小於距離閾值d611。此外，距離閾值d622小於距離閾值d612。因此，若根據圖19的處理，則比較圖20 (A)和(B)可知，與顯示了作業歷史確認畫面62的情況相比，顯示了文檔發送畫面61的情況下，用戶進行的手勢更多地被判別為是空中輕拂。此外，與顯示了文檔發送畫面61的情況相比，顯示了作業歷史確認畫面62的情況下，用戶進行的手勢更多地被判別為是空中敲擊。
[0174]返回到圖17，畫面顯示控制部102以及作業執行控制部103與第一實施方式以及第二實施方式的情況同樣地發揮作用。但是，作為手勢的判別結果，利用手勢確定部156的判別結果。
[0175]根據第三實施方式，能夠根據畫面比以往更好地區分空中敲擊以及空中輕拂。由此，能夠比以往減少對用戶產生不利的情況。或者，能夠比以往更容易使用。
[0176]圖21是表示區分敲擊以及輕拂的處理的流程的變形例的流程圖。
[0177]在第一實施方式至第三實施方式中，通過改變閾值，從而使手勢的區分規則根據畫面而不同，但也可以通過改變閾值以外的量而使之不同。
[0178]例如，也可以改變區分的算法。具體地說，在第一實施方式中，作為文檔發送畫面61的、敲擊和輕拂的區分算法，採用如圖5所示的算法。另一方面，作為作業歷史確認畫面62的算法，採用如圖21所示那樣的、如果滿足距離的條件以及時間的條件中的至少一方(#744中「是」或者#746中「是」)就判別為是敲擊的算法。
[0179]或者，也可以根據每個畫面，改變在區分手勢時使用的參數(移動距離、移動時間等)。例如，在第三實施方式中，當作業歷史確認畫面62為當前畫面時，也可以不利用與觸摸面板顯示器1e的顯示面平行的面的移動距離的條件，而是參照垂直方向的移動距離的條件。
[0180]在第一實施方式至第三實施方式中，分別利用兩個參數區分了手勢，但也可以利用一個參數進行區分。或者，也可以利用三個以上的參數進行區分。
[0181]在第一實施方式中區分了敲擊和輕拂，在第二實施方式中區分了長按和拖動，但本發明也能夠應用於區分敲擊和長按的情況、以及區分輕拂和拖動的情況。這些情況下，主要根據每個畫面而改變觸摸的持續時間的閾值即可。如果想要增強被判別為敲擊或者輕拂的傾向，則增大閾值即可。
[0182]此外，在區分由多個手指的動作所表示的手勢(多點觸摸手勢)時也能夠應用本發明。
[0183]例如，也能夠應用於兩指敲擊和兩指輕拂的區分。該情況下，與第一實施方式同樣地，通過比較移動距離或者移動時間來區分即可。
[0184]或者，也能夠應用於兩指滾動(平行移動兩根手指的手勢)和縮放(pinch)的區分。該情況下，檢測兩根手指之間的距離的變化率，若變化率的絕對值小於閾值則判別為兩指滾動，若為閾值以上則判別為縮放即可。然後，若想要增強被判別為兩指滾動的傾向，則提高閾值，若想要增強被判別為縮放的傾向，則降低閾值即可。
[0185]在第三實施方式中，通過視頻攝像機1n檢測了手指的移動距離，但也可以通過具備了三軸加速度傳感器的控制器(例如，任天堂公司的Wii遙控器或者APPLE公司的iPhone)、三維手勢控制器(例如，LEAP公司的Leap Mot1n Controller)等進行檢測。
[0186]在第一實施方式至第三實施方式中，以用戶直接操作圖像形成裝置I的情況為例進行了說明，但在通過終端裝置2遠程操作圖像形成裝置I的情況下也能夠應用本發明。該情況下，也可以通過使終端裝置2執行手勢的判別處理，並將判別結果發送到圖像形成裝置1，從而將指令或者數據輸入到圖像形成裝置I。或者，終端裝置2將動作的數據發送到圖像形成裝置1，並且在圖像形成裝置I中由動作特性信息取得部123、133、153(參照圖3、圖9、圖17)接收該數據。然後，以下通過如上所述的方法，由手勢確定部126、136、156等執行用於確定手勢的處理即可。
[0187]此外，內聯網3、圖像形成裝置I的整體或者各部的結構、處理內容、處理順序、數據的結構、畫面的結構等能夠遵照本發明的宗旨而適當變更。
【權利要求】
1.一種手勢判別裝置，其特徵在於，具有: 顯示部件，選擇性地顯示多個畫面中的一個； 存儲部件，存儲所述多個畫面的每一個的、多個手勢的各自的區分規則； 檢測部件，檢測用戶的動作；以及 判別部件，從所述多個手勢中，將通過所述檢測部件檢測出的所述動作所表示的手勢，基於在檢測出該動作時所述多個畫面中的由所述顯示部件所顯示的畫面即當前畫面的所述規則進行判別。
2.如權利要求1所述的手勢判別裝置，其中， 所述顯示部件顯示目的地選擇畫面作為所述多個畫面中的一個，該目的地選擇畫面使用於通過所述用戶進行第一手勢而選擇數據的目的地的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲如下規則作為所述目的地選擇畫面的所述規則，即與所述當前畫面為所述目的地選擇畫面以外的其他畫面的情況相比，當所述當前畫面為該目的地選擇畫面的情況下，所述動作所表示的手勢更容易被判別為是所述第二手勢。
3.如權利要求1所述的手勢判別裝置，其中， 所述顯示部件顯示作業 一覽畫面作為所述多個畫面中的一個，該作業一覽畫面使用於通過所述用戶進行第一手勢而選擇輸出屬性的作業的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲如下規則作為所述作業一覽畫面的所述規則，即與所述當前畫面為所述作業一覽畫面以外的其他畫面的情況相比，當所述當前畫面為該作業一覽畫面的情況下，所述動作所表示的手勢更容易被判別為是所述第一手勢。
4.如權利要求2或3所述的手勢判別裝置，其中， 所述第一手勢是敲擊， 所述第二手勢是輕拂。
5.如權利要求2或3所述的手勢判別裝置，其中， 所述第一手勢是長按， 所述第二手勢是拖動。
6.如權利要求2或3所述的手勢判別裝置，其中， 所述第一手勢是空中敲擊， 所述第二手勢是空中輕拂。
7.如權利要求1所述的手勢判別裝置，其中， 所述檢測部件具有觸摸面板，且檢測每個規定的時間的、所述用戶的手指正在觸摸所述觸摸面板的位置作為所述動作， 所述存儲部件存儲距離的閾值即距離閾值作為所述規則， 所述判別部件在從通過所述檢測部件檢測出的所述位置所求的所述手指的移動距離小於所述距離閾值時，將所述動作所表示的手勢判別為是第一手勢，當該移動距離超過該距離閾值時，將所述動作所表示的手勢判別為是第二手勢。
8.如權利要求7所述的手勢判別裝置，其中， 所述顯示部件顯示目的地選擇畫面作為所述多個畫面中的一個，該目的地選擇畫面使用於通過所述用戶進行第一手勢而選擇數據的目的地的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲比所述目的地選擇畫面以外的其他畫面的所述距離閾值還要小的值作為所述目的地選擇畫面的所述距離閾值。
9.如權利要求7所述的手勢判別裝置，其中， 所述顯示部件顯示作業一覽畫面作為所述多個畫面中的一個，該作業一覽畫面使用於通過所述用戶進行第一手勢而選擇輸出屬性的作業的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲比所述作業一覽畫面以外的其他畫面的所述距離閾值還要大的值作為所述作業一覽畫面的所述距離閾值。
10.如權利要求1所述的手勢判別裝置，其中， 所述檢測部件具有觸摸面板，且檢測每個規定的時間的、所述用戶的手指正在觸摸所述觸摸面板的位置作為所述動作， 所述存儲部件存儲時間的閾值即時間閾值作為所述規則， 所述判別部件在通過所述檢測部件連續檢測出所述位置的觸摸持續時間超過所述時間閾值時，將所述 動作所表示的手勢判別為是第一手勢，當該觸摸持續時間小於該時間閾值時，將所述動作所表示的手勢判別為是第二手勢。
11.如權利要求10所述的手勢判別裝置，其中， 所述顯示部件顯示目的地選擇畫面作為所述多個畫面中的一個，該目的地選擇畫面使用於通過所述用戶進行第一手勢而選擇數據的目的地的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲比所述目的地選擇畫面以外的其他畫面的所述時間閾值還要大的值作為所述目的地選擇畫面的所述時間閾值。
12.如權利要求10所述的手勢判別裝置，其中， 所述顯示部件顯示作業一覽畫面作為所述多個畫面中的一個，該作業一覽畫面使用於通過所述用戶進行第一手勢而選擇輸出屬性的作業的多個按鈕，根據所述用戶進行的第二手勢而滾動地依次出現， 所述存儲部件存儲比所述作業一覽畫面以外的其他畫面的所述時間閾值還要小的值作為所述作業一覽畫面的所述時間閾值。
13.如權利要求7至12的任一項所述的手勢判別裝置，其中， 所述第一手勢是敲擊， 所述第二手勢是輕拂。
14.如權利要求7至12的任一項所述的手勢判別裝置，其中， 所述第一手勢是長按， 所述第二手勢是拖動。
15.如權利要求1所述的手勢判別裝置，其中， 所述檢測部件檢測每個規定的時間的三維空間中的所述用戶的手指的位置作為所述動作， 所述存儲部件存儲距離的閾值即距離閾值作為所述規則，所述判別部件在從通過所述檢測部件檢測出的所述位置所求的所述手指在所述顯示部件的顯示面的垂直方向的移動距離超過所述距離閾值時，將所述動作所表示的手勢判別為是空中輕拂，當該移動距離小於該距離閾值時，將所述動作所表示的手勢判別為是空中尚支擊。
16.如權利要求1所述的手勢判別裝置，其中， 所述檢測部件檢測每個規定的時間的三維空間中的所述用戶的手指的位置作為所述動作， 所述存儲部件存儲距離的閾值即距離閾值作為所述規則， 所述判別部件在從通過所述檢測部件 檢測出的所述位置所求的所述手指在與所述顯示部件的顯示面平行的面上的移動距離超過所述距離閾值時，將所述動作所表示的手勢判別為是空中輕拂，當該移動距離小於該距離閾值時，將所述動作所表示的手勢判別為是空中敲擊。
17.如權利要求15或16所述的手勢判別裝置，其中， 所述顯示部件顯示目的地選擇畫面作為所述多個畫面中的一個，該目的地選擇畫面使用於通過所述用戶進行空中敲擊而選擇數據的目的地的多個按鈕，根據所述用戶進行空中輕拂而滾動地依次出現， 所述存儲部件存儲比所述目的地選擇畫面以外的其他畫面的所述距離閾值還要小的值作為所述目的地選擇畫面的所述距離閾值。
18.如權利要求15或16所述的手勢判別裝置，其中， 所述顯示部件顯示作業一覽畫面作為所述多個畫面中的一個，該作業一覽畫面使用於通過所述用戶進行空中敲擊而選擇輸出屬性的作業的多個按鈕，根據所述用戶進行空中輕拂而滾動地依次出現， 所述存儲部件存儲比所述作業一覽畫面以外的其他畫面的所述距離閾值還要大的值作為所述作業一覽畫面的所述距離閾值。
19.一種手勢判別裝置，其特徵在於，具有: 接收部件，從具有選擇性地顯示多個畫面中的一個的顯示部件和檢測用戶的動作的檢測部件的可移動型的終端裝置，接收通過所述檢測部件檢測出的所述動作； 存儲部件，存儲所述多個畫面的每一個的、多個手勢的各自的區分規則；以及 判別部件，從所述多個手勢中，將通過所述接收部件接收到的所述動作所表示的手勢，基於在檢測出該動作時所述多個畫面中的由所述顯示部件所顯示的畫面即當前畫面的所述規則進行判別。
20.一種手勢判別方法，判別使用顯示裝置以及檢測裝置的用戶進行了多個手勢中的哪一個，該顯示裝置選擇性地顯示多個畫面中的一個，該檢測裝置檢測動作，其特徵在於，該手勢判別方法具有以下步驟: 將所述多個畫面的每一個的、所述多個手勢的各自的區分規則存儲到存儲裝置； 使所述檢測裝置檢測所述用戶進行的所述動作； 使計算機從所述多個手勢中，將通過所述檢測裝置檢測出的所述動作所表示的手勢，基於在檢測出該動作時所述多個畫面中的由所述顯示裝置所顯示的畫面即當前畫面的所述規則進行判別。
【文檔編號】G06F3/0484GK104076974SQ201410113790
【公開日】2014年10月1日 申請日期:2014年3月25日 優先權日:2013年3月25日
【發明者】杉浦博, 巖本博史, 澤田健一, 日比野健, 丸山倫子 申請人:柯尼卡美能達株式會社