具有圖像投影的移動終端的製作方法

2023-09-22 02:22:40 4

專利名稱：具有圖像投影的移動終端的製作方法
技術領域：
本發明涉及一種移動終端，並且更具體地，涉及該移動終端中的圖像投影和操縱。
背景技術：
通常，終端可以被分成移動/可攜式終端和固定終端。根據移動終端是可以保持
在用戶的手中還是安裝在車輛中，而將移動終端分成手持終端和車載終端。 隨著移動終端的功能多樣化，日益將移動終端實現為具有綜合功能的多媒體播放
器，諸如照片或運動圖像的拍攝、音樂或運動圖像文件的重放、玩遊戲以及廣播接收。 為了支持並增加移動終端的功能，可以考慮改進移動終端的結構部分和/或軟體部分。 通常，具有投影功能的移動終端能夠將顯示在移動終端屏幕上的圖像投影到外部 屏幕。根據由用戶輸入到移動終端的顯示控制信號，這樣的移動終端能夠控制外部屏幕上 的圖像顯示。如果移動終端具有觸控螢幕，則移動終端能夠控制外部屏幕上的圖像顯示，以對 應於在觸控螢幕上執行的用戶觸摸動作。然而，為了控制在外部屏幕上的圖像顯示，用戶必須 直接操縱移動終端。

發明內容
在本發明的示例性實施例中，提供了一種移動終端，其包括投影儀模塊、相機和控 制器。所述投影儀模塊被配置成投影用於在外部屏幕上顯示的圖像。所述相機被配置成接 收在所述外部屏幕上顯示的圖像的輸入圖像。所述輸入圖像包括位於所述圖像上的指示器 以及所述指示器的陰影。所述控制器被配置成從所述輸入圖像獲得所述指示器和所述指示 器的陰影之間的距離，以根據所獲得的距離在所顯示的圖像中識別所述指示器對觸摸點的 觸摸，通過所述投影儀模塊在所述觸摸點投影指示器光標，並且執行對應於所識別的觸摸 點的操作。 在一個實施例中，所述控制器被配置成，如果所獲得的距離小於預定距離，則識別 所述指示器的觸摸。 在一個實施例中，所述控制器被配置成，當所獲得的距離小於預定距離時如果從
所述輸入圖像獲得了所述指示器的具體運動，則識別所述指示器的觸摸。 在一個實施例中，所述控制器被配置成，如果所述指示器對來自所述輸入圖像的
至少一個點的觸摸被識別，則獲取所述指示器的觸摸點信息或所述指示器以及陰影的大小
信息中的至少一個。
在一個實施例中，所述控制器被配置成使用所獲取的觸摸點信息或所獲取的大小 信息中的至少一個來獲得所述指示器的觸摸模式，並且所述控制器被配置成執行對應於所 獲得的觸摸模式的操作。 在一個實施例中，所述控制器被配置成使用所獲取的觸摸點信息或所獲取的大小 信息中的至少一個來調節顯示在所述外部屏幕上的圖像的大小。 在一個實施例中，所述控制器被配置成執行下列中的至少一個放大/縮小所述 圖像的一部分的顯示、驅動應用或參照所識別的觸摸點執行數據。 在一個實施例中，所述操作是具體圖像效果添加或具體功能執行中的至少一個。 具體圖像效果添加是顯示在對應於所述觸摸點以及所述指示器的運動的圖像的上方所添 加的圖像。所述具體功能執行是執行與所述觸摸點和所述指示器的運動相關的具體功能。
在一個實施例中，所述控制器被配置成確定所顯示的圖像與來自所述輸入圖像的 外部物體重疊的範圍，並且調節所顯示的圖像的大小以使得所顯示的圖像不與所述外部物 體重疊。 在一個實施例中，如果在預定時間段中沒有識別所述指示器的觸摸，則所述控制 器停止操作所述相機。 在一個實施例中，所述投影儀模塊和所述相機的鏡頭中的每一個都被配置成面向 相同的方向。 在一個實施例中，所述相機的位置相對於所述投影儀成預定角度，以檢測所述指 示器和所述陰影之間的距離。 在一個實施例中，所述控制器被配置成對應於所述指示器的運動來移動通過所述 投影儀模塊投影的所述指示器光標。 在本發明的示例性實施例中，提供了一種在移動終端中識別觸摸的方法，包括在
外部屏幕上投影圖像；捕獲(例如，拍攝)所述外部屏幕以獲得輸入圖像，所述輸入圖像包
括位於所述圖像上的指示器以及所述指示器的陰影；從所述輸入圖像獲得所述指示器和
所述陰影之間的距離；根據所獲得的距離識別所述指示器對所顯示的圖像中的觸摸點的觸
摸；在所述觸摸點處投影指示器光標；以及執行對應於所識別的觸摸點的操作。 在一個實施例中，所述方法進一步包括如果在預定時間段中沒有識別所述指示器
的觸摸，則停止捕獲所述外部屏幕。


被包括以提供對本發明的進一步的理解並且併入本申請並構成本申請的一部分
的附圖示出了本發明的實施例並且與該描述一起用於解釋本發明的原理。
圖1是根據本發明一個實施例的移動終端的框圖。 圖2A是根據本發明一個實施例的移動終端的前視圖。 圖2B是根據本發明一個實施例的移動終端的後視圖。 圖3A和圖3B是根據本發明一個實施例的用於解釋移動終端的操作狀態的移動終 端的前視圖。 圖4是示出接近傳感器的接近深度的概念圖。 圖5是示出控制在一對重疊顯示單元上的觸摸動作的方法的概念圖。
圖6A和6B是示出用於檢測接近信號的接近觸摸識別區域以及用於生成觸覺效果 的觸覺區域的概念圖。 圖7A和7B是根據本發明一個實施例的移動終端的透視圖。 圖8是根據本發明的一個實施例的識別在移動終端中的觸摸的方法的流程圖。 圖9A和圖9B是根據本發明一個實施例的在移動終端中提供的相機和投影儀模塊圖。 圖10是根據本發明一個實施例的用於識別指示器和陰影之間的範圍內的觸摸點 的圖。 圖11A、圖IIB和圖IIC是根據本發明一個實施例的觸摸識別過程圖。 圖12A和圖12B是根據本發明一個實施例的當有兩個指示器時觸摸識別過程圖。 圖13A、圖13B和圖13C是根據本發明一個實施例的參照觸摸點放大/縮小顯示在
外部屏幕上的圖像的圖。 圖14A和圖14B是根據本發明一個實施例的用於參照觸摸點通過驅動應用在外部 屏幕上顯示圖像的圖。 圖15A和圖15B是根據本發明一個實施例的用於參照觸摸點通過執行數據在外部 屏幕上顯示圖像的圖。 圖16是根據本發明一個實施例的用於使用指示器的觸摸點信息和大小信息來識 別觸摸與拖動的圖。 圖17A和圖17B是根據本發明一個實施例的用於使用指示器的觸摸點信息和大小 信息識別觸摸計數和觸摸持續時間的圖。 圖18A和圖18B是根據本發明一個實施例的用於使用指示器的觸摸點信息和大小 信息在外部屏幕上放大並顯示圖像的圖。 圖19A和19B是根據本發明一個實施例的用於使用指示器的觸摸點信息和大小信 息在外部屏幕上縮小並顯示圖像的圖。 圖20A和圖20B是根據本發明一個實施例的用於在外部屏幕上顯示圖像的圖，該 圖像添加了由於指示器運動而弓I起的圖像效果。 圖21A和圖21B是根據本發明一個實施例的用於在外部屏幕上顯示對應於由於指 示器運動而引起的具體功能執行的圖像的圖。 圖22A和圖22B是根據本發明一個實施例的用於放大/縮小並顯示圖像以達到在
外部屏幕上顯示的圖像的覆蓋範圍圖。
具體實施例方式
現在將詳細參照本發明的優選實施例，其示例在附圖中示出。儘可能地，在全部附 圖中將使用相同的附圖標記表示相同或類似部分。在下面描述中使用的元件的後綴"模塊" 和"單元"是可互換的。 在本公開中描述的移動終端包括行動電話、智慧型電話、膝上型計算機、數字廣播終 端、個人數字助理(PDA)、可攜式多媒體播放器(PMP)以及導航系統。 根據本發明的示例性實施例的配置還可應用於靜止終端，諸如數位電視(TV)和 臺式計算機。
6
圖1是根據本發明一個實施例的移動終端100的框圖。移動終端100包括無線通 信單元110、 A/V(音頻/視頻)輸入單元120、用戶輸入單元130、傳感單元140、輸出單元 150、存儲器160、接口單元170、控制器180以及電源單元190。圖l示出了具有各種組件的 移動終端IOO，但是移動終端100可以具有比圖1所示的組件更少的組件。也就是說，替代 地可以實現更多或更少的組件。 無線通信單元110通常包括一個或多個組件，其允許在移動終端100與移動終端 位於其中的無線通信系統或網絡之間的無線通信。例如，無線通信單元iio可以包括廣播 接收模塊111、移動通信模塊112、無線網際網路模塊113、短距離通信模塊114以及位置定位 模塊115。 廣播接收模塊111經由廣播頻道從外部廣播管理伺服器接收廣播信號和/或廣播 相關信息。廣播頻道可以包括衛星頻道和地面頻道。廣播管理伺服器通常指的是生成並發 送廣播信號和/或廣播相關信息的伺服器，或提供有先前生成的廣播信號和/或廣播相關 信息並且然後將所提供的信號或信息發送到終端的伺服器。廣播信號可以被實現為TV廣 播信號、無線電廣播信號或數據廣播信號。如果需要，廣播信號可以進一步包括與TV或無 線電廣播信號結合的廣播信號。 廣播相關信息包括與廣播頻道、廣播節目或廣播服務提供商相關信息。可以經由 移動通信網絡提供廣播相關信息，並且因此，可以由移動通信模塊112接收廣播相關信息。
廣播相關信息可以以各種形式實現。例如，廣播相關信息可以包括數字多媒體廣 播(匿B)的電子節目指南(EPG)或手持數字視頻廣播(DVB-H)的電子服務指南(ESG)。
廣播接收模塊111可以被配置為接收從各種類型的廣播系統發送的廣播信號。 通過非限制性的例子，這樣的廣播系統包括地面數字多媒體廣播(匿B-T)系統、衛星數字 多媒體廣播(匿B-S)系統、手持數字視頻廣播(DVB-H)系統、被稱為媒體僅有前向鏈路 (MediaFLO⑧)的數據廣播系統以及綜合服務地面數字廣播(ISDB-T)系統。可選地，廣播 接收模塊111可以被配置為適於其它廣播系統以及上面解釋的數字廣播系統。
可以將由廣播接收模塊111接收的廣播信號和/或廣播相關信息存儲在合適的設 備中，諸如存儲器160。 移動通信模塊112向一個或多個網絡實體(例如，基站、外部終端、伺服器)發送 無線信號，或從一個或多個網絡實體(例如，基站、外部終端、伺服器)接收無線信號。這樣 的無線信號可以代表根據文本/多媒體消息的音頻、視頻以及數據。 無線網際網路模塊113支持移動終端100訪問網際網路。該模塊可以被內部或外部地 耦合到移動終端100。在這種情況下，無線網際網路技術可以包括WLAN(無線LAN) (Wi-Fi)、 WiBro (無線寬帶)、WiMAX (微波存取全球互通技術)以及HSDPA (高速下行鏈路分組接入)。
短距離通信模塊114便於相對短距離的通信。用於實現該模塊的適合技術包括射 頻識別(RFID)、紅外數據協會(IrDA)、超寬帶(UWB)以及通常被稱為Blutooth (藍牙) 和ZigBee⑧(紫蜂)的網絡技術，舉幾個為例。 位置定位模塊115識別或以某種方式獲得移動終端100的位置。如果需要，可以 利用全球定位系統(GPS)組件可以實現該模塊。 音頻/視頻(A/V)輸入單元120被配置成提供輸入到移動終端100的音頻或視頻 信號。A/V輸入單元120包括相機121和麥克風122。相機121接收並處理靜止圖片或視頻的圖像幀，這些圖像幀是由圖像傳感器以視頻呼叫模式或拍攝模式獲得的。所處理的圖 像幀可以在顯示單元151上顯示。 可以將由相機121處理的圖像幀存儲在存儲器160中，或可以經由無線通信單元
110被外部地發送。可選地，可以向移動終端100提供至少兩個相機121。 當可攜式設備處於諸如電話呼叫模式、記錄模式或語音識別模式的特定模式時，
麥克風122接收外部音頻信號。該音頻信號被處理並轉換成電子音頻數據。在呼叫模式中，
所處理的音頻數據被變換成經由移動通信模塊112可發送到移動通信基站的格式。麥克風
122通常包括配套的消噪算法，以消除當接收外部音頻信號時產生的噪聲。 用戶輸入單元130響應於相關輸入設備的用戶操作而生成輸入數據。這樣的設備
的例子包括鍵盤、薄膜開關、觸摸板(例如，靜態壓力或電容)、滾輪和微動開關。 傳感單元140使用移動終端的各方面的狀態測量提供用於控制移動終端100的操
作的感測信號。例如，傳感單元140可以檢測移動終端100的打開/關閉狀態、移動終端100
的組件(例如，顯示裝置和鍵盤)的相對位置、移動終端IOO或移動終端100的組件的位置
變化、用戶與移動終端100的接觸的有或無以及移動終端100的方向或加速/減速。例如，
當移動終端100是滑蓋式移動終端時，傳感單元140可以感測移動終端100的滑動部分是
打開還是關閉。其它例子包括，傳感單元140感測由電源190提供的功率的有或無以及在
接口單元170和外部設備之間耦合或其它連接的有或無。傳感單元140可以包括接近傳感
器141。 輸出單元150生成與視覺、聽覺和觸覺有關的輸出。輸出單元150包括顯示單元
151、音頻輸出模塊152、警報單元153、觸覺模塊154以及投影儀模塊155。 顯示單元151通常被實現成可視地顯示(輸出)與移動終端100相關的信息。例
如，如果移動終端工作在電話呼叫模式，則該顯示裝置通常將提供包括與撥打、接通和終止
電話呼叫相關的信息的用戶界面(UI)或圖形用戶界面(GUI)。作為另一個例子，如果移動
終端100處於視頻呼叫模式或拍攝模式，則顯示單元151可以附加或替代地顯示與這些模
式相關的圖像，UI或GUI。 顯示模塊151可以使用包括例如，液晶顯示裝置(LCD)、薄膜電晶體液晶顯示裝置 (TFT-LCD)、有機發光二極體顯示裝置(OLED)、柔性顯示裝置以及三維顯示裝置的已知顯示 技術來實現。移動終端IOO可以包括一個或多個這樣的顯示裝置。 上面的顯示裝置中的一些可以被實現為透明的或光穿透式，其通常被稱為透明顯 示裝置。透明OLED(TOLED)是透明顯示裝置的代表性示例。顯示單元151的後面配置也可 以以光穿透式來實現。在該配置中，用戶能夠通過由移動主體的顯示單元151佔用的區域 在移動主體的後面看到物體。 根據移動終端100的實施例，可以向移動終端100提供至少兩個顯示單元151。例
如，可以在移動終端100的單個面上以彼此間隔開或置入一個主體中的方式設置多個顯示
單元。可替代地，可以在移動終端100的不同面上設置多個顯示單元。 如果顯示單元151和用於檢測觸摸動作的傳感器(下文中稱為"觸摸傳感器")被
配置為共同層結構(下文中稱為"觸控螢幕")，則移動終端100能夠將顯示單元151用作輸
入設備以及輸出設備。觸摸傳感器可以被配置為觸摸薄膜、觸摸薄片或觸摸板。 觸摸傳感器可以被配置成將施加到顯示單元151的具體部分的壓力或從顯示單元151的具體部分生成的電容的變化轉換成電輸入信號。此外，觸摸傳感器能夠檢測觸摸 壓力以及觸摸位置或距離。 如果向觸摸傳感器進行觸摸輸入，則對應於該觸摸的信號被傳送到觸摸控制器。 觸摸控制器處理該信號，並且然後將所處理的信號傳送到控制器180。因此，控制器180能 夠知道是否觸摸了顯示單元151的規定部分。 接近傳感器141可以被設置在觸控螢幕所封閉的移動終端100的內部區域或在觸摸 屏周圍。接近傳感器141是使用電磁場強度或紅外線無機械接觸地檢測有或無物體正在接 近存在於接近傳感器141周圍的規定的檢測表面或物體。因此，接近傳感器141具有比接 觸式傳感器更長的耐用性，並且還具有比接觸式傳感器更廣的實用性。
接近傳感器141可以包括透明光電傳感器、直接反射光電傳感器、鏡反射光電傳 感器、射頻振蕩接近傳感器、靜電電容接近傳感器、磁接近傳感器或紅外接近傳感器。如果 觸控螢幕包括靜電電容接近傳感器，則觸控螢幕被配置成根據指示器的接近使用電場的變化檢 測指示器的接近。在這種情況下，觸控螢幕(觸摸傳感器)可以被分類為接近傳感器。
在下面的描述中，"接近觸摸"是其中指示器在不接近觸控螢幕的情況下靠近觸控螢幕 而被識別為觸摸觸控螢幕的動作。另外，"接近觸摸"是其中指示器實際接觸觸控螢幕的動作。 指示器接近觸摸觸控螢幕上的位置是當指示器執行接近觸摸時垂直相對觸控螢幕的指示器的 位置。 接近傳感器檢測接近觸摸以及接近觸摸模式(例如，接近觸摸距離、接近觸摸持 續時間、接近觸摸位置或接近觸摸變換狀態)。對應於所檢測的接近觸摸動作和所檢測的接 近觸摸模式的信息可以被輸出到觸控螢幕。 音頻輸出模塊152以各種模式工作，包括呼叫接收模式、呼叫撥打模式、記錄模 式、語音識別模式以及廣播接收模式，並且輸出從無線通信單元110接收的或存儲在存儲 器160中的音頻數據。在操作期間，音頻輸出模塊152輸出與特定功能(例如，所接收的呼 叫、所接收的消息)有關的音頻。音頻輸出模塊152通常使用一格或多個揚聲器、蜂鳴器、 其他音頻產生設備及其組合來實現。 警報單元153輸出用於通告發生與移動終端100相關的特定事件的信號。典型的 事件包括接收到呼叫事件、接收到消息事件以及接收到觸摸輸入事件。警報單元153能夠 通過振動、視頻信號或音頻信號的方式輸出用於通告事件發生的信號。視頻或音頻信號可 以經由顯示單元151或音頻輸出單元152輸出。因此，顯示單元151或音頻輸出模塊152 可以被認為是警報單元153的一部分。 觸覺模塊154生成可以由用戶感知的各種觸覺效果。振動是由觸覺模塊154生成 的觸覺效果中的代表性的一個。由觸覺模塊154生成的振動的強度和模式是可控的。例如， 不同的振動可以以合成在一起的方式輸出，或者可以依次輸出。 觸覺模塊154能夠生成各種觸覺效果以及振動。例如，觸覺模塊154生成由於相 對於接觸皮膚表面垂直移動的觸針(Pin)的設置、通過注入/吸氣孔的空氣注入/吸入功 率、皮膚表面上的擦動、接觸電極、靜電力或使用吸熱或放熱設備表示熱/冷感覺而引起的 效果。 觸覺模塊154可以被實現為使得用戶能夠通過手指、手臂或身體的其他部分的肌 肉感覺感知觸覺效果。可選地，根據移動終端100的相應配置類型，可以在移動終端100中提供至少兩個觸覺模塊154。 投影儀模塊155是用於使用移動終端100執行圖像投影儀功能的元件。投影儀模 塊155能夠根據控制器180的控制信號在外部屏幕或牆壁上顯示至少與在顯示單元151上 顯示的圖像相同或部分不同的圖像。 具體地，投影儀155可以包括光源，其生成用於外部投影圖像的光(例如，雷射)、 圖像產生裝置，用於使用從光源生成的光產生外部輸出的圖像，以及鏡頭，用於以預定焦距 放大外部輸出的圖像。投影儀模塊155可以進一步包括用於通過機械移動鏡頭或整個模塊 調節圖像投影方向的設備。 根據顯示裝置的設備類型，投影儀模塊155可以被分成CRT(陰極射線管)模塊、 LCD(液晶顯示裝置)模塊以及DLP(數字光處理)模塊。具體地，DLP模塊通過使得從光源 生成的光能夠在匿D (數字微鏡設備)晶片上反射的機制來工作，並且可以有利地用於縮小 投影儀模塊151的大小。 投影儀155可以被設置在移動終端100的側面、前面或後側方向的長度方向上。投 影儀模塊155可以根據需要被設置在移動終端100的任何部分中。 存儲器單元160通常用於存儲各種類型的數據，以支持移動終端100的處理、控 制和存儲要求。這樣的數據的例子包括運行在移動終端100上的應用的程序指令、聯繫數 據、電話簿數據、消息、音頻、靜止圖片和運動圖片。可以將每個數據的最近使用歷史或累積 使用頻率(例如，每個電話簿、每個消息或每個多媒體的使用頻率)存儲在存儲器單元160 中。此外，可以將振動的各種模式的數據和/或向觸控螢幕進行觸摸輸入時輸出的聲音存儲 在存儲器單元160中。 可以使用合適的易失性和非易失性存儲器或存儲設備的任何類型或組合實現存 儲器160，所述存儲設備包括硬碟、隨機存取存儲器(RAM)、靜態隨機存取存儲器(SRAM)、電 可擦除可編程只讀存儲器(EEPROM)、可擦除可編程只讀存儲器(EPROM)、可編程只讀存儲 器(PROM)、只讀存儲器(ROM)、磁存儲器、快閃記憶體、磁或光碟、多媒體卡微型存儲器、卡式存儲 器(例如，SD存儲器、XD存儲器)或其它類似存儲器或數據存儲設備。移動終端100能夠 與用於在網際網路上執行存儲器160的存儲功能的網頁存儲相關聯地工作。
接口單元170常被實現成將移動終端100與外部設備耦合。接口單元170從外部 設備接收數據，或被供電，並且然後將數據或功率傳送到移動終端100的各個元件，或使得 在移動終端100內的數據能夠被傳送到外部設備。可以使用有線/無線頭戴式耳機埠、 外部充電器埠 、有線/無線數據埠 、存儲器卡埠或用於耦合到具有識別模塊的埠 、 音頻輸入/輸出埠和視頻輸入/輸出埠或耳機埠來配置接口單元170。
身份識別模塊是用於存儲認證移動終端100的使用授權的各種信息的晶片，並 且可以包括用戶身份識別模塊(UIM)、訂戶身份識別模塊(SM)或通用用戶身份識別模塊 (USIM)。具有身份識別模塊的設備(下文稱為"身份識別設備")可以被製造成智慧卡。身 份識別設備可以經由相應埠連接到移動終端100 。 當移動終端IOO被連接到外部支架(cradle)時，接口單元170變成用於從支架向 移動終端IOO提供功率的通道或用於傳遞用戶從支架向移動終端IOO輸入的各種命令信號 的通道。從支架輸入的各種命令信號中的每個信號都可以操作為使得移動終端100能夠識 別其被正確加載在支架中的信號。
控制器180通常控制移動終端100的全部操作。例如，控制器180執行與語音呼 叫、數據通信和視頻呼叫相關的控制和處理。控制器180可以包括提供多媒體重放的多媒 體模塊181。多媒體模塊181可以被配置為控制器180的一部分，或可以被實現為獨立的組 件。 控制器180能夠執行模式識別過程，用於將在觸控螢幕上進行的寫輸入和畫圖輸入 識別為字符或圖像。 電源單元190提供移動終端100的各種組件所需的功率。功率可以是內部功率、 外部功率或其組合。 可以在計算機可讀介質中例如，計算機軟體、硬體或其某種組合實現在此描述的 各種實施例。對於硬體實現來說，可以在一個或多個專用集成電路(ASIC)、數位訊號處理器 (DSP)、數位訊號處理設備(DSPD)、可編程邏輯設備(PLD)、現場可編程門陣列(FPGA)、處理 器、控制器、微控制器、微處理器、被設計用於執行在此描述的功能的其它電子單元或其選 擇組合中實現在此描述的實施例。這樣的實施例還可以由控制器180來實現。
對於軟體實現來說，可以利用獨立的軟體模塊實現在此描述的實施例，每個軟體 模塊執行在此描述的功能和操作中的一個或多個。軟體代碼可以利用以任何合適的編程語 言編寫的軟體應用來實現，並且可以存儲在諸如存儲器160的存儲器中，並由控制器或處 理器(例如，控制器180)執行。 圖2A是根據本發明一個實施例的移動終端的前視圖。該圖中示出的移動終端100 具有直板式終端主體。移動終端100可以以各種不同的配置來實現。這樣的配置的例子包 括直板式、摺疊式、滑蓋式、旋轉式、擺動式(swing-type)及其組合。進一步的公開將主要 涉及直板式移動終端100。然而，本公開同樣應用於其它類型的移動終端。
參照圖2A，移動終端100包括配置其外部的殼體(外殼、外殼和蓋子)。在本實施 例中，殼體包括前殼體101和後殼體102。各種電/電子部件被加載到前殼體101和後殼 體102之間提供的空間中。可選地，至少一個中間殼體可以被進一步設置在前殼體101和 後殼體102之間。 殼體101和102通過合成樹脂的注入成型而形成，或可以由諸如不鏽鋼(STS)或 鈦(Ti)的金屬物質形成。 可以將顯示單元151、音頻輸出單元152、相機121、用戶輸入單元131和132、麥克 風122以及接口 170設置在終端主體中，並且更具體地，設置在前殼體101中。
顯示單元151佔用前殼體101的正面的大部分。音頻輸出單元151和相機121被 設置在鄰近顯示單元151的兩個端部中的一個的區域，而用戶輸入單元131和麥克風122 被設置在鄰近顯示單元151的另一端部的另外區域中。用戶輸入單元132和接口 170可以 被設置在前殼體101和後殼體102的側面。 操縱輸入單元130以接收用於控制終端100的操作的命令。輸入單元130能夠包 括多個操縱單元131和132。操縱單元131和132操縱這些部分，並且可以採用使得用戶能 夠通過體驗觸摸感覺執行操縱動作的觸覺模式的任何機制。 可以不同地設置由第一或第二操縱單元131或132輸入的內容。例如，將諸如開 始、結束或滾動的命令輸入第一操縱單元131。可以將用於調節從音頻輸出單元152輸出的 聲音的音量的命令或用於切換到顯示單元151的觸摸識別模式的命令輸入到第二操縱單元132。 圖2B是圖2A所示的終端的後側透視圖。參照圖2B，相機121'可以被附加設置 在終端主體的後側，並且更具體地，設置到到後殼體102。相機121'具有實質上與圖2A所 示的相機121的方向相反的拍攝方向，並且具有不同於相機121的像素的像素。
在示例性實施例中，前者相機121具有用於視頻呼叫時足以捕獲和發送的用戶 面部的圖片的像素，而相機121'具有用於捕獲更高質量照片的更大的像素。相機121和 121'中的每個都可以被安裝在終端主體上以旋轉或彈出。 可以鄰近相機121'附加提供閃光燈123和鏡子124。當使用相機121'拍攝物體 時閃光燈123向該物體投影光。當用戶嘗試使用相機121'拍攝自己的照片(自拍)時，鏡 子124使得用戶能夠觀看其通過鏡子124反射的面部。 可以將附加音頻輸出單元152'設置在終端主體的後側。附加音頻輸出單元 152'能夠與圖2A示出的音頻輸出單元152—起實現立體聲功能，並且可以用於當終端在 談話中時以揚聲器電話模式實現。 可以向終端主體的側面附加地提供廣播信號接收天線124以及用於通信的天線。 天線124，構成圖1所示的廣播接收模塊111的一部分，其可以可伸縮地設置在終端主體。
用於向終端100供電的電源單元190被設置在終端主體中。可以將電源單元190 配置為置入終端主體內。可替代地，電源單元190可以被配置為可拆卸地連接到終端主體。
用於檢測觸摸的觸摸板135可以被附加地設置在後殼體102。觸摸板135可以是 類似光透明式的顯示單元151。因此，如果顯示單元151被配置成從其兩面輸出可視信息， 則用戶將也能夠經由觸摸板135識別可視信息。從兩面輸出的信息可以完全由觸摸板135 控制。可替代地，顯示裝置進一步由觸摸板135提供，從而觸摸板是觸控螢幕。因此，觸控螢幕 可以被設置在後殼體102以及前殼體101。 觸摸板135通過與前殼體101的顯示單元151互連而激活。觸摸板135可以被設 置在顯示單元151的後部中並且與顯示單元151平行。在示例性實施例中，觸摸板135可 以具有等於或小於顯示單元151的大小的大小。 參照圖3A和圖3B說明在顯示單元151和觸摸板135之間的互連操作機制。圖3A 和圖3B是根據本發明一個實施例的終端的透視圖，用於說明移動終端的操作狀態。可以在 顯示單元151上顯示各種可視信息。可以以字符、數字、符號、圖形或圖標的形式顯示信息。
為了輸入信息，字符、數字、符號、圖形和圖標中的至少一個代表為在鍵盤信息中 實現的單個預定陣列。這樣的鍵盤信息可以是所謂的"軟鍵"。圖3A示出了經由通過終端 主體前面的輸入的觸摸激活軟鍵"9"。 顯示單元151可通過整個區域或通過被分成多個區域操作。在後者的情況下，多 個區域可以互操作地配置。例如，輸出窗口 151a和輸入窗口 151b被顯示在顯示單元151 上。代表用於輸入電話號碼的數字的軟鍵151c'被輸出到輸入窗口 151b。如果觸摸了軟 鍵151c'，則對應於所觸摸的軟鍵的數字被輸出到輸出窗口 151a。如果操縱第一操縱單元 131 ，則嘗試顯示在輸出窗口 15la上的電話號碼的呼叫連接。 圖3B示出了經由通過終端主體的後面輸入的觸摸激活軟鍵。圖3A示出了以肖像 模式垂直設置的終端主體。圖3B示出了以風景模式水平布置的終端主體。顯示單元151 可以被配置成根據所設置的終端主體的方向改變輸出圖片。
圖3B示出了在終端中激活文本輸入模式。在顯示單元151的觸摸板135上顯示 輸出窗口 135a和輸入窗口 135b。可以將代表字符、符號或數字中的至少一個的多個軟鍵 135c設置在輸入窗口 135b中。軟鍵135c可以以QWERTY鍵信息設置。
如果通過觸摸板135觸摸軟鍵135c，則對應於所觸摸的軟鍵的字符、符號和數字 被輸出到輸出窗口 135a。因此，相比於經由顯示單元151輸入的觸摸，經由觸摸板135輸入 的觸摸更有利之處在於軟鍵135c可以防止觸摸時被手指阻擋。如果顯示單元151和觸摸 板135被配置成透明的，則觸摸板135能夠可視地檢查位於終端主體的後側的手指。因此， 更精確的觸摸輸入是可能的。 顯示單元151或觸摸板135可以被配置成接收滾動觸摸輸入。用戶滾動顯示單元 151或觸摸板135以變換在顯示單元151上顯示的實體(例如，圖標)位置處的光標或指示 器。此外，如果將手指變換到顯示單元151或觸摸板135上，則所變換的手指的路徑可以可 視地顯示在顯示單元151上。這樣的功能在編輯顯示在顯示單元151上的圖像時是很有用 的。 如果在預定時間範圍內觸摸顯示單元(觸控螢幕)151和觸摸板135，則可以執行終
端的特定功能。這樣的同時觸摸可以對應於當用戶使用大拇指和食指(夾住)握住終端主
體時。上面的功能可以包括顯示單元151和/或觸摸板135的激活或失活。 圖4是用於示出接近傳感器141的接近深度的圖。當諸如用戶的手指或筆的指示
器靠近觸控螢幕時，設置在觸控螢幕內或附近的接近傳感器141檢測指示器的靠近，並且然後
輸出接近信號。接近傳感器141可以被配置成根據在指示器和觸控螢幕之間的距離/接近深
度輸出不同的接近信號。 在圖4中，根據本發明的示例性實施例，提供了觸控螢幕的截面來示出能夠感測三 個接近深度的接近傳感器。然而，本發明並不因此被限制，並且接近傳感器可以被配置成感 測少於三個接近深度或四個或更多接近深度。 如果指示器完全接觸觸控螢幕(dO)，該接觸被識別為接觸觸摸。如果指示器位於與 觸控螢幕的間隔小於dl的距離，則指示器靠近被識別為在第一接近深度的接近觸摸。如果指 示器位於與觸控螢幕的間隔小於d2但大於或等於dl的距離，則指示器靠近被識別為第二接 近深度的接近觸摸。如果指示器與觸控螢幕的間隔小於d3但大於或等於d2的距離，則指示 器靠近被識別為第三接近深度的接近觸摸。如果指示器與觸控螢幕的間隔大於或等於d3的 距離，則指示器被識別為在接近觸摸範圍之外。 因此，控制器180能夠根據接近深度和指示器位置將接近觸摸識別為各種輸入信 號中的一個。控制器180能夠根據各種輸入信號執行各種操作控制。 圖5是示出控制在一對重疊顯示單元156U57上的觸摸動作的方法的圖。圖5的 終端是摺疊式終端，其中摺疊部分被鉸接到主體，以便摺疊部分可以被摺疊到主體，或從主 體展開。 設置在摺疊部分中的第一顯示單元156是光穿透顯示裝置或透明式顯示裝置，諸 如TOLED，而設置在主體中的第二顯示單元157可以是非穿透式顯示裝置，諸如LCD。第一 和第二顯示單元156和157中的每個可以包括可觸摸輸入的觸控螢幕。 例如，如果檢測到對第一顯示單元或T0LED 156的觸摸(接觸觸摸或接近觸摸)， 則控制器180根據觸摸類型和觸摸持續時間從顯示在T0LED 156上的圖像列表選擇或運行
13至少一個圖像。 在下面的描述中，解釋了一種當檢測到對TOLED 156 (其外部地暴露在重疊的配 置)的觸摸時控制在LCD 157(其不同於TOLED 156的顯示裝置)上的信息的方法。在下 面的描述中，觸摸輸入類型被分成觸摸、長觸摸以及長觸摸並拖動。 在重疊狀態中(即，移動終端關閉或摺疊的狀態)，TOLED 156被配置成與LCD 157 重疊。在這種狀態下，如果檢測到與用於控制顯示在TOLED 156上的圖像的觸摸(例如，長 觸摸_具有至少2秒的持續時間的觸摸)不同的觸摸，則控制器180能夠根據所觸摸的觸 摸輸入，從顯示在LCD 157上的圖像列表中選擇至少一個圖像。執行所選擇圖像的結果被 顯示在T0LED 156上。 長觸摸可用於有選擇地將顯示在LCD 157上的實體中的具體一個變換到T0LED 156(在不執行相應實體的動作的情況下)。具體地，如果用戶在對應於LCD 157的具體實 體的T0LED 156的規定區域上執行長觸摸，則控制器180控制相應的實體通過變換到T0LED 156而被顯示。顯示在T0LED 156上的實體可以根據對T0LED 156的觸摸輸入通過變換到 LCD 157而被顯示，諸如輕擊和旋轉。 如圖5所示，顯示在LCD 157上的第二菜單被變換到T0LED 156，並且顯示在 T0LED 156上。如果與長觸摸一起另外檢測到諸如拖動的另外的輸入，則控制器180執行與 通過長觸摸選擇的圖像相關的功能，以使得該圖像的先前圖片可以顯示在TOLED 156上。 如圖5所示，執行第二菜單(圖像文件)的預覽(男性圖片)。 當輸出預覽圖像時，如果通過保持長觸摸在T0LED 156上附加執行對不同圖像的 拖動，則控制器180變換LCD 157的選擇光標(或選擇條)，並且然後顯示通過在先前圖片 上的選擇光標所選擇的圖像(女性圖片)。此後，在觸摸(長觸摸並拖動)完成之後，控制 器180顯示通過長觸摸選擇的初始圖像。 對T0LED 156的長觸摸和拖動的功能以及滑動動作(即，對應於拖動的接近觸摸 的動作)和長接近觸摸(例如，保持至少2或3秒的接近觸摸)的功能是相同的。
如果檢測到不同於上述觸摸動作的觸摸動作，則控制器180能夠以根據通常觸摸 控制方法的方式工作。 以重疊狀態控制觸摸動作的方法可用於具有單個顯示裝置的終端。以重疊狀態控 制觸摸動作的方法也可用於不同於具有雙顯示裝置的摺疊式終端的終端。
圖6A和圖6B是用於示出接近觸摸識別區域和觸覺效果生成區域的圖。圖6A代 表圓形的諸如圖標或菜單項的物體。然而，該物體和相應的區域可以具有任何形狀。
如圖6A的(a)所示，用於在顯示單元151上顯示物體的區域可以被分成處於中心 部分的第一區域A以及包圍第一區域A的第二區域B。第一區域A和第二區域B可以被配 置成生成強度或模式互不相同的觸覺效果。例如，第一和第二區域可以被配置為按照以下 方式生成2步振動如果第二區域B被觸摸則輸出第一振動，或如果第一區域A被觸摸則輸 出大於第一振動的第二振動的方式。 如果接近觸摸識別區域和觸覺區域被同時設置在具有物體顯示在其中的區域中， 則傳感單元140能夠設置用於生成觸覺效果的觸覺區域，其不同於用於檢測接近信號的接 近觸摸識別區域。具體地，傳感單元140能夠將觸覺區域設置成比接近觸摸識別區域更窄 或更寬。例如，在圖6A的(a)中，傳感單元140能夠將接近觸摸識別區域設置成包括第一區域A和第二區域B兩個區域的區域。另外，傳感單元140能夠將觸覺區域設置成第一區 域A。 傳感單元140能夠將具有物體顯示在其中的區域區分成如圖6A的(b)所示的三 個區域A、 B和C。可替代地，傳感單元140能夠將具有物體顯示在其中的區域區分成如圖 6A的(c)所示的N個區域(N > 4)。另外，傳感單元140能夠將所劃分的區域中的每個都 配置成生成具有不同強度或模式的觸覺效果。如果具有單個物體呈現在其中的區域被分成 至少三個區域，則傳感單元能夠根據使用環境將觸覺區域和接近觸摸識別區域設置成互不 相同。 傳感單元140能夠將顯示單元151的接近觸摸識別區域的大小配置成根據接近深 度而變化。具體地，參照圖6B的(a)，接近觸摸識別區域被配置成根據顯示單元151的接近 深度而由C —B —A減少。相反地，接近觸摸識別區域被配置為根據顯示單元151的接近 深度而由C — B — A增加。儘管上面的配置，但是傳感單元140能夠將觸覺區域設置成具 有預定大小，如圖6B的(b)中示出的區域"H"，而不管顯示單元151的接近深度。
當劃分顯示物體的區域用於設置觸覺區域或接近觸摸識別區域時，傳感單元140 能夠使用水平/垂直劃分、徑向劃分及其組合以及圖6A所示的同心圓式劃分的多種方案中 的一個。 在下面的描述中，參照圖7A和圖7B詳細說明了設置到直板式移動終端100的上 述投影儀模塊的配置。圖7A和圖7B是根據本發明一個實施例的移動終端的透視圖。參照 圖7A，具有投影儀模塊155的投影儀主體105能夠被旋轉地耦合到移動終端的主體101 。具 體地，投影儀主體105可以鉸接到主體101。可以控制使用設置到投影儀主體101的投影儀 模塊155所投影的圖像的投影角。在示例性實施例中，投影儀模塊155利用雷射波束投影。 可以將相機121設置到投影儀主體105以拍攝由投影儀模塊155投影的圖像。圖7A示出 了在旋轉投影儀主體105之前的狀態。投影儀主體可旋轉地耦合到主體101。圖7B示出了 在已經旋轉投影儀主體105之後的狀態。 在本發明的示例性實施例中，移動終端包括投影儀模塊155以及圖1所示的至少 一個元件。在另一個實施例中，所述至少一個元件包括相機121。 圖8是根據本發明一個實施例的識別在移動終端中的觸摸的方法的流程圖。參 照圖8，如果根據用戶進行的選擇激活了投影儀功能，則移動終端100能夠使用投影儀模塊 155在外部屏幕上顯示圖像[S810]。 控制器能夠控制投影儀功能激活以及投影儀模塊155的全部操作。由於激活了投
影儀功能，所以控制器180將投影儀模塊155設置成進入可操作模式。然後將投影儀模塊
155設置成進入能夠在控制器180的控制下在外部屏幕上顯示圖像的模式。 投影儀功能可以是使用設置到移動終端100的投影儀模塊155在外部屏幕上顯示
圖像的功能，該圖像被存儲在存儲器160中或經由無線通信單元110從外部終端接收。外
部屏幕包括各種用於顯示通過投影儀模塊155投影的圖像的裝置，並且並不受其名稱或類
型的限制。 例如，如果用戶選擇投影儀功能執行命令鍵，該投影儀功能執行命令鍵是通過菜 單搜索"投影儀功能執行"的菜單項，則可以激活投影儀功能。 顯示在外部屏幕上的圖像(下文中稱為"外部圖像")可以與顯示在移動終端的整個或部分屏幕上的圖像一致，或可以不顯示在移動終端屏幕上。 移動終端100使用相機121接收包括設置在外部圖像上的指示器以及指示器的陰 影的圖像的輸入(下文中稱為"輸入圖像")[820]。 在這種情況下，當用戶使用指示器(例如，用戶的手指、鉛筆或杆)指向外部圖像 的規定點時，可以說指示器設置在外部圖像上。 如果檢測到投影儀模塊155的驅動，或用戶經由用戶輸入單元130輸入相機驅動 命令信號，則控制器180能夠將相機121設置成進入接收外部圖像輸入的模式。
相機121的圖像輸入距離可以等於或大於外部圖像的顯示區域。此外，控制器180 能夠調節相機121的圖像輸入距離，以使得輸入圖像能夠以調節焦距的方式被輸入。
相機121和投影儀模塊155可以以將二者鏡頭配置成面向相同方向的方式設置到 移動終端100。這是為了經由相機121接收輸入圖像，該圖像包括設置在使用投影儀模塊 155顯示的外部圖像上的指示器以及指示器的陰影。 在示例性實施例中，當指示器是食指時，移動站識別食指和相應大拇指的相對移 動。如此，用戶可以使用用戶的食指以及用戶的大拇指的移動指示由移動終端將要執行的 動作(例如，選擇、激活)，諸如將大拇指觸摸食指或一起點擊/按下大拇指或食指。如此， 移動站將提供者的食指識別為指示器，並且使用指示器的陰影確定在外部圖像上的指示器 位置。移動終端能夠相對於食指識別大拇指的移動。相對於食指的大拇指的具體移動可以 用信號表示相對於指示器所指的外部圖像上的位置將要執行的動作。例如，如果食指指向 新聞標題，並且大拇指相對於食指移動(例如，觸摸、點擊或按下)，則整個標題可以顯示在 外部屏幕上。 參照圖9A或圖9B，相機121的鏡頭和投影儀模塊155的鏡頭可以設置在移動終端 100的背面(圖9A)或規定的側面(圖9B)上。 移動終端100在控制器180的控制下從在輸入步驟S820中輸入的輸入圖像獲得 指示器和陰影之間的距離[S830]。具體地，移動終端100能夠參照面向外部屏幕的指示器 的端部獲得指示器和陰影之間的距離。控制器180能夠通過從輸入圖像識別指示器和陰影 中的每一個來獲得指示器和陰影之間的距離。具體地，控制器180能夠使用物體識別技術 從輸入圖像識別指示器和陰影。在這種情況下，物體識別技術可以包括檢測技術、跟蹤技術 以及識別技術。 例如，檢測技術是從輸入圖像檢測對應於指示器和陰影中每一個的圖像部分的技 術。因此，控制器180能夠使用從輸入圖像檢測到的指示器和陰影的圖像部分獲得在指示 器和陰影之間的距離。 跟蹤技術是根據指示器和陰影的運動通過跟蹤輸入圖像中指示器和陰影來檢測 指示器及其陰影，同時從輸入圖像檢測對應於指示器和陰影的圖像部分的技術。因此，即 使指示器和陰影正在移動，控制器180也能夠使用輸入圖像獲得在指示器和陰影之間的距 離。 識別圖像是通過比較將從輸入圖像檢測的指示器和陰影的圖像部分與先前存儲
的圖像部分相匹配的技術。因此，控制器180將當前檢測到的指示器和陰影的圖像部分與
先前存儲的圖像部分比較，並且然後能夠獲得指示器和陰影的位置和大小變化。 在識別或獲得指示器和陰影之間的距離過程中，控制器180能夠以下列方式獲得在實際指示器和實際陰影之間的距離(下文中成為"實際距離")確定實際外部圖像與包 括在輸入圖像中的外部圖像(下文中稱為"輸入外部圖像")的比率並且然後將所確定的比 率應用於在輸入圖像上的指示器和陰影之間的距離(下文中稱為"輸入距離")。
例如，如果實際外部圖像與輸入外部圖像的比率是IO : 1，假設輸入距離是0.5釐 米，則能夠獲得達到5釐米的實際距離。 在控制器180的控制下，移動終端100能夠根據在獲得步驟S830中獲得的指示器 對陰影距離的範圍識別指示器所指的外部圖像的點的觸摸[S840]。 如果所獲得的指示器和陰影之間的距離處於預定距離之內，則移動終端100能夠 識別指示器所指示的點的觸摸。 如果指示器和陰影之間的距離小於或等於預定距離，則外部圖像的規定點被視為 由指示器觸摸。 例如，參照圖IO，如果指示器(或，朝向外部圖像的指示器的端部)和指示器的陰 影之間的距離處於預定距離d之內，則移動終端100能夠識別指示器所指的外部圖像的點 的觸摸。 如果指示器(或，朝向外部圖像的指示器的端部)與其陰影重疊，則移動終端100 能夠識別指示器所指的外部圖像的點的觸摸。 例如，參照圖IIA，如果指示器及其陰影在指示器所指的外部圖像的點重疊，則移 動終端100能夠識別指示器所指的外部圖像的點的觸摸。 當指示器(或，朝向外部圖像的指示器的端部)和指示器的陰影之間的距離處於 預定距離之內，或指示器和陰影互相重疊並且獲得了指示器的具體運動時，移動終端IOO 能夠識別指示器所指的外部圖像的點的觸摸。 例如，參照圖IIB，當指示器和陰影互相重疊時，如果依次獲得了在方向(1)和(2)
上的指示器運動，則移動終端100能夠識別指示器所指的外部圖像的點的觸摸。 此外，根據在獲得步驟S830中獲得的指示器到陰影的距離的範圍，移動終端100
能夠輸出文本以通告觸摸識別可用。 例如，參照圖11C，如果所獲得的在指示器和陰影之間的距離是dl，則移動終端 IOO輸出文本以通告如果指示器靠近外部圖像，則觸摸就變得可識別[圖IIC的(a)]。如 果所獲得的指示器和陰影之間的距離是d2 ( < dl)，則移動終端100能夠識別指示器所指的 外部圖像的點的觸摸。 移動終端100能夠在獲得步驟S830中獲得在位於外部圖像上的多個指示器及其 陰影之間的距離，並且然後能夠識別多個指示器中的每一個的觸摸。 例如，參照圖12A，如果在第一指示器(1)及其陰影之間的距離超過了觸摸可識別 距離，並且如果在第二指示器(2)及其陰影之間的距離小於或等於觸摸可識別距離，則移 動終端100僅能夠識別第二指示器所指示的點的觸摸。 例如，參照圖12B，如果在第一指示器(1)及其陰影之間的距離小於或等於觸摸可 識別距離，並且如果在第二指示器(2)及其陰影之間的距離小於或等於觸摸可識別距離， 則移動終端100能夠分別識別第一指示器(1)和第二指示器(2)所指示的點的觸摸。
在控制器180的控制下，移動終端100能夠執行對應於在識別步驟S840中識別的 觸摸點的操作[S870]。
17
例如，參照在識別步驟S840中識別的觸摸點，移動終端100能夠執行縮小/放大 外部圖像部分顯示、驅動應用以及執行數據中的至少一個。 在下面的描述中，參照圖13A至15B詳細說明這樣的教導。參照圖13A至13C，如 果識別了外部圖像[圖13A]的規定點的指示器的觸摸，則移動終端100參照位於觸摸點中 心的一個區域1301放大並顯示該外部圖像[圖13B]，或縮小並顯示該外部圖像[圖13C]。
具體地，區域1301內的圖像部分被顯示為全屏圖像(full image)[圖13B]，或可 以將整個外部圖像顯示在區域1301內[圖13C]。 再次參照圖13A，在另一個示例性實施例中，當識別了指示器的觸摸時，指示器光 標1302被顯示在指示器的觸摸的位置。假設指示器光標1302允許用戶看到識別成被觸摸 的精確點。此外，一旦顯示了指示器光標1302，如果用戶需要，相應地用戶可以通過移動指 示器來改變指示器光標1302的位置。如此，如果指示器是手指，則指示器光標1302將根據 手指的移動而移動。 參照圖14A和圖14B，如果識別了在包括應用圖標[圖14A]的外部圖像中的消息 圖標1401的觸摸，則移動終端IOO驅動消息相關應用，並且然後能夠顯示相應的外部圖像 [圖14B]。 在這種情況下，應用是使用移動終端100可驅動的功能，並且包括消息相關應用、 多媒體相關應用、呼叫相關應用或網際網路相關應用。 參照圖14B，如果識別了在外部圖像中"寫消息"的觸摸，則移動終端100能夠將包 括寫消息窗口的圖像顯示為外部圖像。 參照圖15A和圖15B，如果識別了在包括顯示為縮略圖[圖15A]的多個照片的外 部圖像中的第二照片1501的觸摸，則移動終端100能夠將第二照片顯示為外部圖像[圖 15B]。 如果照片數據、移動圖片數據或文檔數據以文本列表格式被包括在外部圖像中， 則移動終端100運行該文本列表中識別的觸摸點所屬的數據，並且然後能夠將相應的圖像 顯示為外部圖像。 現在參照圖8，在控制器180的控制下，如果將觸摸識別為在識別步驟S840中的對 外部圖像的至少一個點的觸摸，則當從輸入圖像識別對至少一個點的觸摸時，移動終端IOO 能夠獲取觸摸點信息和指示器的大小信息中的至少一個[S850]。 在獲取步驟S850中獲取的指示器的觸摸點信息以及大小信息中的至少一個可以 被存儲在存儲器160中。使用所獲取的觸摸點信息以及所獲取的大小信息，移動終端100 能夠獲取外部圖像或輸入圖像上指示器的位置和大小。 即使指示器處於從外部圖像無法進行觸摸識別的位置，移動終端100也能夠從輸 入圖像獲取指示器的點信息和大小信息。 使用在獲取步驟S850中獲取的指示器的觸摸點信息(或點信息)和大小信息中
的至少一個，移動終端100能夠獲得由指示器創建的觸摸模式[S860]。 觸摸模式可以是觸摸並拖動、觸摸計數或觸摸持續時間。在控制器180的控制下，
移動終端100能夠執行對應於在獲得步驟S860中獲得的觸摸模式的操作。 如下參照圖16至19B詳細說明這樣的教導。為了描述的清楚和方便，假設可以通
過相機121依次輸入多個輸入圖像。
參照圖16，如果從第二輸入圖像獲取的指示器(2)的觸摸點或大小不同於從第一 輸入圖像獲取的指示器(1)的觸摸點，或等於指示器(1)的大小，則移動終端ioo能夠獲得 外部圖像的指示器的觸摸並拖動。因此，移動終端100能夠執行對應於該觸摸並拖動的操 作。 例如，如果對來自多個照片中的具體照片的具體文件進行觸摸並拖動，則移動終 端100以將該具體照片包括在該具體文件中的方式執行對應於該觸摸並拖動的操作。
參照圖17A和圖17B，移動終端100獲取位於在從第一輸入圖像[圖17A]的觸摸 可識別距離內的指示器(1)的觸摸點信息以及大小信息，並且能夠獲取位於在從第二輸入 圖像[圖17B]的觸摸識別不可用距離內的指示器(2)的觸摸點信息以及大小信息。
例如，如果從第二輸入圖像獲取的指示器(2)的位置或大小等於從第一輸入圖像 獲取的指示器(1)的位置但是大於指示器(1)的大小，則移動終端ioo能夠在觸摸外部圖 像的一個點第一持續時間(例如，短觸摸一次)之後獲得觸摸釋放。 因此，移動終端100能夠在第一持續時間之後執行對應於該觸摸釋放的操作。在 這種情況下，第一持續時間可以是短觸摸的觸摸時間段。 參照圖17A，如果從依次輸入的第一和第二輸入圖像獲取的指示器(1)的觸摸點 和大小互相相等，則移動終端100能夠獲得第二持續時間的觸摸點的觸摸(例如，長觸摸)。
因此，移動終端100能夠執行對應於第二持續時間的觸摸的操作。在這種情況下， 第二持續時間可以是指長觸摸的觸摸時間段。 參照圖17A和圖17B，儘管來自依次輸入的第一和第二輸入圖像的指示器的位置 相同，但是如果指示器的大小以第一大小(在觸摸可識別距離中的大小)、第二大小(在觸 摸識別不可用距離中的大小)以及分別根據第一和第二輸入圖像的第一大小的順序而變 化，則移動終端100能夠獲得對外部圖像的規定點的兩個觸摸。因此，移動終端100能夠執 行對應於兩次執行的兩個觸摸的操作。 現在參照圖8，使用在獲取步驟S850中獲取的觸摸點信息和大小信息中的至少一 個，移動終端100能夠在執行步驟S870中調節外部圖像的大小。在下面的描述中，參照圖 18A至19B詳細說明這樣的教導。為了下面描述的清楚和方便，假設可以經由相機121輸入 多個輸入圖像。還假設用於使得指示器能夠更遠離或更靠近外部屏幕的操作對應於外部圖 像放大或縮小命令。 參照圖18A和圖18B，如果從第二輸入圖像獲取的指示器(2)的位置或大小等於從 第一輸入圖像獲取的指示器(1)的位置，但是大於指示器(1)的大小(即，指示器更遠離外 部屏幕)，則移動終端100能夠放大並顯示外部圖像。 參照圖19A和圖19B，如果從第二輸入圖像獲取的指示器(2)的位置或大小等於從 第一輸入圖像獲取的指示器(1)的位置，但是小於指示器(1)的大小(即，指示器更靠近外 部屏幕)，則移動終端100能夠縮小並顯示外部圖像。 現在參照圖8，如果在獲得步驟S830中獲得指示器的運動(假設指示器和陰影之 間的距離位於觸摸可識別距離內)，則移動終端100能夠將具體圖像效果添加到對應於所 獲得的運動的外部圖像，或能夠執行具體功能。如下參照圖20A至21B詳細說明這樣的教導。 參照圖20A和圖20B，如果在觸摸可識別距離內獲得用於圖像效果添加的指示器運動，則移動終端100能夠將對應於該指示器運動的圖像效果添加到外部圖像。 參照圖21A和圖21B，如果在觸摸可識別距離內獲得對應於具體功能執行的指示
器運動，則移動終端ioo執行對應於該指示器運動的具體功能，並且能夠顯示相應的外部圖像。 例如，當具體功能是"翻一頁"，並且識別了對應於翻動該頁的指示器運動，則移動 終端100能夠將緊鄰第一圖像的第二圖像顯示為外部圖像。 現在參照圖8，移動終端100在獲得步驟S830從輸入圖像獲得外部圖像與外部物 體重疊的範圍，並且然後能夠根據所獲得的重疊範圍調節外部圖像的大小。參照圖22A和 圖22B詳細說明這樣的教導。 參照圖22A和圖22B，如果外部圖像和具體的人重疊，則移動終端100能夠縮小並 顯示該外部圖像，以避免與具體的人重疊的效果。 儘管縮小並顯示了外部圖像，但是如果變換了具體的人的位置，則移動終端100 能夠在避免與具體的人重疊的效果的範圍內放大並顯示外部圖像。 根據本發明的一個實施例，可以在程序記錄介質中將上述觸摸識別方法實現為計 算機可讀代碼。計算機可讀介質包括其中存儲計算機系統可讀的數據的各種記錄設備。計 算機可讀介質包括ROM、RAM、CD-RAM、磁帶、軟盤以及光數據存儲設備，並且還包括載波類型 的實現(例如，通過網際網路傳輸)。 因此，本發明的實施例提供了下列效果和/或優點。首先，本發明的實施例使得能 夠使用通過設置到移動終端的相機輸入的指示器及其陰影圖像來識別觸摸。因此，本發明 的實施例提供了用於在不直接觸摸觸控螢幕的情況下識別外部屏幕的觸摸動作，並且由此執 行相應的操作。 對於本領域的技術人員顯而易見的是，在不背離本發明的精神或範圍的情況下， 在本發明中可以進行各種修改和變化。因此，本發明旨在涵蓋本發明的修改和變化，只要它 們落入權利要求及其等同物的範圍內。
權利要求
一種移動終端，包括投影儀模塊，所述投影儀模塊被配置成投影用於在外部屏幕上顯示的圖像；相機，所述相機被配置成接收在所述外部屏幕上顯示的圖像的輸入圖像，所述輸入圖像包括位於所述圖像上的指示器以及所述指示器的陰影；以及控制器，所述控制器被配置成從所述輸入圖像獲得所述指示器和所述指示器的陰影之間的距離，以根據所獲得的距離在所顯示的圖像中識別所述指示器對觸摸點的觸摸，通過所述投影儀模塊在所述觸摸點投影指示器光標，並且執行對應於所識別的觸摸點的操作。
2. 根據權利要求1所述的移動終端，其中，所述控制器被配置成，如果所獲得的距離小 於預定距離，則識別所述指示器的觸摸。
3. 根據權利要求l所述的移動終端，其中，所述控制器被配置成，當所獲得的距離小 於預定距離時如果從所述輸入圖像獲得了所述指示器的具體運動，則識別所述指示器的觸 摸。
4. 根據權利要求1所述的移動終端，其中，所述控制器被配置成，如果所述指示器對來 自所述輸入圖像的至少一個點的觸摸被識別，則獲取所述指示器的觸摸點信息或所述指示 器以及陰影的大小信息中的至少一個。
5. 根據權利要求4所述的移動終端，其中，所述控制器被配置成使用所獲取的觸摸點 信息或所獲取的大小信息中的至少一個獲得所述指示器的觸摸模式，並且所述控制器被配 置成執行對應於所獲得的觸摸模式的操作。
6. 根據權利要求4所述的移動終端，其中，所述控制器被配置成使用所獲取的觸摸點 信息或所獲取的大小信息中的至少一個來調節顯示在所述外部屏幕上的圖像的大小。
7. 根據權利要求1所述的移動終端，其中，所述控制器被配置成執行下列中的至少一 個放大/縮小所述圖像的一部分的顯示、驅動應用或參照所識別的觸摸點執行數據。
8. 根據權利要求1所述的移動終端，其中，所述操作是具體圖像效果添加或具體功能 執行中的至少一個，所述具體圖像效果添加是顯示在對應於所述觸摸點以及所述指示器的 運動的圖像上方所添加的圖像，所述具體功能執行是執行與所述觸摸點和所述指示器的運 動相關的具體功能。
9. 根據權利要求1所述的移動終端，其中，所述控制器被配置成確定所顯示的圖像與 來自所述輸入圖像的外部物體重疊的範圍，並且調節所顯示的圖像的大小以使得所顯示的 圖像不與所述外部物體重疊。
10. 根據權利要求1所述的移動終端，其中，如果在預定時間段中沒有識別所述指示器 的觸摸，則所述控制器停止操作所述相機。
11. 根據權利要求1所述的移動終端，其中，所述投影儀模塊和所述相機中的每一個的 鏡頭都被配置成面向相同的方向。
12. 根據權利要求1所述的移動終端，其中，所述相機的位置相對於所述投影儀成預定 角度，以檢測所述指示器和所述陰影之間的距離。
13. 根據權利要求1所述的移動終端，其中，所述控制器被配置成對應於所述指示器的 運動來移動通過所述投影儀模塊投影的所述指示器光標。
14. 一種在移動終端中識別觸摸的方法，所述方法包括 在外部屏幕上投影圖像；捕獲所述外部屏幕以獲得輸入圖像，所述輸入圖像包括位於所述圖像上的指示器以及 所述指示器的陰影；從所述輸入圖像獲得所述指示器和所述陰影之間的距離； 根據所獲得的距離識別所述指示器對所顯示的圖像中的觸摸點的觸摸； 在所述觸摸點處投影指示器光標；以及 執行對應於所識別的觸摸點的操作。
15. 根據權利要求14所述的方法，進一步包括如果所獲得的距離小於預定距離，則識 別所述指示器的觸摸。
16. 根據權利要求14所述的方法，進一步包括當所獲得的距離小於預定距離時如果從 所述輸入圖像獲得了所述指示器的具體運動，則識別所述指示器的觸摸。
17. 根據權利要求14所述的方法，進一步包括如果從所述輸入圖像識別了所述指示器 對至少一個點的觸摸，則獲取所述指示器的觸摸點信息或所述指示器以及陰影的大小信息 中的至少一個。
18. 根據權利要求17所述的方法，進一步包括使用所獲取的觸摸點信息或所獲取的大 小信息中的至少一個來獲得所述指示器的觸摸模式，並且執行對應於所獲得的觸摸模式的 操作。
19. 根據權利要求17所述的方法，進一步包括使用所獲取的觸摸點信息或所獲取的大 小信息中的至少一個調節顯示在所述外部屏幕上的圖像的大小。
20. 根據權利要求14所述的方法，進一步包括執行下列中的至少一個放大/縮小所 述圖像的一部分的顯示、驅動應用或參照所識別的觸摸點執行數據。
21. 根據權利要求14所述的方法，其中，所述操作是具體圖像效果添加或具體功能執 行中的至少一個，所述具體圖像效果添加是顯示在對應於所述觸摸點以及所述指示器的運 動的圖像上方所添加的圖像，所述具體功能執行是執行與所述觸摸點和所述指示器的運動 相關的具體功能。
22. 根據權利要求14所述的方法，進一步包括確定所顯示的圖像與來自所述輸入圖像 的外部物體重疊的範圍，並且調節所顯示的圖像的大小以使得所顯示的圖像不與所述外部 物體重疊。
23. 根據權利要求14所述的方法，進一步包括如果在預定時間段中沒有識別所述指示 器的觸摸，則停止捕獲所述外部屏幕。
24. 根據權利要求14所述的方法，進一步包括對應於所述指示器的運動移動所投影的 指示器光標。
全文摘要
本發明公開了一種具有圖像投影的移動終端，該移動終端包括投影儀模塊、相機和控制器。投影儀模塊被配置成在外部屏幕上投影圖像。相機被配置成接收顯示在外部屏幕上的圖像的輸入圖像。該輸入圖像包括位於該圖像上的指示器以及該指示器的陰影。控制器被配置成從輸入圖像獲得指示器和指示器的陰影之間的距離，以根據所獲得的距離在所顯示的圖像中識別指示器對觸摸點的觸摸，通過投影儀模塊在觸摸點投影指示器光標，並且執行對應於所識別的觸摸點的操作。
文檔編號G06F3/048GK101729628SQ20091013258
公開日2010年6月9日 申請日期2009年4月7日 優先權日2008年10月15日
發明者辛德門, 金鐘煥 申請人:Lg電子株式會社