基於視覺環境的音頻和觸覺反饋的製作方法

2023-10-08 23:32:49 1

專利名稱：基於視覺環境的音頻和觸覺反饋的製作方法
技術領域：
本發明涉及電子設備，並且更特別地，涉及基於電子設備的視覺環境的音頻和觸 覺反饋。
背景技術：
很多電子設備製造商提供用於基本用戶接口(UI)控制(例如，圖標選擇、屏幕滾 動等)的觸控螢幕。隨著消費者對電子設備功能的需求增多，需要提供一種具有增多的觸摸 屏能力的改進設備。對持續體積小型化的需求生成了對實現增多的觸控螢幕功能的挑戰。相應地，需要 提供一種改進的具有用於電子設備的反饋能力的觸控螢幕用戶接口。

發明內容
根據本發明的一個方面，公開了一種裝置。所述裝置包括外殼部分、電子電路、觸 摸屏和用戶感覺反饋系統。所述電子電路被安裝在所述外殼部分內。所述觸控螢幕在所述外 殼部分上。所述觸控螢幕被配置以便感知在所述觸控螢幕的區域處的觸摸。所述電子電路被配 置以便分析在所述觸控螢幕的所述區域處顯示的特徵。所述用戶感覺反饋系統接近於所述外 殼部分。所述用戶感覺反饋系統被配置以便至少部分地基於以下內容來實施操作在所述 觸控螢幕的所述區域處的觸摸，以及對於在所述觸控螢幕的所述區域處的特徵的圖像分析。根據本發明的另一方面，公開了一種裝置。所述裝置包括外殼部分、電子電路、 觸控螢幕和用戶感覺反饋系統。所述電子電路被安裝在所述外殼部分內。所述觸控螢幕在所 述外殼部分上。所述觸控螢幕被配置以便感知在所述觸控螢幕的區域處的觸摸。所述電子 電路被配置以便確定在所述觸控螢幕的所述區域處顯示的特徵的第一紋理方向(texture direction)。所述電子電路被配置以便確定在所述觸控螢幕的所述區域處顯示的所述特徵 的第二不同紋理方向。所述用戶感覺反饋系統接近於所述外殼部分。所述用戶感覺反饋 系統被配置以便響應於在所述觸控螢幕的所述區域處的觸摸和在所述觸控螢幕的所述區域處 顯示的特徵的所述第一紋理方向，以第一模式進行操作。所述用戶感覺反饋系統被配置以 便響應於在所述觸控螢幕的所述區域處的觸摸和在所述觸控螢幕的所述區域處顯示的特徵的 所述第二紋理方向，以第二不同模式進行操作。根據本發明的另一方面，公開了一種方法。感知在觸控螢幕的區域處的觸摸。分析 在所述觸控螢幕的所述區域處顯示的特徵。響應於在所述觸控螢幕的所述區域處的觸摸和對於 在所述觸控螢幕的所述區域處的特徵的圖像分析，操作用戶感覺反饋系統。根據本發明的另一方面，公開了一種方法。感知在觸控螢幕的區域處的觸摸。確定 在所述觸控螢幕的所述區域處顯示的特徵的第一紋理方向。確定在所述觸控螢幕的所述區域處 顯示的特徵的第二不同紋理方向。響應於在所述觸控螢幕的所述區域處的觸摸和在所述觸摸 屏的所述區域處顯示的特徵的所述第一紋理方向，以第一模式操作用戶感覺反饋系統。響 應於在所述觸控螢幕的所述區域處的觸摸和在所述觸控螢幕的所述區域處顯示的特徵的所述第二紋理方向，以第二不同模式操作所述用戶感覺反饋系統。根據本發明的另一方面，公開了一種程序存儲設備，所述程序存儲設備可被機器 讀取，並且有形地體現了可被所述機器執行的指令的程序，用於實施操作以便基於在觸摸 屏上顯示的特徵來提供反饋。感知在所述觸控螢幕的區域處的觸摸。分析在所述觸控螢幕的所 述區域處顯示的特徵。至少部分地基於以下內容來操作用戶感覺反饋系統所感知的在所 述觸控螢幕的所述區域處的觸摸，以及針對所分析的在所述觸控螢幕的所述區域處顯示的特徵 而確定的紋理方向和/或圖形變化。


在結合附圖的下文說明書中解釋本發明的上述各方面和其它特徵，在所述附圖 中圖1是包括本發明特徵的電子設備的透視圖；圖2是表示了在圖1所示的電子設備中使用的示例性算法的流程圖；圖3是表示了在圖1所示的電子設備中使用的另一示例性算法的流程圖；圖4是圖1所示的電子設備的顯示器屏幕的正視圖；圖5是圖4所示的顯示器屏幕的區域的示圖；圖6是在圖1所示的電子設備的顯示器屏幕處提供反饋的示例性方法的框圖；圖7是在圖1所示的電子設備的顯示器屏幕處提供反饋的另一示例性方法的框 圖；以及圖8是示出了圖1所示的可攜式電子設備的組件的示意圖。
具體實施例方式參考圖1，其示出了納入本發明特徵的電子設備10的透視圖。儘管將參考附圖所 示的示例性實施例來描述本發明，然而應當理解，可以以很多替代形式的實施例來體現本 發明。另外，可以使用任何適當的尺寸、形狀或類型的元件或材料。在該實施例中，設備10包括網際網路平板設備。然而，在備選實施例中，該設備可以 包括任何適當類型的電子設備。例如，設備10可以包括行動電話、數位照相機、音樂播放 器、手持式遊戲設備、PDA或筆記本計算機。設備10 —般包括外殼部分12、連接到天線16 的收發器14、電子電路18 (例如在諸如外殼12內的控制器)、用戶輸入區20和顯示器22。 在備選實施例中，設備10可以具有本領域中已知的任何適當類型的特徵。在所示出的實施 例中，設備10包括用戶輸入區20和單個顯示器22。然而，備選實施例可以包括任何適當數 目的顯示器或用戶輸入區。另外，用戶輸入區可以包括例如鍵板。顯示器22能夠顯示各種應用顯示和信息，包括例如，數字圖片、網際網路Web站點頁 面、應用控制屏幕和菜單。這些僅是一些例子，不應當被視為加以限制。除了能夠充當顯示 器屏幕外，顯示器22還是適於感知用戶的手指或指示筆對顯示器的觸摸或按壓的觸控螢幕。 因而，顯示器22形成了可用於基本用戶接口(UI)控制(例如，圖標選擇、屏幕滾動等)的 觸控螢幕用戶接口。根據本發明的一些實施例，設備10提供了被合併到觸控螢幕22中的用戶感覺反饋 系統24。該用戶感覺反饋系統可以利用例如觸覺技術。觸覺技術指的是這樣的技術，即，通過向用戶施加力量、震動和/或動作，經由對觸摸的感知來與用戶交接的技術。例如，用戶 感覺反饋系統24的換能器(transducer)或激勵器(actuator) 26可以被放置在觸控螢幕22 下面，當用戶按壓屏幕22上的虛擬按鈕時生成反饋。換能器或激勵器26可以是壓電激勵 器。壓電是晶體響應於所施加的機械應力而生成電壓的能力。壓電效應是可逆的，因為在 壓電晶體受到外部施加的電壓時可以少量地改變形狀。可以作出反饋來近乎真實地仿真在 按鈕下的真實物理圓頂(dome)，因而創建基於壓電激勵器的紋理仿真或運動仿真。應當注意，用戶感覺反饋系統24可以包括在用戶按壓觸控螢幕22的時候能夠向用 戶給予音頻和/或觸覺反饋的任何適當類型的換能器或激勵器。例如，換能器/激勵器26 可以是諸如擴音器這樣的電聲換能器，或者諸如震動器/激勵器/觸覺設備這樣的機電換 能器。另外，應當注意，備選實施例可以包括任何適當數目的換能器和/或激勵器。壓電激勵器26的輸出可以是動態的並且容易被編制。根據本發明的一些實施例， 當用戶在屏幕22上移動手指或指示筆時，設備10利用壓電激勵器26來產生對觸控螢幕22 上的物理材料的仿真。例如，考慮這樣一種情形觸控螢幕「桌面」上有照片被用作背景圖像，並且其上方存 在具有清晰邊框的大的白色窗口。現在，當用戶在該背景圖像上移動指示筆時，壓電激勵器 26被用於造成屏幕22上的一點震顫(tremble)，從而使得背景感覺到崎嶇不平(bumpy)。 當指示筆跨窗口邊框移動時，存在清楚的「點擊」，從而使得用戶感覺到具有清楚銳利的邊 緣。當在窗口背景上拖拽指示筆時，並不生成震顫，這造成關於窗口可包括的平坦材料的假 象(illusion)。在精心挑選的用於指示筆尖端和觸控螢幕22的材料的情況下，甚至可以仿真摩擦 (friction)。如果指示筆的尖端是由橡膠製成的(S卩，在指示筆與屏幕22之間有高摩擦)， 那麼拖拽它需要一點力量。然後，造成屏幕22的一點震顫會使得指示筆尖端一直從屏幕22 彈開一點，從而使得拖拽它更輕，生成關於更光滑表面的假象。根據本發明的一些實施例，對具有用戶感覺反饋系統24的設備10的操作首先包 括在通電狀態起動設備10。優選地，可以在觸摸發生之前進行對屏幕22內容的分析(即， 生成針對當用戶觸控螢幕幕22上的點時應當如何驅動聲音/觸覺激勵器26的指令)，以便最 小化在觸摸和生成輸出的時間之間的等待時間。為此，每次屏幕22內容發生改變，圍繞屏幕22上的每一個點，屏幕22內容都被分 析(至少在發生改變的區域中)。例如，可以運行紋理分析算法，所述紋理分析算法分析在 屏幕22上的每一個點周圍的預先定義的區域(例如，10乘10像素)中的粗糙度。或者，可 以運行例如邊緣檢測算法。應當注意，屏幕22可以顯示例如像靜態圖像、移動圖片或視頻 這樣的視覺信息。還應當注意，視覺信息可以包括區域、圖標、文本或數字(所有這些都可 以被分析)。在一些情況中，移動的方向也會起作用，例如，取決於觸摸點是跨邊緣移動還是沿 邊緣移動，邊緣生成不同的輸出。該輸出還可以仿真特定類型的材料，其中，取決於以哪種 方式來觸摸或摩擦屏幕22，感覺是不同的。例如，毛皮取決於它是被沿著毛皮的毛髮方向還 是反方向觸摸，感覺是不同的。這可以通過確定特徵的紋理方向來實現。紋理方向可以是 沿特徵的第一方向的第一紋理。特徵還可以包括沿相同特徵的第二不同方向的第二不同紋 理。所述第一和第二方向以及第一和第二紋理可以處於顯示器22的相同區域。可以通過在觸控螢幕22的所述區域處顯示的特徵的顏色、強度、銳度、亮度或對比度來定義紋理方向。 例如，按照在以上描述的在屏幕22上顯示「毛皮」的情況中，特徵的顏色、強度、銳度、亮度 或對比度可以與被觸摸或按壓的顯示器22的所述區域處的特徵的紋理方向相關聯。在一些情況中，保持手指/指示筆靜止並不造成聲音/觸覺輸出，而是只有當手指 /指示筆移動時才生成輸出(現實生活中的例子可以是在桌子上的紙張的邊緣上放置手 指，當手指靜止時，過一會就感覺不到邊緣，而當手指移動時，再次感覺到邊緣)。這可以通 過操作用戶感覺反饋系統24使得換能器26在一段時間不活動來實現。另一例子可以是 當在屏幕22的一部分上顯示黑色時，這可以僅指示圖形背景，並且因此不需要在顯示器22 處提供任何類型的反饋(即，換能器26不是活動的)。這同樣可以應用於當在顯示器22上 顯示的特徵有變化時。圖2示出了表示設備10的示例性算法的流程圖。該算法包括以下步驟。基於圖 像分析(例如，圍繞點的紋理分析、邊緣檢測、顏色/亮度/銳度等)，為屏幕22上的每一個 點創建輸出表，可能地，還為在不同方向上的移動計算不同的值(步驟102)。屏幕22內容 在改變(步驟104) ？該算法使得對每個位置的音頻和/或觸覺反饋能夠取決於觸控螢幕22中被按壓的 區域的視覺信息。例如，用戶感覺反饋系統24可以響應於在觸控螢幕22的所述區域處顯示 的特徵的顏色、強度、銳度、亮度或對比度，在觸控螢幕22的所述區域處提供音頻和/或觸覺 反饋。在使用期間，用戶的手指或指示筆擊打屏幕22。但不一定要生成觸覺反饋。如果用 於觸摸點的輸出表不存在(例如，在視頻情況下)，則為該觸摸點計算輸出。這可以取決於 移動，從而使得當手指/指示筆靜止時不生成輸出。圖3示出了表示設備10的另一示例性算法的流程圖。該算法包括以下步驟。用 戶正在觸控螢幕幕22 (步驟202) ？用於觸摸點的輸出表存在嗎(步驟204) ？基於圖像分析 (例如，紋理分析、顏色分析、邊緣檢測等)以及(有可能)移動方向，為觸摸點生成輸出指 令(步驟206)。基於用於觸摸點的輸出指令，驅動聲音和/或觸覺激勵器26(步驟208)。 用戶仍在觸控螢幕幕22 (步驟210) ？觸摸點在移動(步驟212) ？記錄移動方向(步驟214)。如果手指/指示筆被保持在屏幕22上並且被移動，則系統記錄移動的方向(要是 針對手指/指示筆所移動到的點的不同方向，輸出表具有不同的值)。用戶感覺反饋系統24可以包括在觸控螢幕的不同區域處的換能器/激勵器26。這 允許用戶感覺反饋系統24對觸控螢幕22的其它區域處的觸摸進行響應。例如，即使當所按 壓的區域改變坐標(或屏幕22的區域)時，用戶感覺反饋系統24也可以繼續工作。另外， 觸控螢幕22和用戶感覺反饋系統24可以被配置以便當用戶的手指或指示筆觸摸觸控螢幕22 的邊框時，提供反饋(其例如可以是音頻或觸覺反饋)。圖4示出了設備10的顯示器22上的示例性桌面環境300，它可以例如是Nokia N800網際網路平板 。用於屏幕22的輸出表可以包括例如以下規則兩個像素之間(在移 動方向上)的對比度越大，用於聲音/觸覺激勵器的輸出就越大。圖4和圖5中示出了這 樣的例子。在圖4中，用戶通過沿屏幕22的區域(由虛線302示出)移動拇指或手指28 來觸控螢幕幕22。在圖5中單獨示出了圍繞虛線302的區域的輸出。圖5是示圖400，其示 出了當手指28位於該區域的每個點上時到達用戶感覺反饋系統24 (其可以包括例如壓電 激勵器/擴音器等)的輸出信號。舉例來說，利用邊緣檢測算法，通過分析桌面區域300來生成所述輸出信號。邊緣檢測算法將桌面區域300轉換成如圖5中所示的「衝擊圖(bump map) 」。例如，桌面300上所顯示的特徵的邊緣304、306、308分別對應於示圖400所示的峰 404、406、408。圖6示出了在觸控螢幕22處提供反饋的示例性方法500。該方法500包括以下步 驟。感知在觸控螢幕22的區域處的觸摸(步驟502)。所述感知可以例如通過壓電傳感器來 進行。分析在觸控螢幕22的所述區域處顯示的特徵(步驟504)。並且，響應於在觸控螢幕22 的所述區域處的觸摸以及對於在觸控螢幕22的所述區域處的特徵的圖像分析，操作用戶感 覺反饋系統(步驟506)。這可以例如是諸如幻燈片放映這樣的圖片或者動畫中的改變。使 得所述至少一個換能器26對於所述特徵的改變是不活動的(步驟508)。響應於在觸控螢幕 22的另一區域處的觸摸，操作用戶感覺反饋系統(步驟510)。響應於在觸控螢幕22的所述 區域處的觸摸，操作用戶感覺反饋系統，其中，所述區域包括觸控螢幕22的至少一個邊框，並 且其中，用戶感覺反饋系統提供音頻或觸覺反饋(步驟512)。應當注意，以上任何步驟均可 以被單獨實施或結合一個或多個步驟進行實施。圖7示出了在觸控螢幕22處提供反饋的另一示例性方法600。該方法包括以下步 驟。感知在觸控螢幕22的區域處的觸摸(步驟602)。確定在觸控螢幕22的所述區域處顯示 的特徵的第一紋理方向(步驟604)。確定在觸控螢幕22的所述區域處顯示的所述特徵的第 二不同紋理方向(步驟606)。響應於在觸控螢幕22的所述區域處的觸摸以及在觸控螢幕22的 所述區域處顯示的所述特徵的第一紋理方向，以第一模式來操作用戶感覺反饋系統(步驟 608)。響應於在觸控螢幕22的所述區域處的觸摸以及在觸控螢幕22的所述區域處顯示的所述 特徵的第二紋理方向，以第二不同模式來操作用戶感覺反饋系統(步驟610)。在觸控螢幕22 上的所述觸摸的時刻向用戶提供音頻和/或觸覺反饋(步驟612)。響應於在觸控螢幕22的 所述區域處顯示的所述特徵的顏色、強度、銳度、亮度或對比度，在觸控螢幕22的所述區域處 提供音頻或觸覺反饋(步驟614)。應當注意，以上任何步驟均可以被單獨實施或結合一個 或多個步驟進行實施。現在參考圖8，例如，設備10 —般包括諸如微處理器這樣的控制器700。電子電路 包括例如像印刷電路板上的耦合於控制器700的存儲器702。存儲器可以包括多個存儲器， 包括例如可裝卸存儲器模塊。所述設備具有用戶可以使用的諸如軟體的應用704。所述應 用可以包括例如電話應用、網際網路瀏覽應用、遊戲播放應用、數位照相機應用等。這些僅是 一些例子，不應當被視為有所限制。一個或多個用戶輸入20耦合於控制器，並且一個或多 個顯示器22耦合於控制器700。用戶感覺反饋系統24 (包括換能器/激勵器26)也耦合於 控制器700。優選地，當觸控螢幕22上顯示的特徵有變化時，設備10被編制以便在顯示器處 自動提供反饋響應。然而，在備選實施例中，這可以不是自動的。用戶可能需要主動選擇正 在使用/運行的應用上的改變。在常規配置中，壓電顯示器中存在未利用的潛力。根據本發明的一些實施例，設備 10為用戶提供桌面式用戶接口，並且利用觸覺反饋，從而使得用戶可以感覺出桌面上的不 同材料。例如，在用戶的手上可以感覺出在滾動條上移動光標，使得更容易擊中它。或者， 桌面的背景圖像感覺是崎嶇不平的，而窗口感覺是光滑的。簡而言之，該系統創建了關於桌 面是由物理物質製成的假象，從而除了視覺感知之外還提供了觸覺感知，增加了系統的可 用性。
儘管用戶感覺反饋系統的換能器/激勵器可以生成附加的聲音並且增加能耗，然 而設備10相比於常規配置提供了顯著優勢。根據本發明的一些實施例，除了查看顯示器中 示出的項目之外，設備10還允許用戶「感覺」顯示器中示出的項目。這增加了可用性，尤其 是在用戶的注意力會被分散的移動情境中，通過若干形態來提供反饋是有幫助的。本發明的各種示例性實施例設定分析所顯示的圖像，以便創建屏幕內容的「觸覺 地圖」。所述內容可以例如只是屏幕或任何其它應用上的圖像或特徵。所述圖像或特徵也 可以是除了顏色之外的事物。例如，可以對圖像實施面部檢測算法，並且僅當用戶的手指在 面部上時，產生觸覺輸出。或者，在另一例子中，可以實施方向檢測算法，其中，僅在具有垂 直線的區域上生成觸覺輸出。另外，應當注意，觸覺輸出可以取決於用戶的觸摸點(即，手指或指示筆所在的 點)移動的方向。因而，如果屏幕上存在垂直線，則當觸摸點跨這些線(即，在水平方向上) 移動時而不是當觸摸點沿這些線(即，垂直方向)移動時，可以生成觸覺輸出。通過這種方 式，可以生成關於一些表面結構的假象。本發明的各種示例性實施例設定觸覺輸出是基於對屏幕上事物的圖像分析(或 面部檢測)的。常規配置通常提供預先生成的內容，其中，當系統檢測到光標在窗口邊框上 被移動時，產生預先定義的觸覺力量。常規配置也不考慮特徵或圖像(例如像窗口邊框) 在顯示器屏幕上看起來如何。根據本發明各種實施例的優勢在於即使窗口邊框是不可視 的(或者在屏幕上是看不見的)，也生成觸覺力量。本發明的各種示例性實施例設定事先(從而使得可以生成「輸出表」，類似圖2所 示的步驟102)或者在使用期間(類似圖3所示的步驟204和206)分析處於光標下的屏幕 內容(圖像分析)。另外，如果還沒有生成「輸出表」，那麼可以立即計算與當前位置相關的 輸出。在常規配置中，觸覺輸出需要事先編制，並且因此不能在例如像用戶所拍攝的照 片這樣的一些特徵或圖像上實施。另一方面，本發明的各種示例性實施例設定分析圖像的 粗糙度，並且當用戶的手指/指示筆在圖像上移動時，相應地生成觸覺輸出。本發明的一些 實施例還設定分析特徵或圖像的顏色或亮度。例如，黃色可以被定義成產生特定類型的震 動。然而，在備選實施例中，甚至可以實施更為精細的圖像處理。本發明的各種示例性實施例允許觸控螢幕上的特徵基於圖像分析，其中，所述特徵 處在光標/指示筆當前所在的觸摸點的下方。這提供了基於圖像分析的特徵。該特徵可以 例如是在觸摸點下方的像素的顏色或亮度。然而，所述特徵還可以是更複雜的事物，例如像 在觸摸點周圍(具有某種預先定義的尺寸)的區域中的圖像的整體粗糙度。在另一例子中， 所述特徵可以是在該點周圍的圖形紋理的方向。在又一例子中，則是該觸摸點是否處在被 檢測到存在面部的這種圖像區域上。這種觸覺輸出生成還可以取決於觸摸點移動的方向。舉例來說，當嘗試仿真所顯示的圖像/內容的材料特性時，以及當在跨觸控螢幕滑 動手指時使用不同的觸覺震動模式時，本發明的各種示例性實施例為用戶體驗增值。應當理解，以上說明書僅示意性地說明本發明。在不背離本發明的情況下，本領域 的技術人員可以設想出各種備選方案和修改。相應地，本發明旨在涵蓋落入所附權利要求 範圍內的所有這樣的備選方案、修改和變化。
權利要求
一種裝置，其包括外殼部分；安裝在所述外殼部分內的電子電路；在所述外殼部分上的觸控螢幕，其中，所述觸控螢幕被配置以便感知在所述觸控螢幕的區域處的觸摸，並且其中，所述電子電路被配置以便分析在所述觸控螢幕的所述區域處顯示的特徵；以及接近於所述外殼部分的用戶感覺反饋系統，其中，所述用戶感覺反饋系統被配置以便至少部分地基於以下內容來實施操作在所述觸控螢幕的所述區域處的觸摸，以及對於在所述觸控螢幕的所述區域處的特徵的圖像分析。
2.根據權利要求1的裝置，其中，所述用戶感覺反饋系統包括電聲換能器和/或機電換 能器。
3.根據權利要求1或2的裝置，其中，所述用戶感覺反饋系統被配置以便在所述觸摸 屏的所述區域處向用戶提供音頻和/或觸覺反饋。
4.根據權利要求1至3中任何一項的裝置，其中，所述觸控螢幕被配置以便在所述觸摸 屏的所述區域處顯示靜態圖像、移動圖片或視頻。
5.根據權利要求1至4中任何一項的裝置，其中，所述裝置包括可攜式通信設備。
6.一種裝置，其包括外殼部分；安裝在所述外殼部分內的電子電路；在所述外殼部分上的觸控螢幕，其中，所述觸控螢幕被配置以便感知在所述觸控螢幕的區域 處的觸摸，其中，所述電子電路被配置以便確定在所述觸控螢幕的所述區域處顯示的特徵的 第一紋理方向，並且其中，所述電子電路被配置以便確定在所述觸控螢幕的所述區域處顯示 的所述特徵的第二不同紋理方向；以及接近於所述外殼部分的用戶感覺反饋系統，其中，所述用戶感覺反饋系統被配置以便: 響應於在所述觸控螢幕的所述區域處的觸摸以及在所述觸控螢幕的所述區域處顯示的所述特 徵的第一紋理方向，以第一模式進行操作，並且其中，所述用戶感覺反饋系統被配置以便 響應於在所述觸控螢幕的所述區域處的觸摸以及在所述觸控螢幕的所述區域處顯示的所述特 徵的第二紋理方向，以第二不同模式進行操作。
7.根據權利要求6的裝置，其中，所述用戶感覺反饋系統包括換能器。
8.根據權利要求7的裝置，其中，所述換能器被布置接近於所述觸控螢幕。
9.根據權利要求6的裝置，其中，所述用戶感覺反饋系統包括電聲換能器和/或機電換 能器，並且其中，所述用戶感覺反饋系統被配置以便在所述觸控螢幕的所述區域處向用戶提 供音頻和/或觸覺反饋。
10.根據權利要求6的裝置，其中，所述用戶感覺反饋系統包括壓電激勵器。
11.一種方法，其包括感知在觸控螢幕的區域處的觸摸；分析在所述觸控螢幕的所述區域處顯示的特徵；以及響應於在所述觸控螢幕的所述區域處的觸摸以及對於在所述觸控螢幕的所述區域處的特 徵的圖像分析，操作用戶感覺反饋系統。2
12.根據權利要求11的方法，其中，所述用戶感覺反饋系統包括至少一個換能器。
13.根據權利要求12的方法，其中，操作所述用戶感覺反饋系統進一步包括使得所述 至少一個換能器對於所述特徵的改變是不活動的。
14.根據權利要求11的方法，其中，所述用戶感覺反饋系統包括電聲換能器和/或機電 換能器。
15.根據權利要求11至14中任何一項的方法，其中，對所述用戶感覺反饋系統的操作 進一步包括響應於在所述觸控螢幕的另一區域處的觸摸，操作所述用戶感覺反饋系統。
16.根據權利要求11至15中任何一項的方法，其中，對所述用戶感覺反饋系統的操 作進一步包括響應於在所述觸控螢幕的所述區域處的觸摸，操作所述用戶感覺反饋系統，其 中，所述區域包括所述觸控螢幕的至少一個邊框，並且其中，所述用戶感覺反饋系統提供音頻 或觸覺反饋。
17.根據權利要求11至16中任何一項的方法，其中，能夠在可攜式通信設備中實現所 述方法。
18.一種方法，其包括感知在觸控螢幕的區域處的觸摸；確定在所述觸控螢幕的所述區域處顯示的特徵的第一紋理方向；確定在所述觸控螢幕的所述區域處顯示的所述特徵的第二不同紋理方向；響應於在所述觸控螢幕的所述區域處的觸摸以及在所述觸控螢幕的所述區域處顯示的特 徵的第一紋理方向，以第一模式來操作用戶感覺反饋系統；以及響應於在所述觸控螢幕的所述區域處的觸摸以及在所述觸控螢幕的所述區域處顯示的特 徵的第二紋理方向，以第二不同模式來操作所述用戶感覺反饋系統。
19.根據權利要求18的方法，其中，所述用戶感覺反饋系統包括電聲換能器和/或機電 換能器。
20.根據權利要求18或19的方法，其中，對所述用戶感覺反饋系統的操作進一步包括 在所述觸控螢幕上的所述觸摸的時刻向用戶提供音頻和/或觸覺反饋。
21.根據權利要求18至20中任何一項的方法，其中，對所述特徵的第一和第二紋理 方向的確定進一步包括確定在所述觸控螢幕的所述區域處顯示的所述特徵的顏色、強度、銳 度、亮度和/或對比度。
22.根據權利要求18至21中任何一項的方法，其中，對所述用戶感覺反饋系統的操作 進一步包括響應於在所述觸控螢幕的所述區域處顯示的所述特徵的顏色、強度、銳度、亮度 或對比度，在所述觸控螢幕的所述區域處提供音頻或觸覺反饋。
23.根據權利要求18至22中任何一項的方法，其中，所述特徵包括靜態圖像、移動圖片 或視頻。
24.根據權利要求18至23中任何一項的方法，其中，所述特徵包括區域、圖標、文本和/或數字。
25.一種機器可讀的程序存儲設備，其有形地體現了可由所述機器執行的指令的程序， 用於實施操作以便基於觸控螢幕上所顯示的特徵來提供反饋，所述操作包括感知在所述觸控螢幕的區域處的觸摸；分析在所述觸控螢幕的所述區域處顯示的特徵；以及至少部分地基於以下內容來操作用戶感覺反饋系統所感知的在所述觸控螢幕的所述區 域處的觸摸，以及針對所分析的在所述觸控螢幕的所述區域處顯示的特徵而確定的紋理方向 和/或圖形改變。
全文摘要
此處公開了一種裝置。所述裝置包括外殼部分、電子電路、觸控螢幕和用戶感覺反饋系統。所述電子電路被安裝在所述外殼部分內。所述觸控螢幕在所述外殼部分上。所述觸控螢幕被配置以便感知在所述觸控螢幕的區域處的觸摸。所述電子電路被配置以便分析在所述觸控螢幕的所述區域處顯示的特徵。所述用戶感覺反饋系統接近於所述外殼部分。所述用戶感覺反饋系統被配置以便至少部分地基於以下內容來實施操作在所述觸控螢幕的所述區域處的觸摸，以及對於在所述觸控螢幕的所述區域處的特徵的圖像分析。
文檔編號G06F3/048GK101910977SQ200880122699
公開日2010年12月8日 申請日期2008年12月26日 優先權日2007年12月28日
發明者S·P·龍凱寧 申請人:諾基亞公司