用於呈現視覺接口內容的系統和方法

2024-02-10 09:48:15

用於呈現視覺接口內容的系統和方法
【專利摘要】一種用於在應用程式執行期間呈現包括附加視覺接口內容的視覺接口內容的方法，且該附加視覺接口內容提供與應用程式執行相關聯的視覺信息。該方法包括：使用第一接口顯示該附加視覺接口內容，使用第二接口顯示該附加視覺接口內容，和基於該第一接口和該第二接口的致動而在該第一接口和該第二接口中至少一個上顯示更新的附加視覺接口內容。
【專利說明】用於呈現視覺接口內容的系統和方法

【技術領域】
[0001]本公開內容涉及通過支持具備顯示功能的鍵盤、小鍵盤和/或其它類型用戶輸入裝置對視覺信息或光信號的管理和呈現。更具體地，本公開內容的實施例涉及用於選擇性控制視覺接口內容的呈現的系統和方法，該視覺接口內容包括主要視覺接口內容和附加視覺接口內容。主要視覺接口內容可由主要顯示設備(例如，計算機監視器)顯示。附加視覺接口內容可由一個或多個具備顯示功能的用戶輸入裝置顯示，且還可能由主要顯示設備顯示。具備顯示功能的用戶輸入設備(如具備顯示功能的鍵盤、小鍵盤、計算機滑鼠或遊戲控制器)被配置來(a)接收被引導至應用程式執行的控制方面的用戶輸入；且(b)基於用戶輸入(例如，被引導至具備顯示功能的用戶輸入設備)、主要視覺接口內容和/或應用程式執行情境、狀況或狀態，以適應性方式選擇性呈現與一組應用程式相關聯的一種或多種類型的附加視覺接口內容。

【背景技術】
[0002]最近幾十年，電子遊戲已變得日益風行。各種類型的電子遊戲隨著時間的流逝已展現出強勁或十分強勁的市場增長，諸如第一人稱射手(FPS)遊戲和基於網際網路的大型多玩家在線(MMO)遊戲。這些類型的遊戲和其它類型的電子遊戲在可預見的未來有望展現出持續強勁的市場增長。
[0003]在與遊戲對應的應用程式的執行期間，將向用戶、玩家或遊戲者呈現或顯示提供遊戲相關視覺內容的視覺接口。取決於所考慮的遊戲應用程式，視覺接口可包括:與當前所玩遊戲中特定遊戲環境對應的場景的視覺表示；遊戲人物之間的當前互動；當前有關的遊戲相關信息(例如，人物狀況或屬性，或者視覺或虛擬環境圖)；和引導至用戶的消息。視覺接口可進一步包括當前可供用戶選擇的特定類型的遊戲相關功能或操作的視覺表示。由於電子遊戲的情境、狀況或狀態與用戶輸入和遊戲應用程式執行相關聯而隨著時間演變，因此視覺接口內容應適應性地指示在任何給定時間的當前遊戲情境、狀況或狀態。即，應適當且動態地更新視覺接口內容以使得該視覺接口內容在視覺上傳達當前遊戲情境、遊戲人物之間的當前互動、當前遊戲相關信息和可供用戶選擇的當前有關(例如，戰略或戰術上有關)的遊戲相關功能或操作。
[0004]隨著技術的發展，電子遊戲和與其相關聯的視覺接口已變得日益複雜。例如，可玩遊戲的視覺環境的類型、遊戲人物的類型和此類人物可做動作和/或互動的方式、可提供給用戶的遊戲相關信息的類型和可具有情景價值的用戶可選擇的遊戲相關功能或操作的類型已增多和/或變得更為複雜或難懂。遺憾的是，用於提供視覺接口內容的傳統系統、設備、裝置和技術使此內容適應不斷演變的遊戲情境、狀況或狀態的方式受到不合需要的限制，效率低下或相當麻煩。此外，用於制定或增加提供給用戶選擇的遊戲相關應用功能的數目的傳統系統、設備、裝置和技術(諸如遊戲專用鍵盤，其提供與特定遊戲應用程式對應的一組定製的用戶可選擇鍵或按鈕)在其適應跨不同遊戲應用程式(包括同一遊戲的不同代)的用戶可選擇功能的不同類型和/或增大數目的能力方面並不靈活。
[0005]除上述以外，眾多遊戲的不斷增加的複雜性和圖形細節和對應於用戶與虛擬環境的互動而可產生的視覺信息的純粹量已導致在玩遊戲期間顯示的視覺接口內容的量和/或類型不斷增加，此情形可導致視覺接口內容顯得凌亂、混亂、視覺上散亂或難以解譯或解密，從而可對用戶的視覺體驗、用戶輸入精確度和/或用戶與遊戲應用程式互動的效率產生不利影響。
[0006]因此，需要改進的系統、設備、裝置、方法和/或技術，用來在一個或多個時間以如下方式向用戶呈現視覺接口內容且適應性地更新視覺接口內容，該方式可增強用戶的視覺體驗，增加用戶與遊戲應用程式互動的效率，和/或增加可供用戶選擇的遊戲應用程式相關功能或操作的數目和/或類型。


【發明內容】

[0007]根據本發明的第一方面，公開一種用於在應用程式執行期間呈現包括附加視覺接口內容的視覺接口內容的自動化方法，且所述附加視覺接口內容提供與應用程式執行相關聯的視覺信息。該方法包括:使用第一接口來顯示所述附加視覺接口內容，使用第二接口來顯示所述附加視覺接口內容，和基於所述第一接口和第二接口的致動而在所述第一接口和第二接口中至少一個上顯示更新的附加視覺接口內容。
[0008]根據本發明的第二方面，公開一種用作具備顯示功能的用戶輸入設備的裝置，該裝置包括:具有至少一個顯示組件的第一組顯示組件和對應的第一顯示控制器；具有至少一個顯示組件的第二組顯示組件和對應的第二顯示控制器；包括一組QWERTY鍵的第一組觸覺鍵；第二組具備顯示功能的觸覺鍵，其中每個具備顯示功能的鍵包括觸覺鍵和屬於所述第二組顯示組件的顯示組件；觸摸傳感器和對應的觸摸傳感器控制器；和USB控制器。此夕卜，通過所述第一組觸覺鍵和所述第二組具備顯示功能的觸覺鍵的用戶輸入被傳輸至對應的計算機可編程邏輯器件(CPLD)。

【專利附圖】

【附圖說明】
[0009]圖1示出用於管理、控制、選擇、呈現和/或更新主要視覺接口內容和附加視覺接口內容的代表性系統的系統圖。

【具體實施方式】
[0010]下文描述用於解決一個或多個前述問題的本公開內容的代表性實施例。出於簡潔和清楚目的，本文中的描述主要涉及用於管理、協調、映射、控制、呈現和/或選擇與主要視覺接口和一個或多個附加、輔助或次要視覺接口對應的視覺信息的用戶接口系統、設備、裝置、技術和方法。然而，此並不排除本公開內容的各種實施例有其它應用，在這些應用中需要本公開內容的各種實施例中普遍存在的基本原理，如操作、功能或性能特徵。就本文中的描述和對應的圖而言，相似或類似附圖標記指示相似或類似組件。關於與一個或多個圖對應的描述性材料，給定附圖標記的敘述可指示對先前示出該附圖標記的圖的同時考慮。
[0011]在本公開內容的上下文中，術語「組」根據已知數學定義(例如，以與在AnIntroduct1n to Mathematical Reasoning:Numbers, Sets, and Funct1ns (數學推理介紹:數、集和函數)，「Chapter 11 !Properties of Finite Sets (第 11 章:有限集的性質)」(例如，如第140頁上所指示的)，Peter J.Eccles (皮特.J.埃克萊斯)，CambridgeUniversity Press (劍橋大學出版社)(1998)中描述的方式對應的方式)被定義為在數學上展示出至少為I的基數的元素的非空有限組(即，如本文定義的「組」可與單個或單元素組或者多元素組對應)。
_2] 主要和附加用戶接口的代表性方面
[0013]一般而言，用戶接口可涵蓋:硬體(例如，用戶輸入硬體和視覺信息輸出硬體)，軟體(例如，與固件、作業系統和應用程式中的一個或多個對應的程序指令)，產生的視覺信息或構造(例如，文本、符號、圖標、圖形小工具、視覺環境或場景、動畫、視頻和用戶和/或非玩家人物的部分中的一個或多個)，產生的效果(例如，照明效果或聲音)，和/或促進或實施用戶與一個或多個自動化、計算機化或電子系統或裝置和/或此類系統或裝置的其它用戶的互動的通信信息(例如，通知或消息)。
[0014]根據本公開內容的實施例，用戶接口包括主要視覺接口和與主要視覺接口相關聯的一個或多個附加視覺接口。附加視覺接口可促進或增強用戶與主要視覺接口、應用程式和/或其它用戶的互動。附加視覺接口可充當主要視覺接口的支持接口，且可與特定類型的用戶可控制或用戶可選擇的任務或操作相關聯或相關。
[0015]一般而言，主要視覺接口被配置來提供、呈現或輸出主要視覺內容、信息和/或信號(以下為主要視覺內容)，且附加視覺接口被配置來提供、呈現或輸出附加視覺內容、信息和/或信號(以下為附加視覺內容)。主要視覺內容充當視覺信息或主題的主要、首要、重要或最直接來源，該視覺信息或主題在視覺上指示、輸出或傳達一組本地和/或遠程應用程式的當前執行狀況、情境或狀態以及用戶與此類應用程式互動的結果。根據應用程式的當前執行狀況、狀態或情境動態地或逐步地更新主要視覺內容(例如，以實時、近實時、準實時、同步或大體同步的方式)。例如，應用程式執行狀態可響應於與一組對應的本地和/或遠程應用程式的本地和/或遠程用戶互動(例如，針對一組對應的本地和/或遠程應用程式的用戶輸入)而演變，且可基於該用戶互動而相應地更新主要視覺內容。因此，主要視覺內容可在視覺上指示或對應於在任何給定時間的當前應用程式執行情境和一個或多個用戶的當前狀態或狀況。
[0016]附加視覺內容充當附加、關聯或次要信息或主題的來源，該信息或主題促進或允許與主要視覺接口和/或本地或遠程應用程式相關聯的一個或多個類型的功能、操作或任務的執行。取決於實施例細節，附加視覺內容可對應於:(a)與當前主要視覺內容直接相關，由當前主要視覺內容指示或反映當前主要視覺內容的應用程式事件(以下為應用程式事件)，該應用程式事件包括當前執行的應用程式的執行情境或主題進程內發生的應用程式內(in-applicat1n)事件；(b)與當前主要視覺內容間接相關,與當前主要視覺內容不相關或不反映當前主要視覺內容的應用程式事件(例如，應用程式內事件)(例如，與視覺或虛擬環境或世界的當前未顯示部分對應，該當前未顯示部分不存在於主要視覺接口內容中)；(c)與應用程式相關聯的文本、動畫、視頻、或圖形內容、組件、對象、符號、標記、構造或實體表示(例如，遊戲人物)；(d)自其它用戶接收的視覺信息(例如，文本和/或視頻)；(e)與應用程式相關聯的事件的年表、敘述式或序列；和/或⑴其它信息。
[0017]附加視覺內容可基於主要視覺內容、應用程式執行狀態、情境或狀況和/或用戶輸入的變化而適應性地更新。附加視覺內容可(a)當在應用程式執行期間逐步地或動態地更新主要視覺內容時被選擇性地獲取、產生、呈現、中斷或喚回；或(b)當逐步地或動態地更新主要視覺內容時在一個或多個時間處保持不變或大體上不變。取決於主要視覺內容和/或當前應用程式執行狀態或情境，可向用戶呈現或顯示特定附加視覺內容或對用戶隱藏特定附加視覺內容。
[0018]出於簡潔和輔助理解的目的，本文中的描述的特定部分涉及主要視覺內容和附加視覺內容與諸如單玩家或多玩家計算機或電子遊戲之類的電子娛樂應用程式對應或關聯的實施例，該電子娛樂應用程式基本上可與任何遊戲類型對應，如以下一個或多個:戰略遊戲、戰術遊戲、冒險遊戲、視覺小說、互動電影、動作冒險遊戲、角色扮演遊戲(RPG)、航海遊戲、競技遊戲、第一人稱(例如，第一人稱射手(FPS))遊戲、第三人稱(例如,第三人稱射手)遊戲、車輛(例如，競速)遊戲、教育遊戲、訓練遊戲、模擬(例如，生活場景、建築、商業、飛機、宇宙飛船或其它類型的模擬)遊戲、迷宮遊戲、拼圖遊戲、益智遊戲、棋盤遊戲(例如，西洋跳棋、西洋棋或麻將)、紙牌遊戲、賭博遊戲、音樂遊戲、舞蹈遊戲、運動遊戲、鍛鍊遊戲、聚會遊戲和/或另一類型的遊戲。
[0019]在一些實施例中，主要視覺內容和附加視覺內容可與MMO遊戲對應或關聯，MMO遊戲可涉及數十、數百或甚至數千個用戶、玩家或參與者。MMO遊戲可為例如MMO角色扮演遊戲(MMORPG)、MMO實時戰略(MMORTS)遊戲、MMO第一人稱射手(MMOFPS)遊戲、MMO社交遊戲(MMOSG)、MMO運動遊戲(MMOSG)或其它類型的MMO遊戲。
[0020]儘管有上述情形，但本公開內容的方面可另外或替代地涉及與如下情形對應或關聯的主要視覺內容和附加視覺內容:用戶間的協作、通信或消息傳遞(例如，電子會議，或文本、語音或視頻消息傳遞或聊天)；用戶與虛擬世界或虛擬社區的互動；用戶教育/訓練；媒體內容開發(例如，聲音和/或視覺信息編輯)；或可與計算機或電子遊戲相關或不相關的其它應用。由本公開內容提供的實施例不排除有需要本文中描述的特定基礎結構和/或操作原理的應用。
[0021]代表性系統實施例的方面
[0022]圖1為根據本公開內容的特定實施例的用於使用主要顯示設備20和至少一個具備顯示功能的用戶輸入設備100來管理、控制、選擇、呈現和/或更新主要視覺接口內容和附加視覺接口內容的代表性系統10的示意圖。主要顯示設備20和每個具備顯示功能的用戶輸入設備100耦接至計算系統40或計算裝置或者形成計算系統40或計算裝置的部分，該計算系統40或計算裝置如臺式計算機或膝上型計算機或電子遊戲系統、設備或裝置(例如，遊戲控制臺系統、或可攜式或手持式遊戲裝置)，其被配置來執行所儲存的程序指令和/或進行狀態機操作，這些狀態機操作根據本公開內容的實施例管理、弓I導或進行包括主要視覺接口內容管理操作和附加視覺接口內容管理操作的視覺接口內容管理操作。
[0023]主要視覺接口內容與上文所述的主要視覺內容對應，且形成主要視覺接口的部分，該主要視覺接口可包括:硬體，被配置來呈現主要視覺接口內容的；軟體或程序指令，被配置來產生、更新和/或管理或控制主要視覺接口內容的呈現；和主要視覺接口內容自身。代表性類型的主要視覺接口內容包括:與一個或多個本地用戶、一個或多個遠程用戶相關聯的人物和/或非玩家人物的圖像或視覺表示；和形成視覺或虛擬環境或世界的部分的圖形組件。主要視覺接口內容可呈現或顯示在主要顯示設備20的主檢視區、表面、區域或窗口 102中。
[0024]附加視覺接口內容與上文所述的附加視覺內容對應，且形成附加視覺接口的部分，該附加視覺接口可包括:硬體，被配置來呈現附加視覺接口內容；軟體或程序指令，被配置來產生、更新和/或管理或控制附加視覺接口內容的呈現；和附加視覺接口內容自身。
[0025]特定代表性類型的附加視覺接口內容可包括例如:(a) —組或多組用戶可選擇的圖像或圖形圖標(例如，與視覺上可選擇的應用程式功能或功能序列對應)；(b) —個或多個類型的視覺消息(例如，文本或視頻消息、或動畫敘述內的場景)；(c)與特定主要視覺接口內容和/或應用程式主題對應的描述性或類別信息或數據(例如，提供與視覺或虛擬環境或世界內的對象相關的說明性信息的文本、圖形和/或圖像數據)；(d)可響應於用戶選擇特定應用功能或功能序列而顯示的一個或多個視覺疊加或菜單；(e)與由當前主要視覺接口內容直接或非直接指示或傳達的應用情景、情況或事件對應的一個或多個視覺情況或事件通知(例如，與當前主要視覺接口內容相關聯的事件的通知，和/或在視覺或虛擬環境或世界的一部分內的事件的通知，該部分位於由當前主要視覺接口內容定義的區域或視覺空間之外或外部)；(f)與主要視覺接口內容未直接指示或傳達的信息對應的遠程監視內容(例如，與視覺或虛擬環境或世界的一部分對應的已記錄、已監視、已監督、已產生或已獲取的信息，該部分位於由當前主要視覺接口內容定義的區域或視覺空間之外或外部，主要顯示設備20當前未顯示該信息)；和/或其它視覺信息。
[0026]如下文進一步詳細描述，在若干實施例中，附加視覺接口內容可通過由具備顯示功能的用戶輸入設備100的部分攜載的一個或多個顯示裝置或組件呈現或顯示，該顯示裝置或組件如被調整或被配置用於輸出或傳輸視覺信號的一個或多個附近敏感式、附近響應式、存在敏感式、存在響應式、壓力敏感式、壓力響應式、力敏感式、力響應式、運動敏感式、運動響應式、方位敏感式、方位響應式、位置敏感式、位置響應式、光敏感式、光響應式、聲音敏感式、聲音響應式、觸摸敏感式、觸摸響應式、對象敏感式和/或對象響應式用戶輸入組件。在一些實施例中，附加視覺接口內容可另外或替代地由不包括或省略附近、存在、壓力、力、運動、方位、位置、光、聲音、觸摸或對象敏感式或響應式用戶輸入組件的一個或多個顯示裝置或組件呈現或顯示。
[0027]在應用程式執行期間，主要顯示設備20的重要目的或功能是呈現或顯示主要視覺接口內容。取決於實施例、配置和/或實施細節，主要顯示設備20可另外在一個或多個時間呈現或顯示特定的附加視覺接口內容(例如，以選擇性的、可規劃的或可配置的方式)。主要顯示設備20包括至少一個顯示裝置，如2D或3D顯示裝置(例如，與計算機、電子遊戲裝置或遊戲控制臺對應的顯示器)。主要顯示設備的示例性實施例為計算機顯示監視器，如LCD或LED監視器。
[0028]在一些實施例中，主要顯示設備20包括或攜載被配置來檢測或接收用戶輸入的一個或多個附近敏感式、附近響應式、存在敏感式、存在響應式、壓力敏感式、壓力響應式、力敏感式、力響應式、運動敏感式、運動響應式、方位敏感式、方位響應式、位置敏感式、位置響應式、光敏感式、光響應式、聲音敏感式、聲音響應式、觸摸敏感式、觸摸響應式、對象敏感式和/或對象響應式組件、裝置或表面。在此類實施例中，主要顯示設備20可定義成具備輸入功能的顯示設備。例如，在特定實施例中，主要顯示設備20可包括觸控螢幕顯示器。在其它實施例中，主要顯示設備20省略或不包括附近、存在、壓力、力、運動、方位、位置、光、聲音或觸摸敏感式或響應式組件、裝置或表面。
[0029]具備顯示功能的用戶輸入設備100被配置來接收被引導至應用程式執行的控制方面的用戶輸入和/或用戶與主要視覺接口的互動，且進一步被配置來在一個或多個時間呈現或顯示特定的附加視覺接口內容(例如，以選擇性、可規劃或可配置的方式)。具備顯示功能的用戶輸入設備100的重要目的或功能是提供呈現或輸出附加視覺接口內容的用戶輸入/視覺輸出接口，該附加視覺接口內容可通過被引導至由具備顯示功能的用戶輸入設備100攜載的一個或多個用戶輸入組件的用戶輸入來選擇。在各個實施例中，如下文進一步詳細描述的，至少一些用戶輸入組件可被調整或被配置來以促進或允許附加視覺接口內容的呈現或顯示的方式傳輸或輸出視覺信號。
[0030]具備顯示功能的用戶輸入設備100包括至少一個用戶輸入裝置，如鍵盤、小鍵盤、計算機滑鼠、軌跡球、遊戲杆或遊戲控制器，其攜載和/或耦接至被配置來檢測或接收一種或多種類型的用戶輸入的至少一組組件或結構。此類用戶輸入組件或結構可包括一個或多個附近敏感式、附近響應式、存在敏感式、存在響應式、壓力敏感式、壓力響應式、力敏感式、力響應式、運動敏感式、運動響應式、方位敏感式、方位響應式、位置敏感式、位置響應式、光敏感式、光響應式、聲音敏感式、聲音響應式、觸摸敏感式、觸摸響應式、對象敏感式和/或對象響應式組件或結構。
[0031]至少一組用戶輸入組件或結構可包括在對應的控制器中或耦接至對應的控制器，例如，觸摸傳感器組件520耦接至觸摸控制器500。控制器500用作如下裝置，該裝置基於通過對應的用戶輸入組件或結構的用戶輸入，將由觸摸傳感器520感測到的互動轉換成控制信號，例如觸摸坐標，這些控制信號通過如USB線纜連接這樣的連接而被傳輸至計算系統。
[0032]具備顯示功能的用戶輸入設備100進一步包括、攜載和/或耦接至至少一組光信號或圖像呈現、顯示或輸出組件或結構。至少一組光信號、圖像呈現、顯示或輸出組件或結構可包括或耦接至顯示控制器300、400。顯示控制器300、400用作如下裝置，該裝置用於接收和解密來自計算系統40的輸出信號，以便通過光信號、圖像呈現、顯示或輸出組件或結構進行傳輸。
[0033]此類圖像呈現組件或結構與主要顯示設備20分開或不同，且被配置來傳輸、輸出或顯示視覺信號，這些視覺信號與主要顯示器的文本、圖形或視頻圖像的部分對應，或與計算系統40上正在執行的至少一個應用程式對應，或與來自與各個用戶輸入組件或結構對應的一個或多個控制器的輸入信號對應。取決於(a)實施例細節；(b)實施細節；(c)配置細節；(d)與當前和/或先前主要視覺接口內容對應的事件；(e)與視覺或虛擬環境或世界內的區域對應的事件，該區域位於通過由當前主要視覺接口內容定義的視覺或虛擬區域的範圍之外、外部，或該視覺或虛擬區未直接指示該區域；(f)用戶輸入；和/或(g)應用程式執行情境、狀況或狀態，如下文進一步詳述的，特定的光信號或圖像呈現組件或結構可以靜態或動態方式(例如，就一個或多個時間間隔而言，和/或基於用戶輸入事件或應用程式事件)顯示附加視覺接口內容。
[0034]在若干實施例中，具備顯示功能的用戶輸入設備100包括一個或多個用戶可選擇的輸入裝置、組件或結構(例如，被配置來將用戶動作、選擇或意圖變換或轉換成一組用戶輸入信號的一種附近、存在、壓力、力、運動、方位、位置、光、聲音、觸摸或對象敏感式或響應式組件或結構)，其被調整或被配置來傳輸、輸出或顯示與文本、圖形或視頻圖像的部分對應的視覺信號。例如，具備顯示功能的用戶輸入設備100可包括用戶輸入裝置，該用戶輸入裝置具有一組具備顯示功能的觸覺、壓力敏感式、力敏感式、觸摸敏感式或觸摸響應式輸入組件，這些輸入組件在特定實施例中與具備顯示功能的鍵盤或小鍵盤的部分對應。
[0035]取決於實施例細節，具備顯示功能的用戶輸入設備100 (如具備顯示功能的鍵盤)可具有具備顯示功能的用戶輸入組件或結構，這些組件或結構可包括:包括標準QWERTY鍵的第一組觸覺鍵220、除QWERTY鍵之外的第二組觸覺鍵240、第一組顯示組件320、第二組顯示組件420和觸摸傳感器520。來自第一組觸覺鍵220和第二組觸覺鍵240的呈擊鍵形式的輸入被輸送至複雜可編程邏輯器件(CPLD) 200，該CPLD 200基於預編程的指令將輸入處理成適當的輸入信號。然後，通過連接至CPLD200的USB控制器將輸入信號傳輸至計算系統40。
[0036]第二組顯示組件420可結合第二組觸覺鍵240來操作。示例性實施例包括第二組觸覺鍵240中的每一觸覺鍵，其包括偏離第二組顯示組件420中的每一顯示組件或布置在每一顯示組件上方的透光的或透明的顯示窗口，每一顯示組件為IXD或OLED顯示屏。與計算系統40上正在執行的重要應用程式(如遊戲應用程式)對應的附加視覺接口內容可顯示於第二組顯示組件420上，且該組中每一單獨顯示組件上顯示的附加視覺接口內容可與屬於第二組觸覺鍵240的單獨觸覺鍵的控制功能對應，該顯示組件可結合該單獨觸覺鍵來工作。通過第二組觸覺鍵240的用戶輸入然後由CPLD 200處理成輸入信號，以便通過USB控制器80和160傳輸至計算系統40。
[0037]觸摸傳感器520上呈一組姿勢和移動的形式的輸入被傳輸至觸摸控制器500,該觸摸控制器基於預編程的指令而將輸入處理成適當的輸入信號。然後通過連接至觸摸控制器500的USB控制器160將輸入信號傳輸至計算系統40。第二組一個或多個顯不組件420可結合觸摸傳感器520工作。在示例性實施例中，與計算系統40上正在執行的重要應用程式(如遊戲應用程式)對應的附加視覺接口內容可顯示在屬於第一組一個或多個顯示組件320的顯示組件上。用戶然後可通過觸摸傳感器520提供輸入，該觸摸傳感器對應於第一組一個或多個顯示組件320的顯示組件而操作。在特定實施例中，至少一些此類鍵或按鈕可彈性地偏置。
[0038]在若干實施例中，具備顯示功能的用戶輸入設備100可另外包括一個或多個指點裝置，如等距遊戲杆、指點杆或指點塊；跟蹤球；或觸控板或跟蹤板。在特定實施例中，與具備顯示功能的用戶輸入設備100對應或由具備顯示功能的用戶輸入設備100攜載的觸控板或跟蹤板可包括顯示組件或視覺信號輸出裝置。例如，由具備顯示功能的用戶輸入設備100攜載的觸控板可包括LCD屏幕或板，該LCD屏幕或板包括被配置來檢測基於筆或手寫筆的輸入以和基於手指的輸入的光傳感器。
[0039]具備顯示功能的用戶輸入設備的代表性方面
[0040]具備顯示功能的用戶輸入設備100的示例性實施例包括附加視覺接口的第一接口 120，該第一接口為基於LCD的觸控板，其可用作跟蹤板和觸控螢幕且安置在與計算系統40連接的鍵盤內。此基於LCD的觸控板包括連接至觸摸控制器500的觸摸傳感器520和屬於連接至第一顯示控制器300的第一組顯示組件320的至少一個顯示組件，如前文所述。因此，觸摸傳感器520和顯示組件彼此結合操作，從而提供基於LCD的觸控板。跟蹤板包括接口，在該接口中，在跟蹤板內所做的姿勢和/或多點觸摸可用來控制光標在顯示屏上的移動。觸控螢幕包括可通過觸摸傳感器520接收輸入的具備顯示功能的接口，如圖形用戶接口(⑶I)，且通過第一接口 120的第一顯示控制器300傳輸至第一顯示組件或結構320的顯示輸出數據可能或可能不獨立於在主要顯示設備20上已顯示的內容。
[0041]具備顯示功能的用戶輸入設備100還可進一步包括附加視覺接口的第二接口140，該第二接口為在基於LCD的觸控板附近放置的一組具備顯示功能的鍵，如但不限制於呈結合第二組顯示組件420操作的兩行第二組觸覺鍵240的形式(如前面段落中所述的)，並且具備顯示功能的鍵被放置在基於IXD的觸控板上方。可更新第一接口 120和第二接口140中至少一個中的附加視覺接口內容，以便與每當有一組新的用戶輸入時觸發的事件對應，該組新的用戶輸入通過附加視覺接口的第一接口 120和第二接口 140中的至少一個和其它用戶輸入組件或結構。具備顯示功能的用戶輸入設備還可包括第一組觸覺鍵220，第一組觸覺鍵包括標準QWERTY鍵，如前面段落中所提到的鍵盤的那些。對於計算系統40中通過用戶輸入而觸發的新事件，第一接口 120和第二接口 140中至少一個中的附加視覺接口內容將被更新以與新事件對應。
[0042]在任一時間點顯示在具備顯示功能的用戶輸入設備100上的內容的特定功能由特定預規劃的事件類型來確定並觸發。事件類型包括但不限於計算系統40內的應用程式事件、計算系統40的應用程式內的模式事件、和應用程式的模式內的動作組事件。任何事件的觸發系取決於用戶利用通過與計算系統40連接的用戶輸入設備鍵入的一組輸入而鍵入的預規劃的輸入，該用戶輸入設備包括具備顯示功能的用戶輸入設備100。用戶輸入設備可為但不限於鍵盤、滑鼠、手寫筆、滑鼠墊、繪圖板、遊戲控制臺、聲音輸出裝置和印表機中的至少一種。在鍵盤用作用戶輸入設備時，來自該組標準QWERTY鍵和該組具備顯示功能的鍵中至少一種的擊鍵可用於根據預編制的指令提供特定輸入來觸發特定事件，該事件將確定具備顯示功能的用戶輸入設備100在一時間點的特定功能。來自第二接口 140的該組標準QWERTY鍵和該組具備顯示功能的鍵中至少一中還可結合具備顯示功能的用戶輸入設備100的第一接口 120的LCD觸控板來使用，以對事件的觸發作出響應和觸發事件，事件包括與具備顯示功能的用戶輸入設備100的下述功能相關的那些事件。
[0043]例如，具備顯示功能的用戶輸入設備100的第一接口 120的觸控板在任一時間點是用作跟蹤板還是用作觸控螢幕，取決於特定事件的觸發。此外，在具備顯示功能的用戶輸入設備100的任何下述功能中，可設定默認功能，無論作為跟蹤板還是觸控螢幕，且用戶可進一步通過預規劃事件的觸發而在具備顯示功能的用戶輸入設備100內的LCD觸控板的跟蹤板或觸控螢幕功能之間切換。
[0044]例如，當在繪圖應用程式內使光標巡覽時，用戶可將第一接口 120用作跟蹤板。在包括退出繪圖應用程式和啟動遊戲應用程式的過渡中(其過渡是預規劃的事件)，第一接口 120從跟蹤板功能切換至觸控螢幕功能，且觸控螢幕顯示與遊戲應用程式對應的控制項。LCD觸控板的另一實施例包括:在觸發遊戲應用程式內的第一模式事件時用戶最初將第一接口120用作跟蹤板，且導致進入同一遊戲應用程式內的第二模式事件的用戶輸入可觸發第一接口 120用作觸控螢幕，其中觸控螢幕顯示控制項或視覺環境，如與第二模式事件對應的補充圖。在LCD觸控板的又一實施例中，用戶將第一接口 120用作觸控螢幕，在觸發遊戲應用程式內的第一模式事件時該觸控螢幕最初顯示與第一模式事件對應的遊戲控制項，且導致進入同一遊戲應用程式內的第二模式事件的用戶輸入可觸發第一接口 120用作跟蹤板，其中跟蹤板允許用戶通過跟蹤板內的姿勢或移動來重新繼續對光標移動或巡覽的控制。
[0045]具備顯示功能的用戶輸入設備100的功能的一個實施例是充當主要顯示設備20的擴展。主要顯示設備20可以是例如但不限於單獨的IXD或LED顯示器。作為主要顯示設備20的擴展，取決於特定事件的觸發，附加視覺接口的第一接口 120和第二接口 140 (分別是具備顯示功能的用戶輸入設備100的IXD觸控板和該組具備顯示功能的鍵)中至少一個可包括顯示與已在主要顯示設備20上顯示的內容相似和/或相關的內容。
[0046]例如，用戶可處於遊戲應用程式內的模式事件中，其中該模式事件涉及在視覺環境的確定區域內巡覽的用戶化身。在處於該模式事件中時，主要顯示設備20可顯示當前周圍環境，如用戶化身當前正在巡覽的森林中最靠近用戶化身的樹木，而具備顯示功能的用戶輸入設備100的LCD觸控板被觸發來顯示更大的視覺地理環境，該地理環境涵蓋虛擬地理區域中比森林更大的區域。具備顯示功能的鍵將顯示圖形，每一鍵與控制項對應，來觸發各種事件中的每個事件，這些事件涉及與當前模式事件對應的動作組事件、模式事件或應用程式事件中至少一種。相反，在另一示例中，主要顯示設備20可顯示圍繞且包括森林的更大虛擬地理區域，且IXD觸控板可僅顯示在主要顯示設備20上顯示的虛擬地理區域的更詳細的子區域，如森林中圍繞該化身的最近樹木。具備顯示功能的鍵將顯示圖形，每一鍵與控制項對應，來觸發各種事件中的每個事件，這些事件涉及與當前模式事件對應的動作組事件、模式事件或應用程式事件中至少一種。對於計算系統40中通過用戶輸入觸發的新事件，第一接口 120和第二接口 140中至少一個中的附加視覺接口內容將被更新以與新事件對應，如與新的區域和/或不同於先前區域的區域相關的已更新的虛擬地理環境，和與新事件對應的控制項的已更新的顯示。
[0047]具備顯示功能的用戶輸入設備100的功能的另一實施例是對正在計算系統40上執行的輔助或背景應用程式而非在某一時間點用戶正在使用的重要應用程式提供控制。此類輔助或背景應用程式的示例包括但不限於媒體播放器、VoIP(網際網路語音協議)應用程式、瞬時消息收發應用程式、視頻聊天/會議應用程式、電子郵件應用程式和網際網路瀏覽器。使用具備顯示功能的用戶輸入設備100的此控制項的示例性用途是顯示用於媒體播放器的控制項，在為重要應用程式的遊戲應用程式的中途，該媒體播放器在背景中執行。使用具備顯示功能的用戶輸入設備100的此控制項的另一示例性用途是通過附加視覺接口的第一接口 120和第二接口 140中至少一個顯示用於同時實況視頻聊天應用程式的控制項，該應用程式嵌入在計算系統40內的重要應用程式(如遊戲應用程式)內或在該重要應用程式外部。
[0048]具備顯示功能的用戶輸入設備100的功能的另一實施例是以下中至少一個:控制至少一個旁路次要設備的顯示；和通過附加視覺接口的第一接口 120和第二接口 140中至少一個用作用於至少一個旁路次要設備的顯示器。旁路次要設備被定義為次要外部裝置，其直接連接至具備顯示功能的用戶輸入設備100 (如具備顯示功能的鍵盤)且繞過由與具備顯示功能的用戶輸入設備連接的計算系統40進行的處理。用戶可通過具備顯示功能的用戶輸入設備100使用輸入來控制至少一個旁路次要設備，該輸入包括由在第一接口 120的基於IXD的觸控板上所做的姿勢和/或來自標準QWERTY鍵組和第二接口 140的具備顯示功能的鍵中至少一個的擊鍵構成的互動。用戶還可將第一接口 120的基於IXD的觸控板用作用於與至少一個旁路次要設備對應的數字內容和控制項中至少一個的顯示器。用於控制旁路次要設備的具備顯示功能的用戶輸入設備100的示例性用途包括但不限於:瀏覽和顯示在媒體播放器裝置中存儲的視頻或照片，瀏覽和播放來自媒體播放器裝置的歌曲，顯示與來自媒體播放器裝置的至少一個媒體文件對應的信息，控制聲音功能(如但不限於預先設定聲音均衡器模式、音量、至少一組揚聲器的高音和低音等級，和來自存儲裝置的內容的下載和上載中同時的至少一個)。對於通過用戶輸入(包括由在第一接口 120的基於IXD的觸控板上做出的姿勢和/或來自標準QWERTY鍵組和第二接口 140的具備顯示功能的鍵中至少一個的擊鍵構成的互動)觸發的新事件，或檢測到附件設備至計算系統40或至具備顯示功能的用戶輸入設備的連接，第一接口 120和第二接口 140中至少一個中的附加視覺接口內容將被更新以與新事件對應，如與該新事件對應的控制項的更新顯示。旁路次要設備的示例包括媒體播放器裝置、數位相機、行動電話、一組揚聲器或耳機。其它示例還包括可兼容於與具備顯示功能的用戶輸入設備100可能具有的一個或多個連接埠直接連接的任何設備，連接埠如但不限於USB埠、聲音插孔、串行埠、並行埠、PS/2埠、VGA埠、S-視頻埠、HDMI埠、遊戲埠、e-Sata埠、顯示埠、PCMCIA/卡總線埠、火線埠、乙太網絡埠、數據機埠和數字視頻接口。
[0049]具備顯示功能的用戶輸入設備100的另一實施例是用作一組預規劃的事件之間的切換控制，且該組預規劃的事件是在例如但不限於檢測到多個用戶輸入裝置連接至計算系統40且至少一個應用程式在同一計算系統40上執行時被觸發。該組預規劃事件於是可包括一組各種功能，如但不限於光標控制、外部連接裝置的控制、計算系統40上正在執行的應用程式的控制和包括標準QWERTY鍵的第一組觸覺鍵220和包括具備顯示功能的鍵的第二組觸覺鍵240中至少一個的控制。因此，預規劃事件之間的切換可包括但不限於:光標控制、應用程式模式內的動作組、應用程式內的應用程式模式和在計算系統40內執行的應用程式之間的切換。
[0050]在安置於鍵盤內的具備顯示功能的用戶輸入設備100的示例性實施例中，接口內有多組互動可提供其它功能。這些組包括:第一接口 120的基於IXD的觸控板與該組QWERTY鍵220之間的第一組互動；和第一接口 120的基於IXD的觸控板與第二接口 140的該組具備顯示功能的鍵240之間的第二組互動。與上述兩組互動對應的其它功能包括但不限於記錄與可觸發的特定事件相關的宏和姿勢。事件的示例包括應用程式模式內的動作組事件或應用程式內的模式事件。此類應用程式的示例性實施例包括但不限於第一人稱射手(FPS)遊戲和大型多玩家在線(MMO)遊戲。
[0051]此外，第一接口 120的基於IXD的觸控板與第二接口 140的該組具備顯示功能的鍵之間的第二組互動還可提供其它功能。第一接口 120的基於IXD的觸控板與第二接口140的該組具備顯示功能的鍵之間的第二組互動可進一步包括:在觸發對應事件時，對該組具備顯示功能的鍵中每一單獨鍵的功能和每一單獨具備顯示功能的鍵的顯示組件或結構(如IXD和/或OLED屏幕)內的對應顯示的控制。對應事件的示例性實施例包括:遊戲模式內的動作組；和應用程式內的遊戲模式，該應用程式例如為FPS或MMO遊戲，且對應事件可利用通過第一組互動和第二組互動中至少一個的用戶輸入而被切換至同一應用程式內的其它動作組或遊戲模式且從其它動作組或遊戲模式切換。一旦觸發針對特定動作組或遊戲模式的對應事件，就啟動與對應的特定動作組或遊戲模式相關的具備顯示功能的鍵的功能。
[0052]取決於(a)實施例、配置或實施細節；(b)當前主要視覺接口內容；(C)當前應用程式執行情境、狀況或狀態；和/或(d)用戶輸入，特定附加視覺接口內容可同時由以下二者的部分呈現或顯示:主要顯示設備20，和具備顯示功能的用戶輸入設備100的附加視覺接口的第一接口 120和第二接口 140。換言之，由一組具備顯示功能的用戶輸入設備100呈現或顯示的附加視覺接口內容的至少一特定部分或一子集可同時由主要顯示設備20顯示。另外或替代地，特定附加視覺接口內容可在一或多個時間僅僅由具備顯示功能的用戶輸入設備100的部分而非主要顯示設備20呈現或顯示，從而增加或最大化可有效傳達給用戶的應用程式相關視覺信息的數量，增加或擴展可視覺呈現給用戶的用戶可選擇應用程式功能或操作的數量，和/或提高用戶與應用程式互動的效率。
[0053]另外，由具備顯示功能的用戶輸入設備100的部分而非主要顯示設備20呈現特定附加視覺接口內容可增加或最大化主要顯示設備20可呈現或輸出主要視覺接口內容的程度，和/或減少或最小化視覺凌亂，視覺凌亂不必要地或不期望地有損、幹擾或限制向用戶呈現主要視覺接口內容。將特定類型的附加視覺接口內容指定為可由一或多個具備顯示功能的用戶輸入設備100和/或主要顯示設備20呈現可例如通過下文進一步詳述的配置接口以預定的方式或以可選擇或可規劃的方式發生。
[0054]在一些實施例中，聯合用戶將特定附加視覺接口內容選擇、指定、指派或映射至一個或多個具備顯示功能的用戶輸入設備100的部分而非主要顯示設備20，或在該選擇、指定、指派或映射以後，應用程式可自動調整或修改可顯示或已顯示的主要視覺接口內容的程度、大小、數量或區域。例如，基於使主要顯示設備20的部分被排除呈現特定附加視覺接口內容的程度，應用程式可擴展與主要視覺接口內容對應的一組視覺或虛擬邊界，和/或相對於主要顯示設備20的區、區域或表面來調整主要視覺接口內容的大小。調整主要視覺接口內容的大小可導致所顯示的主要視覺接口內容的數量增加，和/或所顯示的主要視覺接口內容具有增強等級的細節或視覺粒度。
[0055]在根據本公開內容的多個實施例中，用戶與一種或多種類型的附加視覺接口內容(由具備顯示功能的用戶輸入設備100的附加視覺接口的第一接口 120和第二接口 140中至少一個呈現)的互動或對一種或多種類型的附加視覺接口內容的用戶選擇(例如，因對第二接口 140中一個或多個具備顯示功能的鍵或按鈕和/或第一接口 120中觸控螢幕的部分的用戶選擇的原因)單獨地或者與對主要和/或附加視覺接口內容(由主要顯示設備20呈現)的用戶選擇(例如，因使用指點裝置對主要顯示設備視覺接口內容的用戶選擇的原因)聯合或結合可導致:與傳統輸入裝置(例如，傳統計算機滑鼠)的用戶操縱相比更經濟的用戶運動，使對所關注的特定附加視覺接口內容的用戶選擇簡化或更方便，和/或使用戶與一組本地和/或遠程應用程式的互動效率提高。
[0056]例如，通過直接操縱、按壓或觸摸顯示所關注的圖形動作鍵的特定具備顯示功能的鍵或按鈕，而非操縱傳統計算機滑鼠來(a)移動由主要顯示設備20顯示的指針或光標；(b)使指針或光標在所關注的圖形動作鍵上對齊；且(C)使用滑鼠按鈕選擇所關注的圖形動作鍵，用戶可迅速且高效地選擇與正在執行的重要應用程式(如FPS或MMO遊戲)相關的由具備顯示功能的用戶輸入設備100呈現或顯示的給定圖形動作鍵。此外，對由具備顯示功能的用戶輸入設備100呈現的附加視覺接口內容的用戶選擇可導致由於由主要顯示設備20顯示的指針或光標的不精確或不正確用戶定位的原因引起的用戶輸入錯誤較少，且因此導致不合需要的或無意的應用程式事件或錯誤較少，尤其在需要或要求用戶迅速或非常迅速與應用程式(例如，計算機遊戲)互動時。
[0057]在執行由一組具備顯示功能的用戶輸入設備100可產生或獲取並呈現附加視覺接口內容所針對的多個應用程式內的特定應用程式期間，可在一個或多個時間以如下方式呈現或顯示附加視覺接口內容，該方式是為考慮中的特定應用程式特別地或獨特地定製的或調整的，且該方式在該應用程式的執行期間基於以下來進一步動態地調整:執行情境、狀況或狀態，主要視覺接口內容，附加視覺接口內容和/或用戶輸入。本公開內容的實施例可因此消除對先前類型的應用程式特定輸入裝置(例如，遊戲特定鍵盤，其針對不同應用程式是不可調整或不可重配置的或可最小程度地重配置的)的需要，這些應用程式特定輸入裝置試圖增加呈現給用戶選擇的功能或信息的數量或類型。
[0058]以上述方式，描述本公開內容的各個實施例，以解決上述缺點中至少一個。此類實施例意在由以下權利要求涵蓋且不意在局限於如此描述的部件的特定形式或配置，且本領域技術人員鑑於本公開內容將明白可做出眾多改變和/或修改，這些改變和/或修改還意在由以下權利要求涵蓋。
【權利要求】
1.一種用於在應用程式執行期間呈現包括附加視覺接口內容的視覺接口內容的自動化方法，所述附加視覺接口內容提供與應用程式執行相關聯的視覺信息，該方法包括: 使用第一接口來顯示所述附加視覺接口內容； 使用第二接口來顯示所述附加視覺接口內容； 基於所述第一接口和第二接口的致動，在所述第一接口和第二接口中至少一個上顯示更新的附加視覺接口內容。
2.根據權利要求1所述的方法，其中所述第一接口和第二接口包含在具備顯示功能的輸入設備中。
3.根據權利要求2所述的方法，其中所述第一接口至少包括基於液晶顯示器(LCD)的觸控板。
4.根據權利要求3所述的方法，其中所述基於LCD的觸控板至少包括顯示組件、對應的顯示控制器、觸摸傳感器和對應的觸控控制器。
5.根據權利要求2所述的方法，其中所述第二接口包括至少一個具備顯示功能的觸覺鍵。
6.根據權利要求5所述的方法，其中所述具備顯示功能的觸覺鍵至少包括觸覺鍵、顯示組件、對應的顯示控制器和與所述觸覺鍵對應的複雜可編程邏輯器件(CPLD)。
7.根據權利要求1所述的方法，其中顯示更新的附加視覺接口內容(a)因在應用程式執行期間發生一組應用程式事件中至少一個應用程式事件而自動地發生，和(b)響應於在應用程式執行期間被引導至與至少一個應用程式互動的用戶輸入而發生。
8.根據權利要求2所述的方法，進一步包括響應於用戶輸入而選擇性建立所述具備顯示功能的用戶輸入設備內的各部分、所述附加視覺接口內容和所述更新的附加視覺接口內容之間的映射。
9.根據權利要求4所述的方法，其中用戶輸入對所述附加視覺接口內容和所述更新的附加視覺接口內容中至少一個的至少一子集在所述具備顯示功能的用戶輸入設備上的顯示位置進行選擇性定義，和用戶輸入對所述附加視覺接口內容和所述更新的附加視覺接口內容中至少一個的至少一子集在所述具備顯示功能的用戶輸入設備上的顯示位置進行選擇性修改中至少一個。
10.根據權利要求2所述的方法，進一步包括使用主要顯示設備至少顯示所述附加視覺接口內容，同時使用所述具備顯示功能的用戶輸入設備顯示所述附加視覺接口內容。
11.根據權利要求6所述的方法，其中所述附加視覺接口內容的所述子集基於用戶輸入而選擇性地限定。
12.根據權利要求2所述的方法，進一步包括接收與將要由所述具備顯示功能的用戶輸入設備顯示的附加視覺接口內容的數量對應的用戶輸入。
13.根據權利要求12所述的方法，其中接收與將要由所述具備顯示功能的用戶輸入設備顯示的附加視覺接口內容的數量對應的用戶輸入包括:接收指示將被排除由所述主要顯示設備顯示的附加視覺接口內容的數量的用戶輸入。
14.根據權利要求12所述的方法，其中顯示所述附加視覺接口內容包括:因所述用戶輸入而使用所述具備顯示功能的用戶輸入設備而非所述主要顯示設備來僅僅顯示所述附加視覺接口內容。
15.根據權利要求12所述的方法，其中顯示所述附加視覺接口內容和顯示所述更新的附加視覺接口內容包括:因所述用戶輸入而使用所述具備顯示功能的用戶輸入設備而非所述主要顯示設備來僅僅顯示所述附加視覺接口內容和所述更新的附加視覺接口內容。
16.根據權利要求12所述的方法，其中接收與將要由所述具備顯示功能的用戶輸入設備顯示的附加視覺接口內容的數量對應的用戶輸入包括:接收指示由所述主要顯示設備顯示的附加視覺接口內容的數量的用戶輸入，該附加視覺接口內容被顯示為除所述主要視覺接口內容之外的內容補充和/或內容互補。
17.根據權利要求6所述的方法，其中所述主要視覺接口內容提供第一視覺環境的一部分，且其中所述附加視覺接口內容包括第一遠程事件通知和第一遠程監視內容中至少一個，所述第一遠程事件通知和所述第一遠程監視內容中每一個與從所述第一視覺環境中排除的第二視覺環境對應。
18.根據權利要求17所述的方法，其中適應性顯示更新的視覺接口內容包括:使用所述主要顯示設備將所述第二視覺環境的至少一部分顯示為所述更新的主要視覺接口內容的部分。
19.根據權利要求18所述的方法，其中適應性顯示更新的視覺接口內容進一步包括:對所述第一視覺環境的顯示進行中斷和對所述第一視覺環境的顯示進行終止中之一。
20.根據權利要求19所述的方法，其中適應性顯示更新的視覺接口內容輸入進一步包括顯示第二附加視覺接口內容，所述第二附加視覺接口內容包括以下至少之一:在所述第一附加視覺接口內容中不存在的第二遠程事件通知、在所述第一附加視覺接口內容中不存在的第二遠程監視內容、和在所述第一附加視覺接口內容中不存在的一組用戶可選擇的應用程式功能。
21.根據權利要求17所述的方法，其中所述第一視覺環境和所述第二視覺環境中的每個與電子遊戲對應。
22.根據權利要求17所述的方法，其中所述第一視覺環境與具有第一組虛擬地理邊界的第一虛擬地理區域對應，且所述第二視覺環境與具有第二組虛擬地理邊界的第二虛擬地理區域對應，所述第二組虛擬地理邊界位於所述第一組虛擬地理邊界之外。
23.根據權利要求17所述的方法，其中使用所述具備顯示功能的輸入設備顯示所述附加視覺接口內容包括:使用所述具備顯示功能的用戶輸入設備而非主要顯示設備來顯示一組視覺疊加。
24.根據權利要求2所述的方法，其中具備顯示功能的輸入設備是至少包括一組標準QWERTY觸覺鍵的具備顯示功能的鍵盤。
25.根據權利要求2所述的方法，其中在應用程式執行期間使用所述具備顯示功能的輸入設備顯示所述附加視覺接口內容進一步包括:顯示用於正在同一計算系統內執行的至少一個輔助應用程式的控制項。
26.根據權利要求21所述的方法，其中所述至少一個輔助應用程式包括媒體播放器應用程式、VoIP(網際網路語音協議)應用程式、瞬時消息收發應用程式、視頻聊天/會議應用程式、電子郵件應用程式和網際網路瀏覽器。
27.根據權利要求2所述的方法，其中在應用程式執行期間使用所述具備顯示功能的輸入設備顯示所述附加視覺接口內容進一步包括:顯示用於與所述具備顯示功能的用戶輸入設備直接連接的第二組設備的控制項。
28.根據權利要求23所述的方法，其中所述第二組設備包括媒體播放器設備、數位相機、行動電話、一組揚聲器、一組聲音耳機和能與直接連接至該具備顯示功能的設備兼容的設備。
29.根據權利要求2所述的方法，其中在應用程式執行期間使用所述具備顯示功能的輸入設備顯示所述附加視覺接口內容進一步包括:顯示一組預編制的事件之間的至少一切換控制，其中該組預編制的事件是在檢測到至少一個用戶輸入設備連接至所述計算系統且至少一個應用程式正在同一計算系統上執行時被觸發的。
30.根據權利要求25所述的方法，其中一組預編制的事件之間的至少一個切換控制包括:在光標控制、應用程式模式內的動作組、應用程式內的應用程式模式和計算系統內正在執行的應用程式之間的切換。
31.根據權利要求24所述的方法，其中第一組互動包括在包括基於LCD的觸控板的第一接口 120與一組QWERTY鍵之間的一組互動，且第二組互動包括在所述第一接口 120的所述基於LCD的觸控板和包括一組具備顯示功能的鍵的第二接口之間的一組互動，其中所述第一組互動和所述第二組互動中至少一個允許在應用程式執行期間使用所述具備顯示功能的輸入設備來適應性顯示所述附加視覺接口內容。
32.根據權利要求27所述的方法，其中所述第二組互動的功能進一步包括:在通過所述第二組互動觸發至少一個對應事件時，對該組具備顯示功能的鍵中每個單獨鍵的預編制功能和在每個單獨的具備顯示功能的鍵的LCD和/或OLED屏幕內的對應顯示的控制。
33.根據權利要求32所述的方法，其中所述對應事件包括遊戲模式內的動作組或應用程式內的遊戲模式中的一個，其中該應用程式為FPS和MMO遊戲中至少一個。
34.根據權利要求33所述的方法，其所述對應事件能夠進一步利用通過所述第一組互動和所述第二組互動中至少一個的至少一個用戶輸入而被切換至同一應用程式內的其它動作組或遊戲模式且從所述其它動作組或遊戲模式被切換。
35.根據權利要求33所述的方法，其中所述第一組互動和所述第二組互動與多個功能對應，所述功能包括記錄與能觸發的特定事件相關的宏和姿勢。
36.根據權利要求32所述的方法，其中所述特定事件包括應用程式模式內的動作組事件和應用程式內的模式事件。
37.根據權利要求36所述的方法，其中所述應用程式包括第一人稱射手(FPS)遊戲或大型多玩家在線(MMO)遊戲。
38.一種用作具備顯示功能的用戶輸入設備的裝置，該裝置包括: 具有至少一個顯示組件的第一組顯示組件和對應的第一顯示控制器； 具有至少一個顯示組件的第二組顯示組件和對應的第二顯示控制器； 第一組觸覺鍵，包括一組QWERTY鍵； 第二組具備顯示功能的觸覺鍵，其中每個具備顯示功能的鍵包括觸覺鍵和屬於所述第二組顯示組件的顯示組件； 觸摸傳感器和對應的觸摸傳感器控制器；和 USB控制器； 其中通過所述第一組觸覺鍵和第二組具備顯示功能的觸覺鍵的用戶輸入被傳輸至對應的計算機可編程邏輯器件(CPLD)。
39.根據權利要求38所述的裝置，其中所述第一組顯示組件包括一個顯示組件。
40.根據權利要求39所述的裝置，其中基於LCD的觸控板包括所述顯示組件和顯示控制器、觸摸傳感器和觸摸控制器。
41.根據權利要求40所述的裝置，其中所述基於LCD的觸控板包括電容式觸控螢幕或電阻式觸控螢幕中的一個。
42.根據權利要求40所述的裝置，其中所述基於LCD的觸控板包括跟蹤板。
43.根據權利要求38所述的裝置，其中每個具備顯示功能的觸覺鍵的顯示組件包括LCD或OLED中的一個。
44.根據權利要求38所述的裝置，其中該組具備顯示功能的觸覺鍵包括透光的或透明的顯示窗口，所述顯示窗口以允許通過任何給定鍵或按鈕的顯示窗口從顯示屏的部分傳輸視覺信號的方式偏離顯示表面，如LCD或OLED顯示屏，或布置在所述顯示表面上方。
45.根據權利要求38所述的裝置，其中該裝置為具備顯示功能的鍵盤。
46.根據權利要求38所述的裝置，其中該裝置具有一組USB埠和一組聲音輸出埠中至少一個，其中所述一組USB埠包括至少一個USB埠且所述一組聲音輸出埠具有至少一個聲音輸出埠。
【文檔編號】G06F1/16GK104254831SQ201380022183
【公開日】2014年12月31日 申請日期:2013年2月21日 優先權日:2012年2月28日
【發明者】陳民亮 申請人:雷蛇(亞太)私人有限公司