圖像顯示裝置、控制圖像顯示裝置的方法、電腦程式以及圖像顯示系統的製作方法

2023-05-09 01:21:31 1

圖像顯示裝置、控制圖像顯示裝置的方法、電腦程式以及圖像顯示系統的製作方法
【專利摘要】提供能夠將周邊的外部裝置中的顯示綜合的圖像顯示裝置。圖像顯示裝置具備：生成部，其生成包含第1顯示區域與第2顯示區域的綜合圖像，所述第1顯示區域一覽顯示用於使連接於圖像顯示裝置的多個外部裝置相互識別的多個識別圖像中的至少一部分識別圖像，所述第2顯示區域對作為從多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和圖像顯示部，其使圖像顯示裝置的使用者觀看綜合圖像。
【專利說明】圖像顯示裝置、控制圖像顯示裝置的方法、電腦程式以及圖像顯不系統

【技術領域】
[0001]本發明涉及圖像顯示裝置。

【背景技術】
[0002]作為佩戴於頭部的顯示裝置的頭部佩戴型顯示裝置(頭置式顯示器(HeadMounted Display, HMD))眾所周知。頭部佩戴型顯示裝置例如利用液晶顯示器與光源而生成表示圖像的圖像光、利用投射光學系和/或導光板等將所生成的圖像光向使用者的眼睛引導，由此使使用者識別虛像。這樣的頭部佩戴型顯示裝置，能夠通過例如MicroUSB (Universal Serial Bus:通用串行總線)等有線接口與智慧型手機等外部裝置連接，依照MHL(Mobile High definit1n Link:移動終端高清影音標準接口)等標準，接收來自外部裝置的影像信號。同樣，頭部佩戴型顯示裝置，能夠通過例如無線LAN等無線接口與外部裝置連接，依照Miracast等標準，接收來自外部裝置的影像信號。頭部佩戴型顯示裝置能夠基於這樣接收的影像信號，使頭部佩戴型顯示裝置的使用者觀看與顯示於外部裝置的顯示畫面的圖像相同的虛像。
[0003]在專利文獻1中，記載有能夠將現在的節目影像、與現在的節目影像相關的信息和其他的頻道的節目信息綜合而顯示於1個畫面的AV(Aud1 Visual:音頻視頻)系統。在專利文獻2中，記載有與多個計算機裝置的顯示畫面相鄰地設置假想畫面、各計算機裝置的用戶能夠操作假想畫面上的窗口的圖像顯示裝置。
[0004]專利文獻1:專利第3968467號公報
[0005]專利文獻2:專利第5082722號公報


【發明內容】

[0006]在專利文獻1所記載的技術中，作為連接於AV系統的AV設備，例示有模擬廣播接收單元與數字廣播接收單元。即，在專利文獻1所記載的技術中，具有以特定的設備之間的影像為對象、通用性較低的課題。另外，在專利文獻2所記載的技術中，具有只能提供與計算機裝置的顯示畫面不同的顯示手段即假想畫面、不能將多個計算機裝置的顯示畫面綜合的課題。
[0007]因此，希望有能夠將周邊的外部裝置(周邊設備)中的顯示綜合的圖像顯示裝置。此外，對圖像顯示裝置，具有通用性的提高、實用性的提高、便利性的提高、可信性的提高、製造成本的降低等各種希望。
[0008]本發明是為了解決上述的課題的至少一部分而完成的，能夠以以下的形態而實現。
[0009](1)根據本發明的一形態，提供一種圖像顯示裝置。該圖像顯示裝置具備:生成部，其生成包含第1顯示區域與第2顯示區域的綜合圖像，所述第1顯示區域一覽顯示用於使連接於所述圖像顯示裝置的多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和圖像顯示部，其使所述圖像顯示裝置的使用者觀看所述綜合圖像。根據該形態的圖像顯示裝置，圖像顯示部能夠使使用者觀看綜合圖像，所示綜合圖像包含:連接於圖像顯示裝置的多個外部裝置的多個識別圖像中的至少一部分識別圖像；和作為從多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像。因此，能夠提供能夠將圖像顯示裝置周邊的、換而言之連接於圖像顯示裝置的外部裝置中的顯示綜合的圖像顯示裝置。
[0010](2)在上述形態的圖像顯示裝置中，也可以進而具備:獲取部，其從所述一個外部裝置獲取所述顯示圖像；和更新部，其使用所述所獲取的顯示圖像，對所述綜合圖像的所述第2顯示區域進行更新。根據該形態的圖像顯示裝置，圖像顯示部能夠使使用者觀看對從多個外部裝置中選擇的一個外部裝置、將其顯示圖像更新了的綜合圖像。
[0011](3)在上述形態的圖像顯示裝置中，也可以:在所述識別圖像中，包含所述外部裝置的一個時間點的顯示圖像、表示用於識別所述外部裝置的信息的圖像和表示向所述外部裝置分配的符號的圖像中的至少任意一個。根據該形態的圖像顯示裝置，在綜合圖像的第1顯示區域，能夠包含外部裝置的一個時間點的顯示圖像、表示用於識別外部裝置的信息的圖像和表示向外部裝置分配的符號的圖像中的至少任意一個。
[0012](4)在上述形態的圖像顯示裝置中，也可以:進而具備外部裝置特定部，其從所述多個外部裝置中對所述使用者注意過的外部裝置進行特定；所述生成部將所述多個外部裝置中的至少在過去由所述外部裝置特定部特定的所述外部裝置的所述識別圖像顯示於所述第1顯示區域。根據該形態的圖像顯示裝置，生成部將連接於圖像顯示裝置的多個外部裝置中的至少在過去使用者注意過的外部裝置的識別圖像顯示於第1顯示區域。這樣，使用者能夠通過「注意」而選擇顯示於第1顯示區域的外部裝置，所以使用者的便利性提高。另外，能夠抑制在圖像顯示裝置上連接有數量較多的外部裝置等情況下的、第1顯示區域的複雜化。
[0013](5)在上述形態的圖像顯示裝置中，也可以:進而具備外部裝置特定部，其從所述多個外部裝置中對所述使用者注意過的外部裝置進行特定；所述獲取部從由所述外部裝置特定部特定的所述外部裝置獲取所述顯示圖像。根據該形態的圖像顯示裝置，獲取部從使用者注意過的外部裝置獲取顯示圖像，更新部使用所獲取的顯示圖像對綜合圖像的第2顯示區域進行更新。這樣，使用者能夠通過「注意」而選擇顯示於第2顯示區域的外部裝置，所以使用者的便利性提高。
[0014](6)在上述形態的圖像顯示裝置中，也可以:進而具備距離獲取部，其分別獲取所述圖像顯示裝置與所述多個外部裝置之間的距離；所述生成部與所述所獲取的各距離相應，確定所述第1顯示區域中的所述多個識別圖像的顯示順序和所述第1顯示區域中的所述識別圖像的大小中的至少一方。根據該形態的圖像顯示裝置，圖像顯示部能夠使使用者觀看與圖像顯示裝置和多個外部裝置之間的距離相應地使第1顯示區域中的多個識別圖像的顯示順序與大小中的至少一方變化的綜合圖像。結果，使用者能夠通過第1顯示區域中的顯示順序或大小得知圖像顯示裝置與多個外部裝置之間的距離。
[0015](7)在上述形態的圖像顯示裝置中，所述生成部也可以對所述第1顯示區域進行更新。根據該形態的圖像顯示裝置，生成部也能夠對所述第1顯示區域進行更新。
[0016](8)在上述形態的圖像顯示裝置中，也可以:所述圖像顯示部進而具備生成表示所述綜合圖像的圖像光的顯示驅動部，通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述綜合圖像。根據該形態的圖像顯示裝置，能夠將圖像顯示裝置構成為頭部佩戴型顯示裝置。
[0017](9)在上述形態的圖像顯示裝置中，也可以:所述生成部將所述第2顯示區域的縱橫比設為能夠通過所述顯示驅動部生成所述圖像光的區域的縱橫比，生成在所述第2顯示區域的外側配置了所述第1顯示區域的所述綜合圖像；所述圖像顯示部，在沒有由所述使用者進行的操作的情況下，對所述顯示驅動部，使其生成與所述綜合圖像的所述第2顯示區域相當的部分的所述圖像光；在具有由所述使用者進行的操作的情況下，對所述顯示驅動部，使其生成至少與所述綜合圖像的所述第1顯示區域相當的部分的所述圖像光。根據該形態的圖像顯示裝置，圖像顯示部在沒有由使用者進行的操作的情況下，使使用者觀看與綜合圖像的第2顯示區域相當的部分，在具有由使用者進行的操作的情況下，使使用者觀看與綜合圖像的第1顯示區域相當的部分。結果，根據該形態的圖像顯示裝置，能夠在通常畫面(第2顯示區域)的外側設置假想畫面(第1顯示區域)，通過由使用者進行的操作，對通常畫面與假想畫面的顯示進行切換。結果，能夠提高使用者的便利性。
[0018](10)在上述形態的圖像顯示裝置中，也可以:所述圖像顯示部，使所述顯示驅動部生成表示用於向所述一個外部裝置附加的附加提示用的信息即用於向所述使用者提供增強現實感的附加提示用的信息的圖像光，通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述附加提示用的信息。根據該形態的圖像顯示裝置，圖像顯示部在使用者對一個外部裝置注意的情況下，能夠使其觀看用於向使用者提供增強現實感的附加提示用的信息。結果，能夠使使用者的便利性提高。
[0019](11)根據本發明的一形態，提供圖像顯示系統。該圖像顯示系統具備:信息處理裝置；連接於所述信息處理裝置的圖像顯示裝置；和連接於所述信息處理裝置的多個外部裝置；所述信息處理裝置具備:代理生成部，其生成包含第1顯示區域與第2顯示區域的綜合圖像，所述第1顯示區域一覽顯示用於使所述多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和發送部，其將所述綜合圖像向所述信息處理裝置發送；所述圖像顯示裝置具備圖像顯示部，其使所述圖像顯示裝置的使用者觀看從所述信息處理裝置接收的所述綜合圖像。根據該形態的圖像顯示系統，能夠提供能夠將圖像顯示裝置周邊的、換而言之經由信息處理裝置連接於圖像顯示裝置的外部裝置上的顯示綜合的圖像顯示系統。
[0020]上述的本發明的各形態所具有的多個構成要素都不是必須的，為了解決上述的課題的一部分或全部、或者為了達成本說明書中所記載的效果的一部分或全部，能夠適當對所述多個構成要素的一部分構成要素進行其變更、刪除、與新的構成要素的替換、限定內容的一部分刪除。另外，為了解決上述的課題的一部分或全部、或者為了達成本說明書中所記載的效果的一部分或全部，也能夠將上述的本發明的一形態中所含的技術特徵的一部分或全部與上述的本發明的其他的形態中所含的技術特徵的一部分或全部組合而設為本發明的獨立的一形態。
[0021]例如，本發明的一形態能夠設為具備生成部、圖像顯示部2個要素中的一部分或全部要素的裝置而實現。即，該裝置可以具有也可以沒有生成部。另外，該裝置可以具有也可以沒有圖像顯示部。這樣的裝置能夠設為例如圖像顯示裝置而實現，但也能夠設為圖像顯示裝置以外的其他的裝置而實現。前述的圖像顯示裝置的各形態的技術特徵的一部分或全部都能夠適用於該裝置。
[0022]另外，本發明能夠以各種形態實現，例如，能夠以圖像顯示裝置、圖像顯示裝置的控制方法、使用了圖像顯示裝置的圖像顯示系統、頭部佩戴型顯示裝置、頭部佩戴型顯示裝置的控制方法、使用了頭部佩戴型顯示裝置的圖像顯示系統、用於實現這些方法、裝置或系統的功能的電腦程式、記錄了該電腦程式的記錄介質等形態實現。

【專利附圖】

【附圖說明】
[0023]圖1是表示本發明的一實施方式中的圖像顯示系統1000的概略構成的說明圖。
[0024]圖2是功能性表示頭置式顯示器100的構成的框圖。
[0025]圖3是表示區域信息122的一例的說明圖。
[0026]圖4是表示使使用者觀看的虛像的一例的說明圖。
[0027]圖5是表不綜合圖像顯不處理的順序的時序圖。
[0028]圖6是表示在步驟S126中生成的綜合圖像的一例的說明圖。
[0029]圖7是表示綜合圖像更新處理的順序的時序圖。
[0030]圖8A是表示在頭置式顯示器100上顯示有將第2顯示區域更新了的綜合圖像的樣子說明圖。
[0031]圖8B是與使用附加的處理1的無線標籤的方法有關的說明圖。
[0032]圖9是功能性表示第2實施方式的頭置式顯示器100a的構成的框圖。
[0033]圖10是表示第2實施方式的綜合圖像顯示處理的順序的時序圖。
[0034]圖11是表示在第2實施方式的綜合圖像顯示處理的步驟S126中生成的綜合圖像的一例的說明圖。
[0035]圖12是表示第2實施方式中的綜合圖像更新處理的順序的時序圖。
[0036]圖13是表示在頭置式顯示器100a上顯示有對第1顯示區域與第2顯示區域進行了更新的綜合圖像的樣子的說明圖。
[0037]圖14是功能性表示第3實施方式的頭置式顯示器100b的構成的框圖。
[0038]圖15是表不第3實施方式中的區域信息122b的一例的說明圖。
[0039]圖16是用於說明圖像處理部160b的工作的一例的說明圖。
[0040]圖17是表示第4實施方式的圖像顯示系統1000c的概略構成的說明圖。
[0041]圖18是功能性表示伺服器900的構成的框圖。
[0042]圖19是表示變形例中的頭置式顯示器的外觀的構成的說明圖。
[0043]圖20是表示變形例中的區域信息122x的一例的說明圖。
[0044]符號說明
[0045]10…控制部
[0046]20…圖像顯示部
[0047]22…右顯示驅動部
[0048]24…左顯示驅動部
[0049]26…右光學像顯示部
[0050]28…左光學像顯示部
[0051]32…右耳機
[0052]34…左耳機
[0053]40...連接部
[0054]51...發送部
[0055]52...發送部
[0056]53...接收部
[0057]10(l...頭置式顯示器(頭部佩戴型顯示裝置)
[0058]110…輸入信息獲取部(操作獲取部)
[0059]120…存儲部
[0060]122…區域信息
[0061]124…識別圖像存儲部
[0062]130…電源
[0063]132…無線通信部(獲取部)
[0064]140 …CPU
[0065]142…生成部(獲取部、生成部)
[0066]144...更新部(更新部)
[0067]160…圖像處理部
[0068]170…音聲處理部
[0069]180 …接口
[0070]190…顯示控制部
[0071]201…右背光控制部
[0072]202…左背光控制部
[0073]221…右背光
[0074]222…左背光
[0075]251…右投射光學系
[0076]252…左投射光學系
[0077]261…右導光板
[0078]262…左導光板
[0079]300…計算機(外部裝置)
[0080]400…家電(外部裝置)
[0081]500…設備(外部裝置)
[0082]600…便攜終端(外部裝置)
[0083]700…遊戲設備(外部裝置)
[0084]900…伺服器(信息處理裝置)
[0085]910 …CPU
[0086]912…代理生成部(代理生成部)
[0087]914…代理更新部
[0088]916…發送接收部(發送部)
[0089]920 …ROM
[0090]930 …RAM
[0091]940…通信接口
[0092]950…存儲部
[0093]952…區域信息
[0094]954…識別圖像存儲部
[0095]1000…圖像顯示系統
[0096]Data…圖像數據
[0097]SC…外景
[0098]RE…右眼
[0099]LE…左眼
[0100]VI…虛像
[0101]VR…視野
[0102]J1?J6…識別圖像
[0103]B1?B6…縮略圖顯示區域(第1顯示區域)
[0104]G1?G6…識別圖像
[0105]BG…活動顯示區域(第2顯示區域)
[0106]GI…綜合圖像
[0107]INT…網際網路

【具體實施方式】
[0108]A.第1實施方式:
[0109]A - 1.圖像顯示系統的構成:
[0110]圖1是表示本發明的一實施方式中的圖像顯示系統1000的概略構成的說明圖。圖像顯示系統1000具備頭部佩戴型顯示裝置100、計算機300(PC300)、家電400、AV(Aud1Visual)設備500、便攜終端600、遊戲設備700。以後，也將頭部佩戴型顯示裝置100稱為「圖像顯示裝置」。同樣，也將PC300、家電400、AV設備500、便攜終端600、遊戲設備700總稱為「外部裝置」。圖像顯示系統1000是將「綜合圖像」顯示於頭部佩戴型顯示裝置100的系統，所述綜合圖像是使將連接於頭部佩戴型顯示裝置100的外部裝置中的顯示綜合而成的。
[0111]頭部佩戴型顯示裝置100是佩戴於頭部的圖像顯示裝置，也稱為頭置式顯示器(Head Mounted Display,HMD)。本實施方式的頭置式顯示器100是使用者觀看虛像同時也能夠直接觀看外景的光學透射型的頭部佩戴型顯示裝置。PC300為信息通信終端。在本實施方式中，作為PC300例示筆記本式計算機，但PC300也可以由臺式計算機等其他的信息通信終端構成。家電400為家庭用的電氣產品。在本實施方式中，作為家電400例示冰箱，但家電400也可以由空調、微波爐、洗衣機、電話、傳真機、印表機、數位照相機等其他的電氣產品構成。
[0112]AV設備500是對影像進行記錄、再現、轉換等的影像設備和對音聲進行記錄、再現、轉換等的音響設備的總稱。在本實施方式中，作為AV設備500例示硬碟播放器，但AV設備500也可以由電視機、DVD (Digital Versatile Disk:數字多功能光碟)播放器、CD音頻、數字音頻播放器等其他的影像設備和/或音響設備構成。便攜終端600為能夠便攜的信息通信終端。在本實施方式中，作為便攜終端600例示智慧型手機(smartphone)，但便攜終端600也可以由便攜電話、PDA (Personal Digital Assistant:個人數字助手)、平板終端等其他的便攜信息通信終端構成。遊戲設備700是用於使計算機遊戲工作的設備。
[0113]上述的PC300、家電400、AV設備500、便攜終端600、遊戲設備700的外部裝置分別能夠無線通信或有線通信地與頭置式顯示器100連接。
[0114]A — 2.頭置式顯示器的構成:
[0115]圖2是功能性表示頭置式顯示器100的構成的框圖。如圖1、2所示，頭置式顯示器100具備:在佩戴於使用者的頭部的狀態下使使用者觀看虛像的圖像顯示部20，和控制圖像顯示部20的控制部(控制器)10。圖像顯示部20與控制部10通過連接部40連接，經由連接部40進行各種信號的傳送。在連接部40中，能夠採用金屬線纜和/或光纖。
[0116]A - 2 - 1.控制部的構成:
[0117]控制部10是用於控制頭置式顯示器100的裝置。控制部10具備輸入信息獲取部110、存儲部120、電源130、無線通信部132、GPS模塊134、CPU140、接口 180、發送部(Tx)51以及52，各部分通過未圖示的總線相互連接(圖2)。
[0118]輸入信息獲取部110獲取與操作輸入相應的信號，所述操作輸入與例如觸摸板、十字鍵、腳踏開關、手勢檢測、視線檢測、觸摸檢測、話筒等輸入設備相對。具體地說，腳踏開關為通過使用者的腳操作的開關。在手勢檢測中，使用照相機等檢測使用者的手勢。在該情況下，使手勢與指令預先對應。另外，在手勢檢測時，也可以將使用者的指尖、和/或帶在使用者的手上的指環、和/或使用者手持的道具等設為用於運動檢測的標記。在視線檢測中，使用紅外線傳感器等檢測使用者的視線。在該情況下，使視線的運動與指令預先對應。在觸摸檢測中，檢測使用者對設置於頭置式顯示器100的殼體的任意的場所(例如，圖像顯示部20的右保持部21以及左保持部23(圖1)的外側)的接觸傳感器的觸摸操作。
[0119]這樣，輸入信息獲取部110獲取與操作輸入相應的信號，所述操作輸入與各種輸入設備相對。特別，如果設為獲取腳踏開關、視線檢測、利用話筒的操作輸入，則在使用者難以使用手操作的場面(例如，家務等作業場面、醫療現場的作業場面、建築業和/或製造業等需要手頭作業的作業場面)，能夠大大提高使用頭置式顯示器100的情況下的使用者的便利性。
[0120]存儲部120由ROM、RAM、DRAM、硬碟等構成。存儲部120包含區域信息122和識別圖像存儲部124。區域信息122是對在綜合圖像顯示處理(圖5)中生成的綜合圖像所含的「區域」進行規定的信息。識別圖像存儲部124是用於預先存儲在綜合圖像顯示處理中收集的外部裝置的識別圖像的存儲部。在這裡，所謂綜合圖像顯示處理，是生成綜合圖像並顯示於頭置式顯示器100的處理。所謂綜合圖像，是包含連接於頭置式顯示器100的多個外部裝置的識別圖像和作為從多個外部裝置中由使用者選擇的一個外部裝置顯示的圖像的顯示圖像(以後，也簡稱為「顯示圖像」。)雙方的圖像。所謂綜合圖像更新處理，是對綜合圖像中由使用者選擇的一個外部裝置的顯示圖像進行動態更新並顯示於頭置式顯示器100的處理。
[0121]所謂「外部裝置的識別圖像」，是用於相互識別連接於頭置式顯示器100的外部裝置的圖像。作為本實施方式中的外部裝置的識別圖像，能夠使用例如表示以下的al?a3所例示的信息的圖像。
[0122](al)外部裝置的一個時間點下的顯示圖像。
[0123](a2)外部裝置的操作畫面和/或設定畫面的顯示圖像。
[0124](a3)外部裝置的一個期間的顯示圖像的縮短動態圖像。
[0125]圖3是表示區域信息122的一例的說明圖。區域信息122具有長方形狀的區域(以後，也稱為「區域122」。)。區域122優選具有與頭置式顯示器100的顯示元件(圖2:右IXD241、左IXD242)的縱橫比相同的縱橫比。區域122包含6個縮略圖顯示區域B1?B6和活動顯示區域BG。縮略圖顯示區域B1?B6，是用於通過在綜合圖像顯示處理(圖5)中配置有多個外部裝置的識別圖像而一覽顯示多個外部裝置的識別圖像的區域。也將縮略圖顯示區域B1?B6稱為「第1顯示區域」。活動顯示區域BG，是用於在綜合圖像顯示處理中配置有從多個外部裝置中由使用者選擇的一個外部裝置的顯示圖像的區域。也將活動顯示區域BG稱為「第2顯示區域」。
[0126]在圖3的例子中，縮略圖顯示區域B1?B3分別在鉛直方向上相鄰而配置於區域122的左端部。縮略圖顯示區域B4?B6分別在鉛直方向上相鄰而配置於區域122的右端部。另外，縮略圖顯示區域B1?B6分別是相同大小的區域。另外，在圖3的例子中，活動顯示區域BG是佔據從區域122將縮略圖顯示區域B1?B6除外的部分的區域。在圖3中，對縮略圖顯示區域B1?B6塗以點狀的陰影，對活動顯示區域BG塗以斜線陰影。
[0127]另外，圖3所示的縮略圖顯示區域B1?B6的配置以及大小為一例，能夠任意地確定。例如，縮略圖顯示區域B1?B6也可以配置於區域122的上端部和/或下端部。另外，縮略圖顯示區域B1?B6也可以配置成包圍區域122的四邊。另外，縮略圖顯示區域B1?B6的各區域也可以為不同的大小。進而，縮略圖顯示區域B1?B6也可以設為區域的至少一部分分別重合。但是，為了提高活動顯示區域BG的觀看性，縮略圖顯示區域B1?B6優選配置於不妨礙使用者的視野的區域122的端部。
[0128]電源130向頭置式顯示器100的各部分供給電力。作為電源130，能夠使用例如二次電池。無線通信部132依照預定的無線通信標準(例如，紅外線、Bluetooth(註冊商標)所例示的近距離無線通信、IEEE802.11所例示的無線LAN等)，與外部裝置之間進行無線通信。GPS模塊134通過接收來自GPS衛星的信號，檢測頭置式顯示器100的使用者的現在位置，生成表示使用者的現在位置的現在位置信息。另外，現在位置信息能夠通過例如表示經度緯度的坐標而實現。
[0129]CPU140通過讀出並執行存儲於存儲部120的電腦程式，作為生成部142、更新部144、作業系統(OS) 150、圖像處理部160、音聲處理部170、顯示控制部190而起作用。
[0130]生成部142執行綜合圖像顯示處理(圖5)，生成綜合圖像。生成部142實現作為對多個外部裝置生成綜合圖像的「生成部」的功能，所述綜合圖像包含:第1顯示區域，其一覽顯示用於使多個外部裝置相互識別的多個識別圖像；和第2顯示區域，其顯示從多個外部裝置中由使用者選擇的一個外部裝置的顯示圖像。更新部144執行綜合圖像更新處理(圖7)，對綜合圖像進行更新。更新部144實現作為獲取從多個外部裝置中由使用者選擇的一個外部裝置的顯示圖像的「獲取部」的功能和作為使用所獲取的顯示圖像對綜合圖像的第2顯示區域進行更新的「更新部」的功能。
[0131]圖像處理部160基於從生成部142、和/或接口 180、和/或無線通信部132等經由0S150輸入的影像信號而生成信號。圖像處理部160通過將所生成的信號經由連接部40向圖像顯示部20供給，控制圖像顯示部20中的顯示。用於向圖像顯示部20供給的信號在模擬形式與數字形式的情況下不同。
[0132]例如，在數字形式的情況下，輸入有數字R信號、數字G信號、數字B信號與時鐘信號PCLK同步的狀態的影像信號。圖像處理部160根據需要而對由數字R信號、數字G信號、數字B信號構成的圖像數據Data執行眾所周知的解析度轉換處理、亮度彩度的調整等各種色調校正處理、梯形失真校正處理等圖像處理。然後，圖像處理部160經由發送部51、52發送時鐘信號PCLK、圖像數據Data。
[0133]在模擬形式的情況下，輸入有由模擬R信號、模擬G信號、模擬B信號、垂直同步信號VSync、水平同步信號HSync構成的影像信號。圖像處理部160從所輸入的信號將垂直同步信號VSync與水平同步信號HSync分離，與它們的周期相應，使用未圖示的PLL電路等生成時鐘信號PCLK。另外，圖像處理部160使用A/D轉換電路等將模擬R信號、模擬G信號、模擬B信號轉換成數位訊號。圖像處理部160根據需要對由轉換後的數字R信號、數字G信號、數字B信號構成的圖像數據Data執行眾所周知的圖像處理，然後經由發送部51、52發送時鐘信號PCLK、圖像數據Data、垂直同步信號VSync、水平同步信號HSync。另外，以後，也將經由發送部51發送的圖像數據Data稱為「右眼用圖像數據Datal」，也將經由發送部52發送的圖像數據Data稱為「左眼用圖像數據Data2」。
[0134]顯示控制部190生成對圖像顯示部20具有的右顯示驅動部22與左顯示驅動部24進行控制的控制信號。所謂控制信號，為用於單獨地切換由右LCD控制部211進行的右LCD241的驅動0N/0FF、由右背光控制部201進行的右背光221的驅動0N/0FF、由左LCD控制部212進行的左IXD242的驅動0N/0FF、由左背光控制部202進行的左背光222的驅動0N/0FF的信號。顯示控制部190通過這些控制信號，控制右顯示驅動部22與左顯示驅動部24中的圖像光的生成以及射出。顯示控制部190經由發送部51、52發送所生成的控制信號。
[0135]音聲處理部170獲取內容中包含的音聲信號，對所獲取的音聲信號進行增幅，對右耳機32的未圖不的揚聲器和左耳機34的未圖不的揚聲器供給。
[0136]接口 180依照預定的有線通信標準(例如，MicroUSB (Universal Serial Bus)、USB、HDMI (High Definit1n Multimedia Interface:高清晰度多媒體接口)、DVI (DigitalVisual Interface:數字視頻接口)、VGA(Video Graphics Array:視頻圖形陣列)、組合電纜、RS — 232C (Recommended Standard232:推薦標準 232)、IEEE802.3 所例示的有線 LAN等)，與外部裝置之間進行無線通信。
[0137]A - 2 - 2.圖像顯示部的構成:
[0138]圖像顯示部20是佩戴於使用者的頭部的佩戴體，在本實施方式中具有眼鏡形狀。圖像顯示部20包含右顯示驅動部22、左顯示驅動部24、右光學像顯示部26(圖1)、左光學像顯示部28 (圖1)、9軸傳感器66。
[0139]右顯示驅動部22與左顯示驅動部24被配置於使用者佩戴圖像顯示部20時的與使用者的鬢角相對的位置。本實施方式中的右顯示驅動部22與左顯示驅動部24使用液晶顯示器(Liquid Crystal Display,以下稱為「IXD」)和/或投射光學系，生成並射出表示圖像的圖像光。右顯示驅動部22包含接收部(Rx) 53、作為光源而起作用的右背光(BL)控制部201以及右背光(BL) 221、作為顯示元件而起作用的右IXD控制部211以及右IXD241、右投射光學系251。
[0140]接收部53接收從發送部51發送的數據。右背光控制部201基於所輸入的控制信號，驅動右背光221。右背光221為例如LED和/或電致發光(EL)等發光體。右LCD控制部211基於所輸入的時鐘信號PCLK與右眼用圖像數據Datal、垂直同步信號VSync、水平同步信號HSync，驅動右IXD241。右IXD241是將多個像素配置成矩陣狀的透射型液晶面板。右IXD241通過驅動被配置成矩陣狀的各像素位置的液晶，使透射過右IXD241的光的透射率變化，由此將從右背光221照射的照明光向表示圖像的有效的圖像光調製。右投射光學系251由將從右LCD241射出的圖像光設為並行狀態的光束的準直透鏡構成。
[0141]左顯示驅動部24具有與右顯示驅動部22大致同樣的構成，與右顯示驅動部22同樣地工作。即，左顯示驅動部24包含接收部(Rx) 54、作為光源而起作用的左背光(BL)控制部202以及左背光(BL) 222、作為顯示元件而起作用的左IXD控制部212以及左IXD242、左投射光學系252。詳細的說明省略。另外，在本實施方式中採用背光方式，但也可以使用前光方式、和/或反射方式而射出圖像光。
[0142]右光學像顯示部26與左光學像顯示部28被配置成在使用者佩戴圖像顯示部20時分別位於使用者的左右的眼前(參照圖1)。右光學像顯示部26包含右導光板261和未圖示的調光板。右導光板261由透光性的樹脂材料等形成。右導光板261 —邊沿著預定的光路使從右顯示驅動部22輸出的圖像光反射一邊將該圖像光向使用者的右眼RE引導。在右導光板261中，可以使用衍射光柵也可以使用半透射反射膜。調光板是薄板狀的光學元件，被配置成覆蓋圖像顯示部20的表面側。調光板保護右導光板261，抑制右導光板261的損傷和/或汙垢的附著等。另外，通過調整調光板的透光率，能夠調整進入到使用者的眼睛的外光量而調整虛像的觀看的容易度。另外，調光板能夠省略。
[0143]左光學像顯示部28具有與右光學像顯示部26大致同樣的構成，與右光學像顯示部26同樣地工作。即，左光學像顯示部28包含左導光板262和未圖示的調光板，將從左顯示驅動部24輸出的圖像光向使用者的左眼LE引導。詳細的說明省略。
[0144]9軸傳感器66是檢測加速度(3軸)、角速度(3軸)、地磁(3軸)的運動傳感器。9軸傳感器66被設置於圖像顯示部20，所以在將圖像顯示部20佩戴於使用者的頭部時，作為檢測頭置式顯示器100的使用者的頭部的運動的運動檢測部而起作用。在這裡，所謂頭部的運動，包含頭部的速度.加速度?角速度.朝向.朝向的變化。
[0145]圖4是表示使使用者觀看的虛像的一例的說明圖。在圖4中，例示使用者的視野VR。如上所述，向頭置式顯示器100的使用者的雙眼引導的圖像光成像於使用者的視網膜，由此使用者能夠觀看虛像VI。在圖4的例中，虛像VI是頭置式顯示器100的0S的待機畫面。另外，使用者透過右光學像顯示部26以及左光學像顯示部28而觀看外景SC。這樣，本實施方式的頭置式顯示器100的使用者對於視野VR中顯示有虛像VI的部分，能夠觀察虛像VI和虛像VI的背後的外景SC。另外，使用者對於視野VR中沒有顯示虛像VI的部分，能夠透過右光學像顯示部26以及左光學像顯示部28而直接觀察外景SC。另外，在本說明書中，在「頭置式顯示器100顯示圖像」中，也包含使頭置式顯示器100的使用者觀看虛像。
[0146]A - 3.綜合圖像顯示處理:
[0147]圖5是表示綜合圖像顯示處理的順序的時序圖。本實施方式的綜合圖像顯示處理是生成綜合圖像並顯示於頭置式顯示器100的處理。所謂綜合圖像，是包含被連接於頭置式顯示器100的多個外部裝置的識別圖像、由使用者從多個外部裝置中選擇的一個外部裝置的顯示圖像雙方的圖像。綜合圖像顯示處理主要由生成部142執行。
[0148]在步驟S100中，使用於執行綜合圖像顯示處理的應用起動。步驟S100的應用的起動可以將輸入信息獲取部110檢測到由使用者進行的起動操作這一情況設為觸發，也可以將來自其他的應用的起動命令的檢測設為觸發。通過步驟S100的應用的起動，對CPU140使生成部142以及更新部144的功能實現。
[0149]在步驟S102中，無線通信部132或接口 180檢測連接有作為外部裝置的PC300這一情況。另外，以後，例示頭置式顯示器100與PC300使用依照IEEE802.11的無線LAN而通信的情況。然後，生成部142在其與PC300之間確立聯繫。
[0150]在步驟S104中，PC300獲取PC300的顯示畫面的圖像。具體地說，PC300獲取以下的bl?b3所示的某一幀圖像。另外，下述bl與上述al相對應，下述b2與上述a2相對應，下述b3與上述a3相對應。
[0151](bl)對在PC300中再現中的內容和/或應用⑶I (Graphical User Interface:圖形用戶接口)等在一個時間點在PC300中顯示的畫面進行渲染的幀圖像。
[0152](b2)對PC300的操作畫面(即待機畫面)和/或設定畫面(即0S和/或B1S的設定畫面)進行渲染的幀圖像。
[0153](b3)對在PC300中再現中的內容和/或應用⑶I等在一個期間中在PC300中顯示的畫面進行渲染的多個幀圖像。
[0154]在步驟S106中，PC300將所獲取的幀圖像向頭置式顯示器100發送。頭置式顯示器100的生成部142經由無線通信部132獲取該幀圖像。此時，生成部142與無線通信部132作為「獲取部」而起作用。
[0155]在步驟S108中，生成部142將所獲取的幀圖像設為「外部裝置的識別圖像」而存儲於識別圖像存儲部124。另外，生成部142也可以在對幀圖像進行縮小處理後將其存儲於識別圖像存儲部124。這樣一來，能夠降低識別圖像存儲部124消耗的存儲容量。另外，在步驟S108中生成部142也可以將其與PC300之間的聯繫切斷。
[0156]在步驟S110中，生成部142在其與家電400之間，實施與步驟S102?S108同樣的處理。同樣，生成部142在步驟S112中在其與AV設備500之間、在步驟S114中在其與便攜終端600之間、在步驟S116中在其與遊戲設備700之間，分別實施同樣的處理。步驟S110?S116的結果，在識別圖像存儲部124中，存儲有連接於頭置式顯示器100的所有的外部裝置的識別圖像。
[0157]在步驟S118中生成部142獲取頭置式顯示器100的顯示畫面的圖像。具體地說，獲取與頭置式顯示器100有關的、上述bl?b3所示的某一幀圖像。
[0158]在步驟S120中，生成部142將所獲取的幀圖像作為「圖像顯示裝置的識別圖像」，存儲於識別圖像存儲部124。另外，生成部142也可以對幀圖像進行縮小處理後將其存儲於識別圖像存儲部124。步驟S118、S120的結果，在識別圖像存儲部124中，存儲有頭置式顯示器100自己的識別圖像。
[0159]在步驟S124中，生成部142獲取存儲於識別圖像存儲部124的多個識別圖像，根據預定的條件對所獲取的識別圖像進行分類。分類的條件能夠使用例如作為識別圖像的獲取源的外部裝置的ID(例如產品編號和/或序列編號)、作為識別圖像的獲取源的外部裝置的名字(例如產品的名稱)、識別圖像存儲部124中的識別圖像的獲取順序、作為識別圖像的獲取源的外部裝置與頭置式顯示器100之間的距離、外部裝置的種類(例如，PC、家電、AV設備等)等。另外，外部裝置與頭置式顯示器100之間的距離能夠通過例如0S150對由GPS模塊134檢測的頭置式顯示器100的現在位置信息與從外部裝置獲取的外部裝置的現在位置信息進行比較而求出。在該情況下，0S150作為「距離獲取部」而起作用。另外，在本實施方式中的「外部裝置與頭置式顯示器100之間的距離」中，也包含大致的距離。
[0160]在步驟S126中，生成部142使用分類後的識別圖像而生成綜合圖像。具體地說，生成部142將在步驟S124中被分類的多個識別圖像分別配置於區域信息122的縮略圖顯示區域B1?B6 (第1顯示區域)。另外，生成部142將黑圖像配置於區域信息122的活動顯示區域BG (第2顯示區域)。在該活動顯示區域BG中，在後述的綜合圖像變更處理中，插入有由使用者選擇的一個外部裝置的顯示圖像。
[0161]另外，在步驟S126中，生成部142也可以對各識別圖像實施識別圖像的形狀的變更、識別圖像的透射率的變更、向識別圖像的色轉換處理、識別圖像的大小的變更、向識別圖像附加裝飾(文字、圖形、記號等)等。例如，生成部142在變更識別圖像的大小時，也可以與外部裝置與頭置式顯示器100之間的距離相應而確定識別圖像的大小。例如，如果越是與頭置式顯示器100之間的距離較近的外部裝置的識別圖像越增大，則能夠使觀察綜合圖像的使用者視覺性地把握頭置式顯示器100與各外部裝置之間的距離。同樣，對於形狀、和/或透射率、色轉換處理的處理內容、裝飾的內容，也可以與頭置式顯示器100與外部裝置之間的距離相應而確定。
[0162]圖6是表示在步驟S126中生成的綜合圖像的一例的說明圖。在綜合圖像GI的縮略圖顯示區域B1，作為頭置式顯示器100的識別圖像，配置有頭置式顯示器100的一個時間點的顯示圖像G1。同樣，在縮略圖顯示區域B2，作為PC300的識別圖像，配置有PC300的一個時間點的顯示圖像G2 ;在縮略圖顯示區域B3，作為家電400的識別圖像，配置有家電400的設定畫面的顯示圖像G3 ;在縮略圖顯示區域B4，作為AV設備500的識別圖像，配置有AV設備500的操作畫面的顯示圖像G4 ;在縮略圖顯示區域B5，作為便攜終端600的識別圖像，配置有便攜終端600的一個時間點的顯示圖像G5;在縮略圖顯示區域B6，作為遊戲設備700的識別圖像，配置有遊戲設備700的一個時間點的顯示圖像G6。另外，在圖6的例子中，縮略圖顯示區域B1?B6的縱橫比與各外部裝置的識別圖像G1?G6的縱橫比不一致。在圖5的步驟S126，生成部142也可以實施使各外部裝置的識別圖像G1?G6的縱橫比與縮略圖顯示區域B1?B6的縱橫比分別一致的處理。
[0163]在圖5的步驟S128中，生成部142在頭置式顯示器100上顯示綜合圖像。具體地說，生成部142將在步驟S126中生成的綜合圖像向圖像處理部160發送。在接收了綜合圖像的圖像處理部160，進行上述的顯示處理。結果，被向頭置式顯示器100的使用者的雙眼引導的圖像光成像於使用者的視網膜，由此頭置式顯示器100的使用者能夠在視野中觀看綜合圖像的虛像。換而言之，頭置式顯示器100能夠顯示綜合圖像。
[0164]A - 4.綜合圖像更新處理:
[0165]圖7是表示綜合圖像更新處理的順序的時序圖。所謂本實施方式的綜合圖像更新處理，是對綜合圖像中由使用者選擇的一個外部裝置的顯示圖像進行動態更新並顯示於頭置式顯示器100的處理。綜合圖像更新處理主要由更新部144執行。
[0166]在步驟S200中，更新部144經由輸入信息獲取部110，獲取從多個外部裝置中選擇一個外部裝置的選擇操作。該選擇操作是由頭置式顯示器100的使用者進行的操作。使用者能夠使用頭置式顯示器100所具備的輸入設備(例如觸摸板、十字鍵、腳踏開關、手勢檢測、視線檢測、觸摸檢測、話筒等)而實施選擇操作。
[0167]在步驟S202中，更新部144對由使用者選擇的一個外部裝置發送顯示圖像的要求。在圖中，表示由使用者選擇的外部裝置為PC300的例子。
[0168]在步驟S204中，接收了顯示圖像的要求的外部裝置(PC300)獲取對PC300的顯示畫面的圖像、即在PC300中再現中的內容、和/或應用⑶I等在現在PC300中顯示的畫面進行了渲染的幀圖像。
[0169]在步驟S206中，PC300將所獲取的幀圖像向頭置式顯示器100發送。頭置式顯示器100的更新部144經由無線通信部132獲取第1圖像。此時，更新部144與無線通信部132作為「獲取部」而起作用。
[0170]在步驟S208中，更新部144使用所獲取的幀圖像，對在綜合圖像顯示處理(圖5)的步驟S126中生成的綜合圖像中的活動顯示區域BG(第2顯示區域)進行更新。
[0171]在步驟S210中，更新部144顯示更新後的綜合圖像。詳細與綜合圖像顯示處理(圖5)的步驟S128同樣。
[0172]在步驟S212中，更新部144，在直到獲取與在步驟S200中獲取的外部裝置不同的其他的外部裝置的選擇操作為止的期間內，對所選擇的外部裝置(PC300)，反覆進行步驟S202?S210的處理。另一方面，在獲取了其他的外部裝置的選擇操作的情況下，更新部144對其他的外部裝置執行步驟S202?S212的處理。
[0173]圖8A是表示在頭置式顯示器100上顯示有將第2顯示區域更新了的綜合圖像的樣子的說明圖。如圖8A所示，頭置式顯示器100的使用者在視野VR中，作為虛像VI能夠觀看綜合圖像GI，所述綜合圖像GI包含連接於頭置式顯示器100的多個外部裝置的多個識別圖像和從多個外部裝置中選擇的一個外部裝置的顯示圖像。在圖8A的例子中，所謂多個外部裝置的多個識別圖像，為在圖6中說明的頭置式顯示器100的識別圖像G1、PC300的識另IJ圖像G2、家電400的識別圖像G3、AV設備500的識別圖像G4、便攜終端600的識別圖像G5和遊戲設備700的識別圖像G6。另外，在圖8A的例子中，所謂所選擇的一個外部裝置的顯示圖像，即為作為PC300顯示的圖像的顯示圖像IM。另外，本實施方式的頭置式顯示器100為透射型的頭部佩戴型顯示裝置。因此，如通過圖4進行說明，使用者能夠透過虛像VI而觀看背景。對於該背景，為了圖示的方便，將圖8A中的圖示省略。
[0174]如以上所述，根據第1實施方式的綜合圖像顯示處理(圖5)以及綜合圖像更新處理(圖7)，圖像顯示部20能夠使使用者觀看綜合圖像GI，所述綜合圖像GI包含連接於頭置式顯示器100 (圖像顯示裝置)的多個外部裝置(PC300?遊戲設備700)的多個識別圖像G2?G7和從多個外部裝置中選擇的一個外部裝置(在上述例子中為PC300)的顯示圖像頂。因此，能夠提供能夠將頭置式顯示器100的周邊的、換而言之連接於頭置式顯示器100的外部裝置上的顯示綜合的頭置式顯示器100。另外，在綜合圖像顯示處理(圖5)中，也可以將連接於頭置式顯示器100的多個外部裝置的多個識別圖像G2?G7中的至少一部分識別圖像包含於縮略圖顯示區域B1?B6 (第1顯示區域)。這樣也能夠提供能夠將連接於頭置式顯示器100的至少一部分外部裝置上的顯示綜合的頭置式顯示器100。
[0175]另外，根據第1實施方式的綜合圖像更新處理(圖7)，圖像顯示部20能夠使使用者觀看對從多個外部裝置(PC300?遊戲設備700)選擇的一個外部裝置(在上述例子中為PC300)、對其顯示畫面進行動態更新的綜合圖像GI。根據上述的綜合圖像更新處理以及綜合圖像顯示處理(圖5)，頭置式顯示器100僅對綜合圖像中的活動顯示區域BG (第2顯示區域)進行動態更新，縮略圖顯示區域B1?B6(第1顯示區域)不更新。因此，頭置式顯示器1001次1次從各外部裝置獲取識別圖像即可，能夠降低頭置式顯示器100與各外部裝置之間的通信量。另外，對於由使用者選擇的一個外部裝置，能夠動態性地對其顯示圖像進行更新。
[0176]A — 5.附加的處理:
[0177]另外，在綜合圖像顯示處理(圖5)或綜合圖像更新處理(圖7)中，也可以附加以下那樣的處理。以下所示的處理可以單獨附加，也可以組合而附加。
[0178]A — 5 — 1.附加的處理1:
[0179]在附加的處理1中，通過「使用者對一個外部裝置注意」而實現使用者從多個外部裝置中選擇一個外部裝置的選擇操作。在本處理中，頭置式顯示器100的CPU140設為進而具備外部裝置特定部的構成。外部裝置特定部使用以下所示的cl?c6的方法的任意一個，對被推定為使用者注意過的外部裝置進行特定，將該外部裝置設為「由使用者選擇的外部裝置」。
[0180](cl)使用指向性的無線電波的方法:
[0181]設為在與頭置式顯示器100的殼體外部的前面相對應的位置、例如與使用者的眉間相對應的位置(換而言之，右光學像顯示部26與左光學像顯示部28之間)具備指向性的無線天線的構成。這樣一來，能夠推定為接收了來自該無線天線的電波的外部裝置為使用者將頭部朝向的外部裝置。外部裝置特定部能夠通過從接收了來自指向性的無線天線的電波的外部裝置接收該情況的消息，對推定為使用者注意過的外部裝置進行特定。
[0182](c2)使用紅外線的方法:
[0183]設為在與頭置式顯示器100的殼體外部的前面相對應的位置具備紅外線的發光部的構成。進而，設為在各外部裝置具備紅外線的感光部的構成。這樣一來，能夠推定為接收了來自頭置式顯示器100的紅外線的外部裝置為使用者將頭部朝向外部裝置。外部裝置特定部能夠通過從接收了紅外線的外部裝置接收該情況的消息，對推定為使用者注意過的外部裝置進行特定。另外，也可以在頭置式顯示器100設置紅外線的感光部，在各外部裝置設置紅外線的發光部。在該情況下，如果在每個外部裝置改變紅外線的發光圖案，則在接收了紅外線的頭置式顯示器100，能夠對推定為使用者注意過的外部裝置進行特定。
[0184](c3)使用位置信息的方法:
[0185]外部裝置特定部使用通過GPS模塊134(圖2)得到的頭置式顯示器100的現在位置信息和從各外部裝置獲取的各外部裝置的位置信息，求出頭置式顯示器100與各外部裝置的位置關係。然後，外部裝置特定部能夠基於通過9軸傳感器66 (圖2)得到的頭置式顯示器100的朝向(使用者的頭部的朝向)，對推定為使用者注意過的外部裝置進行特定。另夕卜，外部裝置特定部能夠使用例如無線通信和/或近距離無線通信獲取各外部裝置的位置信息。
[0186](c4)使用無線標籤的方法:
[0187]圖8B是與附加的處理1的使用無線標籤的方法有關的說明圖。在圖8B中，為了圖示的方便，將圖1的頭置式顯示器100簡略化而圖示，並且僅例示3臺外部裝置。在本方法中，設為在與頭置式顯示器100的殼體外部的前面相對應的位置具備距離計測傳感器61或可見光照相機的構成。進而，設為在各外部裝置內藏能夠進行近距離無線通信的無線標籤RF1?3的構成。在此基礎上，外部裝置特定部對使用者將頭部朝向的一個外部裝置與使用者(距離計測傳感器61)之間的距離L進行計測。該計測能夠使用例如Time - of -Flight法。接下來外部裝置特定部從各外部裝置的無線標籤RF1?3分別獲取預先存儲於無線標籤RF1?3的各外部裝置與頭置式顯示器100之間的距離L1?L3。外部裝置特定部能夠通過對所計測的距離L與所獲取的距離L1?L3進行比較，對推定為使用者注意過的外部裝置進行特定。另外，各外部裝置與頭置式顯示器100之間的距離L1?L3可以預先存儲於頭置式顯示器100的存儲部120，也可以頭置式顯示器100動態地求出頭置式顯示器100與外部裝置之間的距離。另外，在距離L1?L3的發送中，也可以代替近距離無線通信而使用無線通信。進而，為了能夠對同一距離的2個外部裝置進行特定，也可以同時使用通過9軸傳感器66(圖2)得到的頭置式顯示器100的朝向(使用者的頭部的朝向)。
[0188](c5)使用圖像處理的方法:
[0189]設為在與頭置式顯示器100的殼體外部的前面相對應的位置具備可見光照相機的構成。另外，在頭置式顯示器100的存儲部120中，預先存儲有各外部裝置的外觀特徵。外部裝置特定部由可見光照相機拍攝使用者的視野方向的圖像(以後也稱為「外景圖像」。)。外部裝置特定部能夠通過對外景圖像進行圖像解析、與存儲於存儲部120的外部裝置的外觀特徵對照，對推定為使用者注意過的外部裝置進行特定。另外，也可以使用以下列舉的方法。
[0190].外部裝置特定部由可見光照相機獲取頭置式顯示器100的使用者用手指一個外部裝置的狀態的外景圖像。外部裝置特定部對外景圖像進行圖像解析，對位於使用者的手指的延長線上的外部裝置進行特定。
[0191].在圖像顯示部20的殼體內側，設置例如由紅外線收發部構成的瞳孔檢測部。夕卜部裝置特定部基於由可見光照相機拍攝的外景圖像和由瞳孔檢測部檢測的使用者的眼睛的運動，對使用者將視線朝向的外部裝置進行特定。
[0192](c6)使用標記的方法:
[0193]設為在與頭置式顯示器100的殼體外部的前面相對應的位置具備可見光照相機的構成。進而，設為在外部裝置的殼體外部附加有在增強現實感(AR, Augmented Reality)處理中使用的標記的構成。外部裝置特定部由可見光照相機拍攝外景圖像。外部裝置特定部能夠通過外景圖像所含的標記，對推定為使用者注意過的外部裝置進行特定。
[0194]當在綜合圖像顯示處理(圖5)中適用附加的處理1的情況下，也可以僅對通過上述的任意的方法特定的外部裝置，實施步驟S102的聯繫的確立以及以後的處理。另外，也可以僅對通過上述的任意的方法特定的外部裝置，執行步驟S104、S106，執行步驟S108。使用者能夠多次反覆進行使用了上述的任意的方法的外部裝置的特定。這樣一來，生成部142將連接於頭置式顯示器100(圖像顯示裝置)的多個外部裝置(PC300?遊戲設備700)中被推定為至少在過去使用者注意過的外部裝置的識別圖像一覽顯示於縮略圖顯示區域B1?B6 (第1顯示區域)。這樣，使用者能夠通過「注意」而選擇顯示於縮略圖顯示區域B1?B6的外部裝置，所以使用者的便利性提高。另外，能夠抑制在頭置式顯示器100連接有數較多的外部裝置的情況等的、縮略圖顯示區域B1?B6的複雜化。
[0195]另外，當在綜合圖像顯示處理(圖5)中適用附加的處理1的情況下，也可以對預先確定的外部裝置和通過上述的任意的方法特定的外部裝置實施步驟S102以後的處理。另外，也可以對預先確定的外部裝置和通過上述的任意的方法特定的外部裝置執行步驟S104、S106，執行步驟S108。在這裡，所謂「預先確定的外部裝置」，可以由頭置式顯示器100的使用者預先指定，也可以在工廠出廠時等指定，也可以通過預定的條件(例如，使用者與外部裝置之間的距離為預定的閾值以下)而自動地指定。另外，使用者與外部裝置之間的距離能夠通過上述的方法cl?c4求出。這樣也能夠提高使用者的便利性並且抑制縮略圖顯示區域B1?B6的複雜化。
[0196]當在綜合圖像更新處理(圖7)中適用附加的處理1的情況下，也可以代替步驟S200，對通過上述的任意的方法特定的外部裝置，實施步驟S202以後的處理。這樣一來，更新部144(獲取部)從推定為使用者注意過的外部裝置，獲取該外部裝置的顯示圖像，更新部144使用所獲取的顯示圖像而對綜合圖像的活動顯示區域BG (第2顯示區域)進行更新。這樣，使用者能夠通過「注意」而選擇顯示於活動顯示區域BG的外部裝置，所以使用者的便利性提聞。
[0197]另外，也可以與使用者將頭部朝向外部裝置的時間(注意的時間)相應，確定是在綜合圖像顯示處理(圖5)中適用附加的處理1還是在綜合圖像更新處理(圖7)中適用附加的處理1。例如，也可以在時間比預定的閾值短的情況下在綜合圖像顯示處理中適用附加的處理1，在較長的情況下在綜合圖像更新處理中適用附加的處理1。
[0198]另外，上述cl?c6隻不過是一例，外部裝置特定部能夠與使用者的頭部的運動和/或使用者的視線等相應，對使用者注意過的外部裝置進行特定。外部裝置特定部也可以通過將上述cl?c6組合，一次對多個外部裝置進行特定。
[0199]A — 5 — 2.附加的處理2:
[0200]在附加的處理2中，在綜合圖像更新處理(圖7)的步驟S200中，對由使用者選擇的一個外部裝置，附加用於提供增強現實感的標籤。在該處理中，設為頭置式顯示器100的CPU 140進而具備附加提示用信息生成部的構成。
[0201]附加提示用信息生成部在使用者朝向在圖7的步驟S200中選擇的外部裝置的方向的情況下，生成用於識別該外部裝置的附加提示用的信息。所謂附加提示用的信息，是用於對外部裝置附加、刪除、強調、衰減任何信息的信息。具體地說，所謂附加提示用的信息，例如，為包含有通知其為使用者所選擇的外部裝置的文字列的氣球、筆記形狀的標籤、通知其為使用者所選擇的外部裝置的圖標(畫、文字、記號等)、通知其為使用者所選擇的外部裝置的框(為了對外部裝置進行裝飾而配置的框)等。另外，附加提示用信息生成部能夠使用與上述的cl?c6同樣的方法判斷使用者是否朝向在步驟S200中選擇的外部裝置的方向。
[0202]附加提示用信息生成部將所生成的附加提示用的信息向圖像處理部160發送。在接收了綜合圖像的圖像處理部160，進行上述的顯示處理。結果，頭置式顯示器100的使用者在觀察在步驟S200中自己選擇的外部裝置時，能夠與外部裝置一起觀看表示附加提示用的信息(標籤)的虛像。
[0203]另外，頭置式顯示器100的CPU140也可以代替上述的附加提示用信息生成部而具備附加提示用信息選擇部。附加提示用信息選擇部，從例如存儲部120和/或外部的伺服器等中預先準備的多個附加提示用的信息，選擇用於通知其為使用者所選擇的外部裝置的附加提示用的信息，將所選擇的附加提示用的信息向圖像處理部160發送。
[0204]這樣，根據附加的處理2，圖像顯示部20能夠使使用者觀看用於向通過圖7的步驟S200選擇的一個外部裝置附加的附加提示用的信息。結果，使用者能夠區別自己選擇的外部裝置與其他的外部裝置，所以使用者的便利性提高。
[0205]第2實施方式:
[0206]在本發明的第2實施方式中，對作為外部裝置的識別圖像使用與第1實施方式所例示的圖像不同的種類的圖像的構成進行說明。以下，僅對具有與第1實施方式不同的構成以及工作的部分進行說明。另外，在圖中對於與第1實施方式同樣的構成部分附加與在前面說明的第1實施方式同樣的符號，將其詳細的說明省略。
[0207]B - 1.圖像顯示系統的構成:
[0208]第2實施方式的圖像顯示系統，除了代替頭置式顯示器100而具備頭置式顯示器100a的方面，與圖1所示的第1實施方式同樣。
[0209]B - 2.頭置式顯示器的構成:
[0210]圖9是功能性表示第2實施方式的頭置式顯示器100a的構成的框圖。與圖2所示的第1實施方式不同的是代替控制部10而具備控制部10a這一方面。控制部10a代替生成部142而具備生成部142a，代替更新部144而具備更新部144a。生成部142a的綜合圖像顯示處理的內容與圖5所示的第1實施方式不同。更新部144a的綜合圖像更新處理的內容與圖7所示的第1實施方式不同。
[0211]在第2實施方式的綜合圖像顯示處理以及綜合圖像更新處理中，代替在第1實施方式的al?a3中例示的「外部裝置的識別圖像」，將以下的a4、a5的任意一個作為「外部裝置的識別圖像」而使用。
[0212](a4)表示用於識別外部裝置的信息的圖像。所謂用於識別外部裝置的信息，例如，為外部裝置的ID (例如產品編號和/或序列編號)、外部裝置的名字(例如產品的名稱)、外部裝置的狀態(例如產品的屬性)等。
[0213](a5)表示向外部裝置分配的符號的圖像。在這裡，所謂「符號」，例如，為表示外部裝置的存在的圖標、將外部裝置抽象化而表示的圖形或記號等。
[0214]B - 3.綜合圖像顯示處理:
[0215]圖10是表示第2實施方式的綜合圖像顯示處理的順序的時序圖。所謂第2實施方式的綜合圖像顯示處理，與第1實施方式(圖5)同樣，是生成綜合圖像、顯示於頭置式顯示器100a的處理。與第1實施方式不同的方面是作為外部裝置的識別圖像使用在上述a4、a5中列舉的圖像的方面。綜合圖像顯示處理主要由生成部142a執行。
[0216]首先，與在圖5中說明的第1實施方式同樣，使應用起動(步驟S100)，使頭置式顯示器100a與PC300之間的聯繫確立(步驟S102)。
[0217]在步驟S300中，PC300獲取PC300的設備信息。具體地說，PC300獲取以下的b4、b5所示的任意一個信息(也可以不是圖像)。另外，下述b4與上述a4相對應，下述b5與上述a5相對應。
[0218](b4)用於識別PC300的信息。例如，表示PC300的產品編號和/或序列編號等ID、PC300的名稱、PC300的屬性等狀態的信息。
[0219](b5)表示PC300的符號的圖像。例如，PC300的圖標圖像。
[0220]在步驟S302中，PC300將所獲取的設備信息向頭置式顯示器100a發送。頭置式顯示器100a的生成部142a經由無線通信部132獲取該設備信息。此時，生成部142a與無線通信部132作為「獲取部」而起作用。
[0221]在步驟S303中，生成部142a生成表示所獲取的設備信息的圖像。生成部142a將所生成的圖像作為「外部裝置的識別圖像」而存儲於識別圖像存儲部124。另外，如上述b5，在從PC300接收的設備信息為圖像的形式的情況下，表示設備信息的圖像的生成能夠省略。
[0222]在步驟S304中，生成部142a將頭置式顯示器100a與PC300之間的聯繫切斷。這樣，通過將不需要的聯繫立即切斷，能夠使通信量以及消耗電力降低。
[0223]在步驟S306中，生成部142a在其與家電400之間實施與步驟S102以及步驟S300?S304同樣的處理。同樣，生成部142a在步驟S308中在其與AV設備500之間、在步驟S308中在其與便攜終端600之間、在步驟S310中在其與遊戲設備700之間分別實施同樣的處理。結果，在識別圖像存儲部124中，存儲有連接於頭置式顯示器100a的所有的外部裝置的識別圖像。
[0224]在步驟S314中，生成部142a獲取頭置式顯示器100a的設備信息。具體地說，獲取與頭置式顯示器100a有關的、上述b4、b5所示的任意一個信息。
[0225]在步驟S316中，生成部142a生成表示所獲取的設備信息的圖像，作為「圖像顯示裝置的識別圖像」而存儲於識別圖像存儲部124。步驟S314、S316的結果，在識別圖像存儲部124中，存儲有頭置式顯示器100a自己的識別圖像。
[0226]以後，與在圖5中說明的第1實施方式同樣，生成部142a對存儲於識別圖像存儲部124的多個識別圖像進行分類(步驟S124)，生成綜合圖像(步驟S126)，並顯示綜合圖像(步驟S128)。詳細如在圖5中說明那樣。
[0227]圖11是表示在第2實施方式的綜合圖像顯示處理的步驟S126中生成的綜合圖像的一例的說明圖。在綜合圖像GI的縮略圖顯示區域B1，作為頭置式顯示器100的識別圖像，配置有表示頭置式顯示器100的產品編號的圖像J1。同樣，在縮略圖顯示區域B2，作為PC300的識別圖像，配置有PC300的圖標圖像J2 ;在縮略圖顯示區域B3，作為家電400的識別圖像，配置有表示家電400的產品的名稱的圖像J3 ;在縮略圖顯示區域B4，作為AV設備500的識別圖像，配置有AV設備500的圖標圖像J4 ;在縮略圖顯示區域B5，作為便攜終端600的識別圖像，配置有表示便攜終端600的產品編號的圖像J5 ;在縮略圖顯示區域B6，作為遊戲設備700的識別圖像，配置有表示遊戲設備700的產品編號的圖像J6。
[0228]B - 4.綜合圖像更新處理:
[0229]圖12是表示第2實施方式中的綜合圖像更新處理的順序的時序圖。所謂第2實施方式的綜合圖像更新處理，與第1實施方式(圖7)同樣，為動態地顯示綜合圖像的第2顯示區域的處理。與第1實施方式不同的方面，是作為外部裝置的識別圖像使用上述a4、a5所列舉的圖像的方面，和利用為了對第2顯示區域進行更新而從外部裝置獲取的顯示圖像、對識別圖像存儲部124內的外部裝置的識別圖像進行更新的方面。綜合圖像更新處理主要由更新部144a執行。
[0230]首先，與在圖7中說明的第1實施方式同樣，獲取從多個外部裝置中選擇一個外部裝置的選擇操作(步驟S200)，從所選擇的一個外部裝置獲取顯示畫面的圖像(幀圖像)(步驟 S202 ?S206)。
[0231]在步驟S400中，更新部144a將所獲取的幀圖像設為「外部裝置的識別圖像」，存儲於識別圖像存儲部124。此時，更新部144a將在綜合圖像顯示處理(圖10)的步驟S303中已經存儲的同一個外部裝置的識別圖像覆蓋。另外，在步驟S400中，也可以對所獲取的幀圖像進行縮小處理後存儲於識別圖像存儲部124。
[0232]在步驟S402中，更新部144a獲取存儲於識別圖像存儲部124的多個識別圖像，根據預定的條件對所獲取的識別圖像進行分類。詳細與綜合圖像顯示處理(圖5)的步驟S124同樣。
[0233]在步驟S404中，更新部144a使用分類後的識別圖像對綜合圖像的縮略圖顯示區域B1?B6 (第1顯示區域)進行更新。詳細與綜合圖像顯示處理(圖5)的步驟S126同樣。
[0234]在步驟S408中，更新部144a使用在步驟S206中獲取的幀圖像，對在步驟S404中更新了的綜合圖像中的活動顯示區域BG(第2顯示區域)進行更新。
[0235]在步驟S210中，更新部144a使更新後的綜合圖像顯示。詳細與綜合圖像顯示處理(圖5)的步驟S128同樣。
[0236]在步驟S410中，更新部144a在直到獲取與在步驟S200中獲取的外部裝置不同的其他的外部裝置的選擇操作為止的期間，對所選擇的外部裝置(PC300)，反覆進行步驟S202、S204、S206、S408、S210的處理。另一方面，在獲取了其他的外部裝置的選擇操作的情況下，更新部144a對其他的外部裝置執行步驟S202?S410的一連串的處理。
[0237]圖13是表示在頭置式顯示器100a中顯示有將第1顯示區域與第2顯示區域更新了的綜合圖像的樣子的說明圖。如圖13所示，頭置式顯示器100a的使用者在視野VR中，能夠觀看綜合圖像GI作為虛像VI，所述綜合圖像GI包含連接於頭置式顯示器100a的多個外部裝置的多個識別圖像和從多個外部裝置中選擇的一個外部裝置的顯示圖像。在圖13的例子中，所謂多個外部裝置的多個識別圖像，為在圖11中說明的頭置式顯示器100a的識別圖像Jl、PC300的識別圖像J2、家電400的識別圖像J3、AV設備500的識別圖像J4、便攜終端600的識別圖像J5和遊戲設備700的識別圖像J6。在這裡，對於PC300的識別圖像J2，顯示有綜合圖像更新處理(圖12)的步驟S400中的更新後的識別圖像。另外，在圖13的例子中，所謂所選擇的一個外部裝置的顯示圖像，即為作為PC300顯示的圖像的顯示圖像頂。另外，與圖8A同樣，在圖14中，對於本來透過虛像VI的背景也將圖示省略。
[0238]如以上所述，根據第2實施方式的綜合圖像顯示處理(圖10)以及綜合圖像更新處理(圖12)，能夠得到與第1實施方式同樣的效果。進而，在第2實施方式的綜合圖像顯示處理以及綜合圖像更新處理中，作為外部裝置的識別圖像，能夠使用與在第1實施方式中例示的圖像不同的種類的圖像。
[0239]B - 5.附加的處理:
[0240]在第2實施方式中，也能夠適用上述的附加的處理1、2。
[0241]C.第3實施方式:
[0242]在本發明的第3實施方式中，對於將結合圖像的縮略圖顯示區域B1?B6(第1顯示區域)設為假想性的顯示區域的構成進行說明。以下，僅對具有與第1實施方式不同的構成以及工作的部分進行說明。另外，在圖中對於與第1實施方式同樣的構成部分附加與在前面說明的第1實施方式同樣的符號，將其詳細的說明省略。
[0243]C - 1.圖像顯示系統的構成:
[0244]第3實施方式的圖像顯示系統除了代替頭置式顯示器100而具備頭置式顯示器100b的方面，與圖1所不的第1實施方式同樣。
[0245]C - 2.頭置式顯示器的構成:
[0246]圖14是功能性表示第3實施方式的頭置式顯示器100b的構成的框圖。與圖2所示的第1實施方式的不同是代替控制部10而具備控制部10b的方面。控制部10b分別代替區域信息122而具備區域信息122b，代替圖像處理部160而具備圖像處理部160b。
[0247]圖15是表示第3實施方式中的區域信息122b的一例的說明圖。第3實施方式的區域信息122b與圖3所示的第1實施方式同樣，包含6個縮略圖顯示區域B1?B6 (第1顯示區域)和活動顯示區域BG(第2顯示區域)。各區域的用途如在圖3中說明那樣。縮略圖顯示區域B1?B3與縮略圖顯示區域B4?B6夾著活動顯示區域BG而配置於水平方向的左右的外側。活動顯示區域BG的縱橫比與能夠由顯示驅動部生成圖像光的區域的縱橫t匕、換而言之頭置式顯示器100b的顯示元件(圖2:右IXD241、左IXD242)的縱橫比相同。
[0248]在圖15的例子中，縮略圖顯示區域B1?B3分別在鉛直方向上相鄰地配置於區域122b的左側的外側。縮略圖顯示區域B4?B6分別在鉛直方向上相鄰地配置於區域122的右側的外側。縮略圖顯示區域B1?B6分別為相同大小的區域。在圖15中，對縮略圖顯示區域B1?B6附加點狀的陰影，對活動顯示區域BG附加斜線陰影。
[0249]另外，圖15所示的縮略圖顯示區域B1?B6的配置以及大小是一例，能夠任意地確定。縮略圖顯示區域B1?B6隻要配置於活動顯示區域BG(第2顯示區域)的外側便足夠。因此，例如，縮略圖顯示區域B1?B6也可以配置於活動顯示區域BG的上側的外側和/或下側的外側。另外，縮略圖顯示區域B1?B6也可以配置成包圍活動顯示區域BG的外側的四方。另外，縮略圖顯示區域B1?B6也可以各區域為不同的大小。進而，縮略圖顯示區域B1?B6也可以各區域的至少一部分重合。
[0250]C- 3.綜合圖像顯示處理:
[0251]第3實施方式中的綜合圖像顯示處理的順序除了以下列舉的順序dl、d2，與圖5所不的第1實施方式同樣。
[0252](dl)在步驟S126中，生成部142使用在圖15中說明的區域信息122b，生成綜合圖像。
[0253](d2)在步驟S128中，圖像處理部160b僅將從生成部142接收的綜合圖像中的與活動顯示區域BG(第2顯示區域，在圖15中施加了斜線的陰影的區域)相當的部分的圖像顯示於頭置式顯示器100b。而且，圖像處理部160b將從使用者獲取了預定的操作設為觸發，將與縮略圖顯示區域B1?B6 (第1顯示區域、在圖15中施加了點狀的陰影的區域)相當的部分的圖像顯示於頭置式顯示器100b。所謂預定的操作，能夠使用例如使用者由頭置式顯示器100b所具備的輸入設備(例如，觸摸板、十字鍵、腳踏開關、手勢檢測、視線檢測、觸摸檢測、話筒等)進行的操作等。
[0254]圖16是用於說明圖像處理部160b的工作的一例的說明圖。例如，圖像處理部160b將使用者觸摸頭置式顯示器100b的左保持部23設為觸發，如圖所示，使顯示於頭置式顯示器100b的綜合圖像的範圍如圖16那樣向左側滑動。這樣一來，圖像處理部160b能夠使使用者觀看第1顯示區域(的一部分)與第2顯示區域(的一部分)。同樣，圖像處理部160b將使用者觸摸頭置式顯示器100b的右保持部21設為觸發，使顯示於頭置式顯示器100b的綜合圖像的範圍向右側滑動。另外，當在區域信息122b中縮略圖顯示區域B1?B6 (第1顯示區域)被設置於活動顯示區域BG(第2顯示區域)的上下的情況下，能夠將使用者觸摸頭置式顯示器100b的殼體的上下設為觸發，進行同樣的處理。
[0255]C - 4.綜合圖像更新處理:
[0256]第3實施方式中的綜合圖像更新處理的順序除了步驟S210中的圖像處理部160b的順序(與上述d2同樣)，與圖7所示的第1實施方式同樣。
[0257]如以上所述，根據第3實施方式的綜合圖像顯示處理(圖5)以及綜合圖像更新處理(圖7)，能夠得到與第1實施方式同樣的效果。進而，根據第3實施方式的綜合圖像顯示處理以及綜合圖像更新處理，圖像顯示部20，在沒有由使用者進行的操作的情況下，能夠使使用者觀看與綜合圖像的活動顯示區域BG(第2顯示區域)相當的部分，在有由使用者進行的操作的情況下，能夠使使用者觀看與綜合圖像的縮略圖顯示區域B1?B6 (第1顯示區域)相當的部分。結果，根據該形態的頭置式顯示器100b (圖像顯示裝置)，能夠在通常畫面(活動顯示區域BG、第2顯示區域)的外側設置假想畫面(縮略圖顯示區域B1?B6、第1顯示區域)，通過由使用者進行的操作，切換通常畫面與假想畫面的顯示。結果，能夠提高使用者的便利性。
[0258]C — 5.附加的處理:
[0259]在第3實施方式中，也能夠適用上述的附加的處理1、2。
[0260]D.第4實施方式:
[0261]在本發明的第4實施方式中，對於通過由其他的信息處理裝置(以後也稱為「月艮務器」。)實施頭置式顯示器所實施的處理而謀求處理負荷分散的構成進行說明。以下，僅對具有與第1實施方式不同的構成以及工作的部分進行說明。另外，在圖中對於與第1實施方式同樣的構成部分附加與在前面說明的第1實施方式同樣的符號，將其詳細的說明省略。
[0262]D - 1.圖像顯示系統的構成:
[0263]圖17是表示第4實施方式的圖像顯示系統1000c的概略構成的說明圖。與圖1所示的第1實施方式的不同，是代替頭置式顯示器100而具備頭置式顯示器100c的方面和具備伺服器900的方面。在第4實施方式中，伺服器900生成將外部裝置中的顯示綜合的「綜合圖像」，顯示於頭置式顯示器100c。
[0264]頭置式顯示器100c能夠無線通信或有線通信地與連接伺服器900。同樣，各外部裝置(PC300?遊戲設備700)能夠無線通信或有線通信地與伺服器900連接。另外，在頭置式顯示器100c與伺服器900之間或伺服器900與各外部裝置之間，也可以設有例如路由器和/或接入點等網絡裝置、各種適配器等。
[0265]D-2.頭置式顯示器以及伺服器的構成:
[0266]第4實施方式中的頭置式顯示器100c，除了具備區域信息122、識別圖像存儲部124、生成部142、更新部144的方面，與圖2所示的第1實施方式同樣。
[0267]圖18是功能性表示伺服器900的構成的框圖。伺服器900包括CPU910、R0M920、RAM930、通信接口(I/F)940和存儲部950，各部分通過未圖示的總線相互連接。
[0268]CPU910通過在RAM930中展開並執行存儲於R0M920和/或存儲部950的電腦程式，控制伺服器900的各部分。此外，CPU910也作為代理生成部912、代理更新部914、發送接收部916而起作用。代理生成部912執行後述的綜合圖像顯示處理，生成綜合圖像。代理生成部實現作為生成包含第1顯示區域與第2顯示區域的綜合圖像的「代理生成部」的功能。代理更新部914執行後述的綜合圖像更新處理，對綜合圖像進行更新。發送接收部916在綜合圖像顯示處理以及綜合圖像更新處理中，與頭置式顯示器100c之間發送接收要求和/或綜合圖像。發送接收部916實現作為將綜合圖像向頭置式顯示器發送的「發送部」的功能。
[0269]通信接口 940包含無線通信接口、有線通信接口。無線通信接口包含未圖示的送接收電路，進行經由天線接收的電波的解調與數據的生成以及經由天線發送的電波的生成與調製。有線通信接口經由有線線纜而與其他的裝置連接。
[0270]存儲部950由ROM、RAM、DRAM、硬碟等構成。存儲部950包含區域信息952、識別圖像存儲部954。區域信息952的詳細與圖3所示的第1實施方式同樣。識別圖像存儲部954是用於預先存儲在綜合圖像顯示處理中收集的外部裝置的識別圖像的存儲部。
[0271]D - 3.綜合圖像顯示處理:
[0272]第4實施方式中的綜合圖像顯示處理的順序與圖5所示的第1實施方式大致同樣。但是，分別將圖5的說明中的「頭置式顯示器100」更換為「伺服器900」，將「生成部142」更換為「代理生成部912」，將「存儲部120」更換為「存儲部950」，將「區域信息122」更換為「區域信息952」，將「識別圖像存儲部124」更換為「識別圖像存儲部954」。此外，進行以下的更換。
[0273].步驟S118:伺服器900的代理生成部912經由發送接收部916獲取頭置式顯示器100c的顯示畫面的圖像。
[0274]?步驟S128:伺服器900的代理生成部912經由發送接收部916將在步驟S126中生成的綜合圖像向頭置式顯示器100c發送。在接收了綜合圖像的頭置式顯示器100c，通過圖像處理部160進行在圖2中說明的顯示處理。
[0275]D - 4.綜合圖像更新處理:
[0276]第4實施方式中的綜合圖像更新處理的順序與圖7所示的第1實施方式大致同樣。但是，但是，分別將圖5的說明中的「頭置式顯示器100」更換為「伺服器900」，將「更新部144」更換為「代理更新部914」，將「存儲部120」更換為「存儲部950」，將「區域信息122」更換為「區域信息952」，將「識別圖像存儲部124」更換為「識別圖像存儲部954」。此夕卜，進行以下的更換。
[0277].步驟S200:伺服器900的代理更新部914經由發送接收部916獲取頭置式顯示器100c的使用者所選擇的一個外部裝置的信息。在這裡，所謂一個外部裝置的信息，指的是能夠對該外部裝置進行特定的信息(例如裝置名和/或網絡地址等)。
[0278].步驟S210:伺服器900的代理更新部914經由發送接收部916將步驟S208中的更新後的綜合圖像向頭置式顯示器100c發送。在接收了綜合圖像的頭置式顯示器100c中，通過圖像處理部160進行在圖2中說明的顯示處理。
[0279]如以上所述，根據第4實施方式的綜合圖像顯示處理以及綜合圖像更新處理，能夠得到與第1實施方式同樣的效果。進而根據第4實施方式，綜合圖像顯示處理與綜合圖像更新處理是伺服器900執行的，所以能夠降低頭置式顯示器100c中的處理負荷。另外，第4實施方式作為第1實施方式的變形而進行說明，但利用伺服器900的第4實施方式的形態也能夠適用於第2、3實施方式。另外，伺服器900也可以進而實施向頭置式顯示器100c發送的綜合圖像的壓縮和/或解析度的轉換。這樣一來，不但能夠進一步減輕頭置式顯示器100c中的處理負荷，還能夠減輕伺服器900與頭置式顯示器100c之間的無線通信量。
[0280]D - 5.附加的處理:
[0281]在第4實施方式中，也能夠適用上述的附加的處理1、2。
[0282]E.變形例:
[0283]在上述實施方式中，也可以將通過硬體實現的構成的一部分置換為軟體，相反也可以將通過軟體實現的構成的一部分置換為硬體。另外，也能夠進行以下那樣的變形。
[0284].變形例1:
[0285]在上述實施方式中，對圖像顯示系統的構成進行了例示。但是，圖像顯示系統的構成在不脫離本發明的要旨的範圍內能夠任意地確定，例如，能夠進行構成圖像顯示系統的各裝置的追加.刪除.轉換等。另外，能夠進行構成圖像顯示系統的裝置的網絡構成的變更。
[0286]例如，作為圖像顯示裝置，能夠代替頭置式顯示器而採用投影機、監視器、電視機坐寸。
[0287]例如，作為上述實施方式中的外部裝置的1個，也可以使用經由網際網路INT的雲伺服器。在該情況下也一樣，生成部以及更新部通過進行與上述第1?3實施方式同樣的處理，能夠得到與上述第1?3實施方式同樣的效果。
[0288].變形例2:
[0289]在上述實施方式中，對頭置式顯示器的構成進行了例示。但是，頭置式顯示器的構成在不脫離本發明的要旨的範圍內能夠任意地確定，例如，能夠進行各構成部的追加.刪除.轉換等。
[0290]與上述實施方式中的控制部和圖像顯示部相對的構成要素的分配只是一例，能夠採用各種形態。例如，也可以設為以下那樣的形態。(i)在控制部搭載CPU和/或存儲器等處理功能、在圖像顯示部僅搭載顯示功能的形態；(ii)在控制部與圖像顯示部雙方搭載CPU和/或存儲器等處理功能的形態；(iii)將控制部與圖像顯示部一體化的形態(例如，在圖像顯示部包含控制部、作為眼鏡型的可穿戴計算機而起作用的形態)；(iv)代替控制部而使用智慧型手機和/或便攜型遊戲機的形態；(v)通過將控制部與圖像顯示部設為能夠無線通信並且無線供電的構成而廢棄連接部(線)的形態；(vi)從控制部廢棄觸摸板、在圖像顯示部設置觸摸板的形態。
[0291]在上述實施方式中，為了說明的方便，設為控制部具備發送部、圖像顯示部具備接收部。但是，上述實施方式的發送部以及接收部能夠都具備能夠雙方向通信的功能、作為發送接收部而起作用。另外，例如，圖5所示的控制部設為經由有線的信號傳送路而與圖像顯示部連接。但是，控制部與圖像顯示部也可以通過經由無線LAN和/或紅外線通信和/或Blu etooth(藍牙)等無線的信號傳送路的連接而連接。
[0292]例如，圖2所示的控制部、圖像顯示部的構成能夠任意地變更。具體地說，例如，控制部除了上述的各種輸入設備(觸摸板、十字鍵、腳踏開關、手勢檢測、視線檢測、話筒)，還能夠具備各種輸入設備(例如，操作用杆、鍵盤、滑鼠等)。另外，在上述實施方式中，作為電源使用二次電池，但作為電源並不限定於二次電池，能夠使用各種電池。例如，也可以使用一次電池、和/或燃料電池、太陽能電池、熱電池等。
[0293]例如，頭置式顯示器設為雙眼類型的透射型頭置式顯示器，但也可以設為單眼類型的頭置式顯示器。另外，也可以構成為在使用者佩戴了頭置式顯示器的狀態下將外景的透射遮擋的非透射型頭置式顯示器。在上述實施方式中，將圖像顯示部設為眼鏡那樣佩戴的頭置式顯示器，但也可以設為例如採用帽子那樣佩戴的類型的圖像顯示部等其他的形狀的圖像顯示部的頭置式顯示器。另外，耳機可以採用掛耳型和/或頭帶型，也可以省略。進而，例如，也可以構成為搭載於汽車和/或飛機等車輛的抬頭顯示器(H UD,Head-UpDisplay)。此外，也可以構成為內藏於頭盔等身體防護具的頭置式顯示器。另外，也可以構成為手持顯不器(Hand held display)。
[0294]圖19是表示變形例中的頭置式顯示器的外觀的構成的說明圖。在圖19(A)的例子中，圖像顯示部20x代替右光學像顯示部26而具備右光學像顯示部26x，代替左光學像顯示部28而具備左光學像顯示部28x。右光學像顯示部26x以及左光學像顯示部28x形成得比第1實施方式的光學構件小，被配置於頭置式顯示器的佩戴時的使用者的右眼以及左眼的斜上。在圖19(B)的例子中，圖像顯示部20y代替右光學像顯示部26而具備右光學像顯示部26y，代替左光學像顯示部28而具備左光學像顯示部28y。右光學像顯示部26y以及左光學像顯示部28y形成得比第1實施方式的光學構件小，被配置於頭置式顯示器的佩戴時的使用者的右眼以及左眼的斜下。這樣，光學像顯示部配置於使用者的眼睛的附近便足夠。另外，形成光學像顯示部的光學構件的大小也是任意的，也能夠設為光學像顯示部僅覆蓋使用者的眼睛的一部分的形態、換而言之光學像顯示部不完全覆蓋使用者的眼睛的形態的頭置式顯示器而實現。
[0295]例如，在上述實施方式中，顯示驅動部設為使用背光、背光控制部、LCD、LCD控制部和投射光學系而構成。但是，上述的形態只不過是例示。顯示驅動部也可以與這些構成部一起或代替這些構成部，具備用於實現其他的方式的構成部。例如，顯示驅動部也可以設為具備有機EL(有機電致發光,Organic Electro-Luminescence)的顯示器、有機EL控制部、投射光學系的構成。另外，例如，顯示驅動部也能夠代替LCD而使用數字微型反射鏡設備等。另外，例如，也能夠對雷射視網膜投影型的頭部佩戴型顯示裝置適用本發明。
[0296]例如，記載了生成部、通知部、圖像處理部、顯示控制部、音聲處理部等各功能部通過CPU在RAM中展開並執行存儲於ROM和/或硬碟的電腦程式而實現。但是，這些功能部也可以使用為了實現該功能而設計的ASIC(Applicat1n Specific Integrated Circuit:面向特定用途的集成電路)而構成。
[0297].變形例3:
[0298]在上述實施方式中，表示了綜合圖像顯示處理的一例。但是，綜合圖像顯示處理的順序只不過是一例，能夠進行各種變形。例如，也可以將一部分步驟省略，也可以追加進而其他的步驟。另外，也可以變更所執行的步驟的順序。
[0299]例如，生成部也可以與作為識別圖像的獲取源的外部裝置與頭置式顯示器之間的距離相應，動態地變更縮略圖顯示區域B1?B6的大小。這樣一來，觀看了綜合圖像的使用者能夠通過縮略圖顯示區域B1?B6 (第1顯示區域)中的各圖像的大小，得知頭置式顯示器(圖像顯示裝置)與多個外部裝置之間的距離。
[0300]在上述實施方式中，生成部對於縮略圖顯示區域B1?B6(第1顯示區域)不進行更新。但是，生成部也可以通過預定的觸發的產生而對縮略圖顯示區域B1?B6 (第1顯示區域)進行更新。預定的觸發能夠任意地確定，例如，能夠設為由使用者進行的要求操作的產生、和/或使用者的預定的工作的產生、和/或從上次的綜合圖像生成經過預定時間、和/或從頭置式顯示器的0S和/或其他的應用產生內部性的要求等。這樣一來，生成部能夠限定於產生了預定的觸發的情況下對所述第1顯示區域進行更新。因此，能夠降低頭置式顯示器(圖像顯示裝置)與外部裝置之間的通信量。
[0301]例如，在上述實施方式中說明的識別圖像以及綜合圖像假設為2維地表達的圖像。但是，圖像處理部也可以通過將右眼用圖像數據與左眼用圖像數據設為不同的數據，而3維地表達識別圖像以及綜合圖像。在該情況下，例如，也可以與使用者與外部裝置之間的距離相應，對每個識別圖像附加視差。具體地說，也可以對使用者與外部裝置之間的距離較大的外部裝置的識別圖像，附加觀看為較遠那樣的視差，對使用者與外部裝置之間的距離較小的外部裝置的識別圖像，附加觀看為較近那樣的視差。
[0302]在上述實施方式中，設為在控制部生成包含第1顯示區域與第2顯示區域的綜合圖像並在圖像顯示部上顯示的構成。但是，綜合圖像只要通過圖像顯示部顯示便足夠，不必一定在控制部「生成」綜合圖像。具體地說，例如，也可以在控制部單獨地生成表示第1顯示區域的圖像和表示第2顯示區域的圖像。然後，將所生成的表示第1顯示區域的圖像作為例如右眼用圖像數據而向圖像處理部發送。同樣，將所生成的表示第2顯示區域的圖像作為例如左眼用圖像數據而向圖像處理部發送。然後，通過在圖像顯示部合併顯示這些單獨的圖像，而顯示綜合圖像。
[0303]例如，生成部在存在超過縮略圖顯示區域B1?B6的個數的外部裝置的情況下、和/或指定有超過縮略圖顯示區域的個數的外部裝置的情況下，也可以以預定的基準，對顯示於縮略圖顯示區域的外部裝置(識別圖像)進行選擇。所謂預定的基準，例如，能夠使用由使用者進行選擇的頻度、和/或在縮略圖顯示區域追加有識別圖像的時間日期等。
[0304]當在綜合圖像顯示處理中適用附加的處理1的情況下，生成部也可以在存儲部存儲有至少在過去使用者注意過的外部裝置的歷史記錄。在該情況下，生成部也可以使用所存儲的歷史記錄，對由使用者進行的外部裝置的選擇進行輔助。另外，生成部也可以將存儲於歷史記錄的外部裝置的識別圖像自動地配置於縮略圖顯示區域B1?B6。
[0305]在第4實施方式的綜合圖像顯示處理中，伺服器也可以預先獲取頭置式顯示器的顯示畫面的圖像、和/或外部裝置的顯示畫面的圖像。這樣一來，能夠削減伺服器逐次獲取這些圖像的時間，所以能夠迅速地顯示綜合圖像。
[0306].變形例4:
[0307]在上述實施方式中，表示綜合圖像更新處理的一例。但是，綜合圖像更新處理的順序只不過是一例，能夠進行各種變形。例如，也可以將一部分步驟省略，也可以追加進而其他的步驟。另外，也可以變更所執行的步驟的順序。
[0308]例如，在步驟S200中，也可以代替一個外部裝置的選擇操作的獲取，而獲取由頭置式顯示器的使用者選擇的一個縮略圖顯示區域(第1顯示區域)的起始坐標、或由使用者選擇的一個縮略圖顯示區域(第1顯示區域)的識別符的任意一個。這樣也能夠得到與上述實施方式同樣的效果。
[0309]例如，在步驟S200中，也可以將使用者能夠選擇的外部裝置限定於連接於頭置式顯示器的多個外部裝置中滿足預定的條件的一部分外部裝置。在預定的條件中，例如，能夠使用外部裝置的識別圖像的信息量。根據該條件，識別圖像的信息量較多的PC和/或AV設備能夠成為步驟S200的選擇對象，但識別圖像的信息量較少的家電不成為步驟S200的選擇對象。
[0310]例如，綜合圖像更新處理也可以省略。另外，在該情況下，也可以經由使用者對顯示於縮略圖顯示區域(第1顯示區域)的識別圖像進行的操作(使用了視線和/或指尖的操作)，操作外部裝置。
[0311]?變形例5:
[0312]在上述實施方式中，表示了區域信息的一例。上述區域信息只不過是一例，能夠進行各種變更。例如，能夠進行構成要素的追加、刪除、變更。
[0313]圖20是表示變形例中的區域信息122x的一例的說明圖。區域信息122x與圖3的區域信息122同樣，具有長方形狀的區域(以後，也稱為「區域122」。)，該區域具有與頭置式顯示器的顯示元件的縱橫比相同的縱橫比。區域122包含8個縮略圖顯示區域B1?B8和活動顯示區域BG。活動顯示區域BG，將區域122在鉛直方向以及水平方向上等分，配置於它們的左上端部。8個縮略圖顯示區域B1?B8被順序配置於將區域122在鉛直方向以及水平方向上等分的剩餘的部分。使用這樣的區域信息122x也能夠得到與上述的各實施方式同樣的效果。
[0314]例如，區域信息設為包含1個活動顯示區域，但也可以包含多個(2個以上)活動顯示區域。例如，在圖3所示的區域信息122，也可以將區域122在水平方向上2等分，將上側設為第1活動顯示區域，將下側設為第2活動顯示區域。同樣，也可以將區域122在垂直方向上2等分，將左側設為第1活動顯示區域，將右側設為第2活動顯示區域。在該情況下，例如，在綜合圖像顯示處理中，也可以將使用者最初選擇的一個外部裝置的顯示圖像配置於第1活動顯示區域、將接下來選擇的一個外部裝置的顯示圖像配置於第2活動顯示區域。
[0315]例如，在存儲部，也可以存儲有多個不同的區域信息。在該情況下，也可以通過頭置式顯示器的使用者的喜好(設定)、使用者的視線的運動、使用者的頭部的運動、周圍的亮度等任意的條件，從多個不同的區域信息選擇在綜合圖像的生成中使用的一個區域信肩、Ο
[0316]?變形例6:
[0317]本發明並不限定於上述的實施方式和/或實施例、變形例，在不脫離其宗旨的範圍內能夠以各種構成實現。例如，與
【發明內容】
的欄所記載的各形態中的技術特徵相對應的實施方式、實施例、變形例中的技術特徵，為了解決上述的課題的一部分或全部、或者為了達成上述的效果的一部分或全部，能夠適當進行替換和/或組合。另外，其技術特徵只要不是作為本說明書中所必須的而說明，能夠適當刪除。
【權利要求】
1.一種圖像顯示裝置，其特徵在於，具備: 生成部，其生成包含第1顯示區域與第2顯示區域的綜合圖像，所述第1顯示區域一覽顯示用於使連接於所述圖像顯示裝置的多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和 圖像顯示部，其使所述圖像顯示裝置的使用者觀看所述綜合圖像。
2.如權利要求1所記載的圖像顯示裝置，其特徵在於，進而具備: 獲取部，其從所述一個外部裝置獲取所述顯示圖像；和 更新部，其使用所述所獲取的顯示圖像，對所述綜合圖像的所述第2顯示區域進行更新。
3.如權利要求1或權利要求2所記載的圖像顯示裝置，其特徵在於: 在所述識別圖像中，包含所述外部裝置的一個時間點的顯示圖像、表示用於識別所述外部裝置的信息的圖像和表示向所述外部裝置分配的符號的圖像中的至少任意一個。
4.如權利要求1至權利要求3中的任意一項所記載的圖像顯示裝置，其特徵在於: 進而具備外部裝置特定部，其從所述多個外部裝置中對所述使用者注意過的外部裝置進行特定； 所述生成部將所述多個外部裝置中的至少在過去由所述外部裝置特定部特定的所述外部裝置的所述識別圖像顯示於所述第1顯示區域。
5.如權利要求2或從屬於權利要求2的權利要求3至權利要求4中的任意一項所記載的圖像顯示裝置，其特徵在於: 進而具備外部裝置特定部，其從所述多個外部裝置中對所述使用者注意過的外部裝置進行特定； 所述獲取部從由所述外部裝置特定部特定的所述外部裝置獲取所述顯示圖像。
6.如權利要求1至權利要求5中的任意一項所記載的圖像顯示裝置，其特徵在於: 進而具備距離獲取部，其分別獲取所述圖像顯示裝置與所述多個外部裝置之間的距離； 所述生成部與所述所獲取的各距離相應，確定所述第1顯示區域中的所述多個識別圖像的顯示順序和所述第1顯示區域中的所述識別圖像的大小中的至少一方。
7.如權利要求1至權利要求6中的任意一項所記載的圖像顯示裝置，其特徵在於: 所述生成部對所述第1顯示區域進行更新。
8.如權利要求1至權利要求7中的任意一項所記載的圖像顯示裝置，其特徵在於: 所述圖像顯示部進而具備生成表示所述綜合圖像的圖像光的顯示驅動部，通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述綜合圖像。
9.如權利要求8所記載的圖像顯示裝置，其特徵在於: 所述生成部將所述第2顯示區域的縱橫比設為能夠通過所述顯示驅動部生成所述圖像光的區域的縱橫比，生成在所述第2顯示區域的外側配置了所述第1顯示區域的所述綜合圖像； 所述圖像顯示部， 在沒有由所述使用者進行的操作的情況下，對所述顯示驅動部，使其生成與所述綜合圖像的所述第2顯示區域相當的部分的所述圖像光； 在具有由所述使用者進行的操作的情況下，對所述顯示驅動部，使其生成至少與所述綜合圖像的所述第1顯示區域相當的部分的所述圖像光。
10.如權利要求8或權利要求9所記載的圖像顯示裝置，其特徵在於: 所述圖像顯示部，使所述顯示驅動部生成表示用於向所述一個外部裝置附加的附加提示用的信息即用於向所述使用者提供增強現實感的附加提示用的信息的圖像光，通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述附加提示用的信息。
11.一種控制圖像顯示裝置的方法，其特徵在於，具備: (a)生成包含第1顯示區域與第2顯示區域的綜合圖像的工序，所述第1顯示區域一覽顯示用於使連接於所述圖像顯示裝置的多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示； (b)使所述圖像顯示裝置的使用者觀看所述綜合圖像的工序。
12.—種電腦程式，其特徵在於，用於在計算機中實現下述的功能: 生成包含第1顯示區域與第2顯示區域的綜合圖像的功能，所述第1顯示區域一覽顯示用於使連接於所述圖像顯示裝置的多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和 使所述圖像顯示裝置的使用者觀看所述綜合圖像的功能。
13.一種圖像顯示系統，其特徵在於: 具備: 信息處理裝置； 連接於所述信息處理裝置的圖像顯示裝置；和 連接於所述信息處理裝置的多個外部裝置； 所述信息處理裝置具備: 代理生成部，其生成包含第1顯示區域與第2顯示區域的綜合圖像，所述第1顯示區域一覽顯示用於所述多個外部裝置相互識別的多個識別圖像中的至少一部分所述識別圖像，所述第2顯示區域對作為從所述多個外部裝置中選擇的一個外部裝置所顯示的圖像的顯示圖像進行顯示；和 發送部，其將所述綜合圖像向所述信息處理裝置發送； 所述圖像顯示裝置具備圖像顯示部，其使所述圖像顯示裝置的使用者觀看從所述信息處理裝置接收的所述綜合圖像。
【文檔編號】H04N21/472GK104469464SQ201410498313
【公開日】2015年3月25日 申請日期:2014年9月25日 優先權日:2013年9月25日
【發明者】木村總志 申請人:精工愛普生株式會社