用於顯示危險元素的信息的透明顯示設備及其方法
2023-10-07 21:52:59
用於顯示危險元素的信息的透明顯示設備及其方法
【專利摘要】一種在運輸設備中使用的透明顯示設備包括:通信單元,接收周圍情況信息;控制器,使用周圍情況信息來識別周圍對象,並使用周圍對象的特性和運輸設備的運動特性來確定可能與運輸設備碰撞的危險元素;透明顯示器,顯示用於向用戶通知危險元素的信息。因此,可有效地呈現周圍情況。
【專利說明】用於顯示危險元素的信息的透明顯示設備及其方法
【技術領域】
[0001] 以下描述涉及一種透明顯示設備及其顯示方法,更具體地,涉及一種在透明顯示 器上顯示危險元素的信息的透明顯示設備及其顯示方法。
【背景技術】
[0002] 隨著電子技術的發展,已開發和發布了各種類型的顯示設備。具體地,近年來,已 加快了關於下一代顯示設備(諸如,透明顯示設備)的研宄和討論。
[0003] 透明顯示設備是指具有透明度並允許透過該設備看到該設備後面的背景的設備。 現有技術的顯示面板使用不透明的半導體化合物(諸如,矽(Si)或鎵砷化物(GaAs))製造 而成。然而,由於現有技術的顯示面板無法處理的各種應用領域已得到發展,所以已在努力 開發新型電子元件。這種努力開發的一方面是透明顯示設備。
[0004] 當使用透明顯示設備時,用戶可通過透明顯示設備的屏幕查看必要信息,同時看 到設備後面的背景。因此,可解決現有技術的顯示設備具有的空間限制和時間限制。
[0005] 透明顯示設備可易於用在針對各種目的的各種環境下。例如,透明顯示設備可用 作商店的展示櫥窗,或可被安裝在運輸設備(諸如,車輛、飛機或船舶)中。
【發明內容】
[0006] 摶術問題
[0007] 因此,存在一種關於當將透明顯示設備應用到各種環境時更有效地使用透明顯示 設備的透明度的方法的需求。
[0008] 解決方案
[0009] 其它方面和/或優點可在隨後的描述中被部分地闡述,並且部分地通過描述將是 清楚的,或可通過對本發明的實踐而獲得。
[0010] 一個或更多個示例性實施例可克服以上缺點和以上沒有描述的其它缺點。然而, 將理解,一個或更多個示例性實施例無需克服以上描述的缺點,並且可能沒有克服以上描 述的任何問題。
[0011] 一個或更多個示例性實施例提供一種使用透明度有效地提供信息的透明顯示設 備及其顯示方法。
[0012] 根據示例性實施例的一方面,一種在運輸設備中使用的透明顯示設備包括:通信 單元,接收周圍情況信息;控制器,使用周圍情況信息和運輸設備的位置信息來確定可能與 運輸設備碰撞的危險元素;透明顯示器,顯示用於向用戶通知危險元素的信息。
[0013] 控制器可使用周圍情況信息來識別周圍對象,並可在周圍對象之中確定危險元 素。
[0014] 所述透明顯示設備還可包括:位置檢測器,檢測用戶眼睛的位置。
[0015] 在這種情況下,控制器可根據位置檢測器的檢測結果來確定用戶的視場,可將在 所述視場內被障礙物遮擋的周圍對象確定為危險元素,並可參考用戶眼睛的位置來確定所 述信息在透明顯示器上的顯示位置。
[0016] 控制器可將透明顯示器的所有區域之中的連接在用戶的視場內存在的第一對象 和用戶眼睛的位置的第一穿透區域與連接在第一對象後面存在的第二對象和用戶眼睛的 位置的第二穿透區域進行比較以確定第一穿透區域和第二穿透區域是否相互重疊,並且當 確定第一穿透區域與第二穿透區域相互重疊時,控制器可確定第一對象被視為對第二對象 的障礙物。
[0017] 控制器可將關於被障礙物遮擋的危險元素的信息顯示在透明顯示器的所有區域 之中的穿透區域上,其中,障礙物通過所述穿透區域被看到。
[0018] 所述透明顯示設備還可包括:位置檢測器,檢測用戶的位置。
[0019] 在這種情況下,控制器可將所述信息顯示在透明顯示器的所有區域之中的與用戶 的位置相應的區域上。
[0020] 控制器可根據危險元素的特性來調整顯示在透明顯示器上的信息的以下項中的 至少一項:顏色、大小、顯示時間、顯示位置、閃爍狀態、字體和文本粗度。
[0021] 所述信息可在透明顯示器上被顯示在危險元素處於的方向上。所述信息可以是表 示以下項中的至少一項的圖形對象:危險元素的位置、危險元素的種類、運輸設備與危險元 素之間的距離、危險元素的接近速度和估計的碰撞時間。
[0022] 周圍情況信息可以是關於位於周圍區域中的周圍對象的信息,其中,所述周圍區 域包括運輸設備的當前位置。
[0023] 當運輸設備進入本地區域時,通信單元可從管理本地區域的伺服器接收本地區域 的周圍情況信息,並且運輸設備可以是車輛,透明顯示器可包括車輛的擋風玻璃。
[0024] 控制器可確定包括基於運輸設備的位置改變、運動方向和運動速度來指示運輸設 備是否運動的信息以及未來運動位置中的至少一項的運動特性,並可使用運輸設備的運動 特性和周圍情況信息來確定危險元素。
[0025] 根據示例性實施例的一方面,一種在運輸設備中使用的透明顯示設備的顯示方法 包括:接收周圍情況信息;使用周圍情況信息和運輸設備的位置信息來確定可能與運輸設 備碰撞的危險元素;將用於向用戶通知危險元素的信息顯示在透明顯示器上。
[0026] 確定危險元素的步驟可包括:使用周圍情況信息來識別周圍對象,並在周圍對象 之中確定危險元素。
[0027] 所述方法還可包括:檢測用戶眼睛的位置;參考用戶眼睛的位置來確定所述信息 在透明顯示器上的顯示位置,確定危險元素的步驟可包括:使用用戶眼睛的位置來確定視 場,將在所述視場內被障礙物遮擋的周圍對象確定為危險元素。
[0028] 確定危險元素的步驟可包括:將透明顯示器的所有區域之中的連接在用戶的視場 內存在的第一對象和用戶眼睛的位置的第一穿透區域與連接在第一對象後面存在的第二 對象和用戶眼睛的位置的第二穿透區域進行比較以確定第一穿透區域與第二穿透區域是 否相互重疊;當確定第一穿透區域與第二穿透區域相互重疊時,確定第一對象被視為對第 二對象的障礙物。
[0029] 將用於向用戶通知危險元素的信息顯示在透明顯示器上的步驟可包括:將關於被 障礙物遮擋的危險元素的信息顯示在透明顯示器的所有區域之中的穿透區域上,其中,障 礙物通過所述穿透區域被看到。
[0030] 所述方法還可包括:檢測用戶的位置,將用於向用戶通知危險元素的信息顯示在 透明顯示器上的步驟可包括:將所述信息顯示在透明顯示器的所有區域之中的與用戶的位 置相應的區域上。
[0031] 所述方法還可包括:根據危險元素的特性來調整顯示在透明顯示器上的信息的以 下項中的至少一項:顏色、大小、顯示時間、顯示位置、閃爍狀態、字體和文本粗度。
[0032] 所述信息可在透明顯示器上被顯示在危險元素處於的方向上,所述信息可以是表 示以下項中的至少一項的圖形對象:危險元素的位置、危險元素的種類、運輸設備與危險元 素之間的距離、危險元素的接近速度和估計的碰撞時間。
[0033] 周圍情況信息可以是關於位於周圍區域中的周圍對象的信息,其中,所述周圍區 域包括運輸設備的當前位置。
[0034] 可從管理運輸設備進入的本地區域的伺服器接收本地區域的周圍情況信息,運輸 設備可以是車輛,透明顯示器可包括車輛的擋風玻璃。
[0035] 確定危險元素的步驟可包括:確定包括基於運輸設備的位置改變、運動方向和運 動速度來指示運輸設備是否運動的信息以及未來運動位置中的至少一項的運動特性,並使 用運輸設備的運動特性和周圍情況信息來確定危險元素。
[0036] 根據示例性實施例的一方面,一種用戶終端設備包括:接口,可與運輸設備連接; 通信單元,從伺服器接收周圍情況信息;控制器,使用周圍情況信息和運輸設備的位置來確 定可能與運輸設備碰撞的危險元素,並通過接口向運輸設備提供用於向用戶通知危險元素 的信息。
[0037] 當運輸設備通過接口連接到用戶終端設備時,控制器可使用設置在用戶終端設備 中的GPS晶片來確定運輸設備的位置,可分析周圍情況信息,並識別周圍對象,並可將周圍 對象之中的參考運輸設備的位置可能碰撞的周圍對象確定為危險元素。
[0038] 根據示例性實施例的一方面,一種用戶終端設備的顯示方法包括:從伺服器接收 周圍情況信息;使用設置在用戶終端設備中的GPS晶片來確定連接到用戶終端設備的運輸 設備的位置;使用周圍情況信息和運輸設備的位置來確定可能與運輸設備碰撞的危險元 素;向運輸設備提供用於向用戶通知危險元素的信息並顯示所述信息。
[0039] 有益效果
[0040] 根據上述各種示例性實施例,透明顯示設備被應用到各種環境並有效提供信息。 具體地,如果透明顯示設備被安裝在運輸設備中並被使用時,有效地提供關於危險元素的 信息,並可以防止危險。
【專利附圖】
【附圖說明】
[0041] 通過參照附圖詳細地對示例性實施例進行描述,以上和/或其它方面將更清楚, 其中:
[0042] 圖1是示出根據示例性實施例的透明顯示設備的配置的框圖;
[0043] 圖2是示出透明顯示器的詳細配置的示例的示圖;
[0044] 圖3是示出透明顯示器的詳細配置的示例的示圖;
[0045] 圖4是示出用於在安裝有透明顯示設備的運輸設備中顯示信息的方法的示圖;
[0046] 圖5和圖6是示出用於顯示信息的方法的各種示例的示圖;
[0047] 圖7是示出根據示例性實施例的透明顯示設備的配置的框圖;
[0048] 圖8是示出在考慮到用戶的位置、障礙物的位置和周圍運輸設備的位置的情況下 確定信息顯示區域的方法的示圖;
[0049] 圖9至圖11是示出在透明顯示器的整個區域之中確定顯示信息的區域的方法的 示圖;
[0050] 圖12是示出根據各種示例性實施例的顯示控制系統的配置的框圖;
[0051] 圖13是示出存儲在圖12的存儲器中的軟體的結構的示例的示圖;
[0052] 圖14至圖16是示出用於將信息顯示在透明顯示器上的方法的各種示例的示圖;
[0053] 圖17是示出用於檢測用戶的位置的方法的示圖;
[0054] 圖18是示出根據示例性實施例的顯示方法的流程圖;
[0055] 圖19是示出用於向運輸設備提供周圍情況信息的伺服器的示例的示圖;
[0056] 圖20是示出根據圖19的示例性實施例的伺服器配置的框圖;
[0057] 圖21是示出用於向運輸設備提供周圍情況信息的伺服器的示例的示圖;
[0058] 圖22是示出根據圖21的示例性實施例的伺服器配置的框圖;
[0059] 圖23是示出在沒有伺服器的情況下通過相互通信的運輸設備獲得周圍情況信息 的方法的示圖;
[0060] 圖24是示出用於在包括置於左側和右側的外部圖像拾取單元的運輸設備中顯示 信息的方法的示圖;
[0061] 圖25是示出用於在包括位於正面的外部圖像拾取單元的運輸設備中顯示圖像的 方法的示圖;
[0062] 圖26是示出根據示例性實施例的確定危險元素的透明顯示設備的示圖;
[0063] 圖27是示出根據示例性實施例的顯示拍攝的圖像的透明顯示設備的操作的示 圖;
[0064] 圖28是示出根據示例性實施例的相互連接的用戶終端設備和運輸設備的示圖;
[0065] 圖29是示出圖28的用戶終端設備的配置的框圖。
【具體實施方式】
[0066] 現在將詳細地參照實施例(其示例在附圖中被示出),其中,同樣的標號始終指示 同樣的元件。以下將通過參照附圖來描述實施例以解釋本發明。
[0067] 在下文中,將參照附圖更詳細地描述示例性實施例。
[0068] 在以下描述中,當在不同附圖中描述標號時,相同標號用於相同元件。提供在描述 中限定的事宜(諸如詳細的構造和元件)以幫助全面理解示例性實施例。因此,清楚的是, 可在沒有那些具體限定的事宜的情況下實施示例性實施例。此外,由於現有技術中公知的 功能或元件會在不必要的細節上模糊示例性實施例,因此不詳細描述它們。
[0069] 圖1是示出根據示例性實施例的透明顯示設備的配置的框圖。參照圖1,透明顯示 設備100包括透明顯示器110、控制器120和通信單元130。
[0070] 透明顯示器110由透明材料製成,並允許透過該透明顯示器110看到外部對象。
[0071] 通信單元130使用各種通信方法與外部設備進行通信。
[0072] 控制器120控制透明顯示器110的操作。控制器120可在透過透明顯示器110看 到外部對象的同時還顯示各種信息。可基於通信單元130的通信結果來產生顯示的信息。
[0073] 可根據透明顯示設備安裝的環境來確定在透明顯示器110上顯示的信息的類型 和顯示位置。也就是說,例如,上述透明顯示設備100可被安裝在各種類型的運輸設備(諸 如,車輛、船舶、摩託車、地下鐵道車輛或火車)中。
[0074] 例如,如果透明顯示設備100被安裝在車輛中,則透明顯示設備100可被稱作車輛 主機(vehicle head unit)、中控儀錶盤(center fascia)或車輛控制系統。此外,在這種 情況下,透明顯示器110可通過使用在運輸設備中用戶可看到外面的透明窗戶來實現。
[0075] 通信單元130從外部設備接收周圍情況信息,控制器120基於周圍情況信息來產 生信息。
[0076] 例如,周圍情況信息可包括各種信息,諸如,交通信息、路徑信息、周圍運輸設備信 息和當前位置信息。
[0077] 控制器120使用周圍情況信息來識別周圍對象,並參考安裝有透明顯示設備100 的運輸設備的運動特性來確定可能與運輸設備碰撞的危險元素。
[0078] 例如,在此所述的運動特性可包括運輸設備的位置、運動方向、運動速度、加速度 和估計的未來位置。周圍對象可不僅包括除了安裝有透明顯示設備100的運輸設備之外的 周圍運輸設備,還包括固定在相應位置的障礙物或其它對象。例如,周圍對象可以是例如行 人、自行車、摩託車、車輛或球。在這些周圍對象中,危險元素可以是從用戶的眼睛被障礙物 遮擋的對象、亂穿馬路的行人、違反交通信號的自行車、超速行駛的摩託車或者在球之後跑 進馬路的兒童。控制器120通過考慮運輸設備的運動特性和周圍對象的運動特性確定周圍 對象是否可能與運輸設備碰撞。可以使用用戶眼睛的位置和對象的位置來確定周圍對象是 否為障礙物。
[0079] 具體地,控制器120確定第一穿透區域是否與第二穿透區域重疊,其中,第一穿透 區域連接存在於用戶的視場內的第一對象與用戶眼睛的位置,第二穿透區域連接存在於第 一對象後面的第二對象與用戶眼睛的位置。當確定兩個穿透區域相互重疊時,確定第一對 象是對第二對象的障礙物。將詳細地解釋確定第一穿透區域和第二穿透區域的方法。
[0080] 控制器120將關於危險元素的信息顯示在透明顯示器110上。關於危險元素的信 息可被顯示在透明顯示器110的整個區域之中的合適的區域上。例如,在此所述的信息可 以是各種圖形對象(諸如,圖像、文本和符號)、內容再現屏幕、應用執行屏幕和web瀏覽器 屏幕。
[0081] 當存在高速運動的危險元素時,控制器120可通過在估計的碰撞時間之前顯示信 息向用戶提前警告危險元素。
[0082] 結果,駕駛運輸設備的用戶可識別關於危險元素的信息,同時觀察透過透明顯示 器110看到的外部對象的實際狀態。當危險元素存在於盲區(blind spot)中使得無法透 過透明顯示器110觀察到時,用戶可能看不到危險元素的真實狀態,但是可以看到關於危 險元素的信息。因此,用戶可預先採取措施以防止與危險元素碰撞。盲區是被外部障礙物 遮擋的區域或由於用戶的位置或有限的視場導致用戶無法看到的區域。
[0083] 透明顯示器110可根據示例性實施例以各種方式被實現。具體地,透明顯示器110 可通過使用例如透明液晶顯示器(LCD)、透明薄膜電致發光面板(TFEL)、透明有機發光二 極管(OLED)顯示器和投影型顯示器來實現。
[0084] 透明IXD是在沒有背光單元的情況下通過使用一對偏光板、光學薄膜、透明薄膜 電晶體和透明電極而實現的透明顯示設備。透明LCD因偏光板或光學薄膜的存在而具有低 透射率,並且因使用環境光而不是背光單元而具有低光學效率,但是透明LCD具有能夠實 現大尺寸透明顯示器的優點。透明TFEL是指使用包括透明電極、無機螢光物質和絕緣薄膜 的交流電(AC)型無機薄膜EL顯示器(AC-TFEL)的設備。AC-TFEL是通過當在無機螢光物 質中的加速電子通過時激發螢光物質而發光的顯示器。如果透明顯示器110通過使用透明 TFFL實現,則控制器130可調整電子以使其投射到合適的位置,並可確定信息顯示位置。由 於無機螢光物質和絕緣薄膜是透明的,所以可實現透明顯示器。
[0085] 透明OLED顯示器是使用可通過自身發光的OLED的透明顯示設備。因為有機發 光層是透明的,所以如果透明電極被用作相反電極,則OLED顯示器可被實現為透明顯示設 備。當電子和空穴通過兩個有機發光層被注入並在有機發光層中相互結合時,OLED發光。 透明OLED使用這個原理將電子和空穴注入到期望的位置,並顯示信息。
[0086] 圖2是示出通過使用透明OLED實現的透明顯示器的詳細配置的示例的示圖。為 了便於解釋,標號110-1被用作如圖2中所示的透明OLED型的透明顯示器。
[0087] 參照圖2,透明顯示器110-1包括透明基板111-1、透明電晶體層112-1、第一透明 電極113-1、透明有機發光層114-1、第二透明電極115-1、連接電極116-1以及介電薄膜 117-1 和 118-1〇
[0088] 透明基板111-1可使用聚合物材料(諸如,具有透明度的塑料或玻璃)。透明基 板111-1的材料可根據使用透明顯示設備100的環境來確定。例如,聚合物材料由於質量 輕和靈活可被用於可攜式顯示設備,而玻璃可被用於商店的展示櫥窗或運輸設備的窗戶。
[0089] 透明電晶體層112-1是指包括通過利用透明材料(諸如,透明氧化鋅或氧化鈦) 替代現有技術的薄膜電晶體的不透明矽製造而成的電晶體的層。源極、柵極、漏極以及各種 介電薄膜117-1和118-1可被設置在透明電晶體層112-1中,並且連接電極116-1可被設 置為將漏極與第一透明電極113-1電連接。雖然在圖2中的透明電晶體層112-1中僅提供 了包括源極、柵極和漏極的一個透明電晶體,但是多個透明電晶體可均勻地分布在顯示器 表面的整個區域上。控制器120可將控制信號施加到透明電晶體層112-1中的每個電晶體 的柵極,驅動相應的透明電晶體並顯示信息。
[0090] 第一透明電極113-1和第二透明電極115-1關於透明有機發光層114-1彼此相 對。第一透明電極113-1、透明有機發光層114-1和第二透明電極115-1構成透明有機發光 二極體(OLED)。
[0091] 透明OLED根據驅動方法被劃分為無源矩陣OLED (PMOLED)和有源矩陣 OLED(AMOLED)。PMOLED包括在第一透明電極113-1和第二透明電極115-1相交的地方 形成的像素。另一方面,AMOLED包括用於驅動每個像素的薄膜電晶體(TFT)。圖2示出 AM0LED。第一透明電極113-1和第二透明電極115-1中的每一個包括多個線電極(line electrode),並且這些線電極相互垂直地布置。例如,如果第一透明電極113-1的線電極被 布置在水平方向上,則第二透明電極115-1的線電極被布置在垂直方向上。因此,在第一透 明電極113-1和第二透明電極115-1之間形成了多個相交區域。如圖2中所示,透明晶體 管連接到每個相交區域。
[0092] 控制器130使用透明電晶體在每個相交區域中產生電位差。電子和空穴在產生電 位差的相交區域中從每個電極流入透明有機發光層114-1,並相互結合,從而發光。另一方 面,沒有產生電位差的相交區域不發光,因此,可以如實看到背景。
[0093] 氧化銦錫(ITO)可被用作第一透明電極113-1和第二透明電極115-1。此外,例 如,可使用諸如石墨烯的新材料。石墨烯是具有碳原子相互連接的蜂窩狀平面結構並具有 透明度的材料。透明有機發光層114-1可由各種材料製成。
[0094] 如上所述,透明顯示器110可通過使用透明IXD、透明TFEL和透明OLED來實現。 然而,透明顯示器110可通過使用投影型顯示器來實現。投影型顯示器將圖像投影到透明 屏幕上,並顯示該圖像。例如,諸如平視顯示器(HUD)的系統與投影型系統相應。
[0095] 圖3是示出在通過使用投影型透明顯示設備實現透明顯示器的情況下透明顯示 器的詳細配置的示例的示圖。在圖3中,標號110-2用於投影型透明顯示設備。
[0096] 投影型透明顯示器110-2包括透明屏幕111-2、光學設備112-2和光源設備 113-2〇
[0097] 例如,光源設備113-2使用各種光源(諸如,真空螢光顯示器(VFD)、陰極射線管 (CRT)、IXD或LED)發光以顯示信息。
[0098] 光學設備112-2將從光源設備113-2發射出的光投影到透明屏幕111-2上。光學 設備112-2可通過使用包括至少一個透鏡和反射鏡的導光板來實現。
[0099] 光源設備113-2和光學設備112-2可被實現為單個顯示模塊。因此,光源設備 113-2和光學設備112-2可被放置在透明屏幕111-2的上邊緣、下邊緣、左邊緣和右邊緣,並 可將光投影到透明屏幕111-2上,使得信息被顯示在透明屏幕111-2上。此外,將雷射用作 光源的全息方法可被實現。在這種情況下,可使用雷射將信息直接顯示在透明屏幕111-2 上。
[0100] 透明屏幕111-2可由普通玻璃製成。當透明顯示設備100被用作例如運輸設備的 窗戶(諸如,車輛、船舶和飛機)、一般家庭的窗戶和商店的展示櫥窗時,可使用圖3的透明 顯示器110-2的配置。
[0101] 在圖3中,透明顯示器110被實現為車輛的擋風玻璃。在這種情況下,光學設備 112-2和光源設備113-2可被放置在用戶10所坐的車輛內的透明顯示器110的下部區域。 在下文中,用戶在車輛內看向外面的方向被稱作第一方向,相反的方向被稱作第二方向。
[0102] 雖然在圖3中通過使用投影型顯示器實現運輸設備的窗戶,但是可以通過使用以 上描述的各種類型的透明顯示器來實現運輸設備的窗戶。
[0103] 如果如上所述透明顯示設備100被實現為運輸設備(諸如,車輛)的窗戶,則用戶 可在透過窗戶看到設備後面的背景的同時,看到顯示在透明顯示器110上的各種信息。因 此,用戶可根據用戶的當前狀態和運輸設備的周圍特性來獲得合適信息。
[0104] 圖4是示出當透明顯示設備100被應用到車輛時在真實的道路上使用透明顯示設 備100的方法的示例的示圖。為了便於解釋,在圖4中,水平方向被定義為X軸方向,垂直 方向被定義為Y軸方向。參照圖4,當安裝有透明顯示設備100的車輛1000沿X方向運動, 並且另一車輛2000沿Y方向行駛時,如果它們繼續沿它們各自的方向運動,則這兩輛車可 能相互碰撞。
[0105] 安裝在車輛1000中的透明顯示設備100的控制器120考慮車輛1000的運動方 向和運動速度以及另一車輛的運動方向和運動速度,來確定碰撞的可能性。具體地,控制 器120考慮車輛1000和車輛2000的運動方向,來計算從車輛1000的前行方向延伸的第一 虛擬線和從另一車輛2000的前行方向延伸的第二虛擬線。控制器120計算第一虛擬線和 第二虛擬線的交點。交點是可能發生碰撞的點。控制器120參考車輛1000的當前位置和 當前速度來計算車輛1000到達可能發生碰撞的點所需的第一時間(tl),並參考另一車輛 2000的當前位置和當前速度來計算另一車輛2000到達可能發生碰撞的點所需的第二時間 (t2)。控制器120根據第一時間和第二時間之差(tl-t2)與預定時間範圍之間的差來確定 碰撞的可能性。也就是說,當差(tl-t2)落入預定時間範圍內時,控制器120確定碰撞的可 能性高,而當差(tl-t2)在預定時間範圍之外時,控制器120與所述差在預定時間範圍之外 的程度成比例地確定碰撞的可能性低。
[0106] 另一方面,如果當車輛1000沿X方向進入交點時例如障礙物20 (諸如,摩天大樓) 存在於交點的拐角,則沿Y方向進入交點的另一車輛2000可能被障礙物20遮擋。在這種 情況下,當如上所述確定車輛1000可能與另一車輛2000碰撞時,控制器120將另一車輛 2000識別為危險元素,並將關於危險元素的信息顯示在透明顯示器110上。顯示的信息可 具有各種格式。
[0107] 圖5是示出在圖4的情況下顯示在透明顯示器110上的信息的示例的示圖。參 照圖5,可以透過透明顯示器110看到設備後面的真實背景。因此,雖然在右邊看到障礙物 20,但是在障礙物20後面運動的另一車輛2000被障礙物20遮擋。控制器120確定另一車 輛2000與車輛1000之間的碰撞的可能性,並且當存在另一車輛2000與車輛1000碰撞的 可能性時,確定另一車輛2000是危險元素。因此,為了使用戶10識別危險元素的存在,各 種信息30被顯示在透明顯示器110上。
[0108] 參照圖5,信息30包括與另一車輛2000相應的圖形圖像31、指示另一車輛2000的 運動方向的箭頭圖像32和通知另一車輛2000是危險元素的文本33。這種信息30被顯示 在透明顯示器110的整個區域之中的與另一車輛2000的真實位置相應的區域上。也就是 說,如圖5中所示,信息30被顯示在這樣的區域上:透過該區域,障礙物20被看到。因此, 用戶可直觀地獲知,在障礙物20的後面存在危險元素。
[0109] 控制器120可以以各種方式根據障礙物20的特性來調整信息30的顯示狀態。具 體地,控制器130可考慮障礙物20的顏色、天氣狀況、周圍照明和陰影來調整信息30的顏 色、亮度、透明度、大小和閃爍狀態。
[0110] 雖然信息30被顯示在看到障礙物20所通過的區域上,但是信息30的顯示位置可 以各種方式被改變。
[0111] 圖6是示出根據示例性實施例的用於顯示信息的方法的示圖。參照圖6,信息30 可被顯示在與用戶10的位置相應的區域上。具體地,信息30可被顯示在用戶10所坐的駕 駛員座位的前方。
[0112] 此時,顯示的信息30可包括關於危險元素所存在的方向的箭頭或文本。在圖6中, 使用文本來通知危險元素的方向。此外,該信息可包括危險元素的位置和速度信息。當存在 多個危險元素時,按碰撞的可能性的順序來顯示預定數量的危險元素,並且例如,使用簡單 的圖形對象(諸如,小圖形或點)來顯示其它危險元素,使得只有它們的位置和運動可被顯 示。例如,當存在作為最危險元素的車並且在車後面存在摩託車時,關於車的信息(諸如, 圖像、位置和速度)被顯示,而關於摩託車的信息使用在車圖像後面的簡單圖形被顯示。雖 然在圖6中僅示出了視覺圖像,但是可通過語音消息或通知聲音可聽見地通知危險元素的 存在。
[0113] 信息30的顯示位置可被固定到特定位置(諸如,駕駛員座位的前方或擋風玻璃的 中央)。也就是說,在車輛的情況下,駕駛員座位的位置是固定的,並且坐在駕駛員座位上的 用戶的位置不會很大地改變,因此,信息30被最好地看到的區域可被確定為信息30的顯示 區域。然而,這僅為示例,信息30的顯示位置可根據用戶的運動而改變。
[0114] 也就是說,透明顯示設備100可使用相機、光學傳感器和運動傳感器實時地識別 用戶的位置。控制器120將信息30顯示在與用戶的位置相應的區域上。
[0115] 圖7是示出根據示例性實施例的檢測用戶的位置並根據檢測的結果顯示信息的 透明顯示設備100的配置的框圖。參照圖7,透明顯示設備100包括透明顯示器110、控制 器120、通信單元130、存儲器140和位置檢測器150。
[0116] 透明顯示器110可以以如上所述的各種形式來實現。
[0117] 控制器120控制透明顯示設備100的元件的全部操作。
[0118] 通信單元130與外部設備進行通信。在此所述的外部設備可由各種設備(諸如, 管理本地區域的本地伺服器、交通控制伺服器、外部運輸設備和用戶終端設備)實現。
[0119] 存儲器140是存儲在透明顯示設備100中使用的各種程序和數據的元件。
[0120] 位置檢測器150是檢測使用透明顯示設備100的用戶的位置的元件。位置檢測器 150可使用相機、運動傳感器或接近傳感器來檢測用戶的位置。在下面將詳細地解釋用於檢 測用戶的位置的方法。位置檢測器150可檢測用戶的頭部位置,更精確地,位置檢測器150 可檢測用戶的眼睛位置。
[0121] 當由位置檢測器150檢測到用戶的位置時,控制器120可考慮用戶的位置來顯示 信息。例如,控制器120可將信息顯示在如下區域上,該區域對應於連接用戶的位置和危險 元素的線與透明顯示器110相交的交點。
[0122] 例如,控制器120可將信息顯示在透明顯示器110的整個區域之中的位於用戶的 位置前面的區域上。
[0123] 此外,控制器120可根據位置檢測器150的檢測結果來跟蹤用戶的面部方向,並可 確定用戶的視場。相應地,可調整信息的顯示位置,從而可在用戶的視場內看到信息。
[0124] 此外,控制器120可僅將在用戶的視場內被障礙物遮擋的外部運輸設備確定為危 險元素。考慮用戶的位置、障礙物的位置和外部運輸設備的位置,來確定外部運輸設備是否 被障礙物遮擋。
[0125] 圖8是用於解釋考慮由位置檢測器150檢測到的用戶的位置以及障礙物和外部運 輸設備的位置來確定危險元素的方法的示圖。
[0126] 在圖8中,假設通過Ul (0,0)定義用戶的位置,通過Al (xl,yl)定義障礙物20的 位置,通過A2(x2,y2)定義危險元素2000的位置。在這種情況下,如圖8中所示,透明顯示 器110的允許從障礙物20反射的光進入所穿過的區域(S卩,穿透區域Tl)參考Cl被形成 在與障礙物20的大小相應的區域上。此外,如圖8中所示,當沒有障礙物時允許透過其看 到外部運輸設備2000的區域(即,穿透區域T2)可參考C2被形成。
[0127] 此外,假設:通過dl定義用戶的位置與透明顯示器110之間的直線距離,通過Ll 定義連接用戶10的位置和障礙物20的線,通過Θ 1定義Ll與透明顯示器110的表面之間 的角度,通過L2定義連接用戶10的位置和外部運輸設備2000的線,通過θ 2定義L2與透 明顯示器110的表面之間的角度。
[0128] 在這種狀況下,可由位置檢測器150測量dl。例如,如果位置檢測器150包括相機, 則計算與在由相機拍攝的圖像中的用戶相應的對象的大小,並且根據對象大小與拍攝的圖 像的整個大小的比來估計到用戶的距離。此外,如果位置檢測器150包括發光二極體和光 接收二極體,則可根據時間來計算到用戶的距離,該時間是從發光二極體發射的光從用戶 10被反射並在光接收二極體被接收所需的時間。
[0129] 可使用一般相機獲得或可使用深度相機(未示出)獲得到障礙物20的距離和與 障礙物20的角度。控制器120可使用由深度相機拍攝的圖像來測量到障礙物20的距離、 與障礙物20的角度和障礙物20的大小。具體地,可通過從由深度相機拍攝的圖像的中心 計算到障礙物的距離來計算角度。然而,在這樣的計算處理期間,根據深度相機的安裝位置 和安裝方向會在測量的距離或角度上產生誤差。然而,如果運輸設備不是很大,則誤差並非 關鍵的,並因此被忽視。
[0130] 當測量出與障礙物20的角度Θ 1時,控制器120可使用dl/cos Θ 1獲得Ul與Cl 之間的直線距離si。此外,可通過計算sl/sin Θ 1獲得Cl的坐標。
[0131] 控制器120可參考Cl估計大小與障礙物的大小成比例的穿透區域Tl。
[0132] 控制器120可以以相同的方式獲得連接外部運輸設備2000和用戶的線L2與透明 顯示器110相交的交點C2。然而,由於外部運輸設備2000位於深度相機無法拍攝的位置 上,所以可基於周圍情況信息提供外部運輸設備2000的位置、距離和角度。當C2包括在Tl 中時,控制器120確定外部運輸設備2000被障礙物遮擋,並且外部運輸設備2000是可能引 起碰撞的危險元素。
[0133] 圖9至圖11是示出用於顯示具有危險元素的屏幕的方法的示圖。雖然為了便於 解釋,圖9示出了矩形透明顯示器110,但是為了將透明顯示器110應用到真實的車輛,透明 顯示器110並非必需是矩形的。
[0134] 參照圖9,控制器120將透明顯示器110的整個區域劃分為多個區。這些區可被劃 分為多個列Vl至Vx以及多個行Hl至Hy。
[0135] 在圖9中,透過透明顯示器110看到第一外部對象20。控制器120從整個區域之 中確定看到第一外部對象20所透過的區域,也就是,穿透區域20'。由於第一外部對象20 位於可被真實看到的位置上,所以可使用由在透明顯示設備100或車輛中設置的相機拍攝 的圖像來確定第一外部對象20的穿透區域20'。
[0136] 控制器120可將包括與透明顯示器110相應的多個區的矩陣表存儲在存儲器140 中。因此,控制器120可確定基於周圍情況信息確定的外部運輸設備是否可被用戶識別。
[0137] 圖10示出由控制器120管理的矩陣表的示例。圖10的矩陣表可被存儲在存儲器 140 中。
[0138] 當外部運輸設備2000存在於如圖10中所示的位置時,控制器120根據外部對象 2000的位置和方向來估計虛擬穿透區域2000'。以上已經描述了估計虛擬穿透區域2000' 的方法,因此省略重複的解釋。控制器120確定圖9的穿透區域20'是否與虛擬穿透區域 2000'重疊,並且確定外部對象2000是否是存在於無法被用戶識別的盲區中的危險元素。
[0139] 圖11是示出當確定外部運輸設備2000是危險元素時顯示信息的方法的示圖。參 照圖11,控制器120從透明顯示器110的全部區域之中將信息30疊加在障礙物20上。
[0140] 在圖11中,信息30被顯示在被實現為擋風玻璃的透明顯示器110上。然而,如果 透明顯示器110被實現為側視鏡或後擋風玻璃,則該信息可例如根據用戶的眼睛位置、視 野的方向或人臉方向被顯示在側視鏡或後擋風玻璃上。
[0141] 在這種情況下,如果當用戶沒有保持眼睛向前時危險元素被發現,則可通過使用 存在於用戶的人臉方向上的透明顯示器顯示信息來喚起用戶的注意。也就是說,當確定用 戶在開車時將他/她的頭轉向右邊時,信息可被顯示在位於右邊的乘客座位的窗戶上。此 時,由於沒有根據危險元素的準確位置來顯示信息,所以該信息可被看作只是通知危險情 況的一種信息。此外,當確定用戶向後看時,信息可被顯示在後擋風玻璃上。
[0142] 雖然以上已經描述了透明顯示設備100確定外部危險元素並顯示信息的示例性 實施例,但是運輸設備還可包括除了透明顯示設備100之外的顯示設備。因此,以上描述的 示例性實施例可通過包括透明顯示設備的單個顯示控制系統來實現。
[0143] 圖12是解釋根據各種示例性實施例的顯示控制系統的配置的框圖。
[0144] 參照圖12,顯示控制系統包括透明顯示器110、控制器120、通信單元130、存儲器 140、位置檢測器150、外部檢測器160、傳感器170、嵌入式顯示器180、揚聲器191-1和按鈕 191-2〇
[0145] 在上述示例性實施例中已經描述了透明顯示器110的配置和操作,因此,省略重 復的解釋。
[0146] 位置檢測器150是如上所述在運輸設備中檢測用戶的位置的元件。位置檢測器 150包括內部圖像拾取單元151和第一解析器152。
[0147] 內部圖像拾取單元151被置於運輸設備中,並拍攝圖像。具體地,例如,內部圖像 拾取單元151可被置於與用戶所坐的駕駛員的座位接近的位置上(諸如,室內鏡、手柄、儀 錶盤或天窗)。
[0148] 第一解析器152從由內部圖像拾取單元151拍攝的圖像檢測表示用戶的區域,並 向控制器120提供關於該區域的信息。第一解析器152使用由內部圖像拾取單元151拍攝 的圖像的像素信息來檢測包括在圖像中的對象的邊緣。可以以各種檢測算法來檢測這些邊 緣。
[0149] 例如,第一解析器152通過在m*n個像素的基礎上對圖像進行劃分來將圖像劃分 為多個塊。第一解析器152檢測每個塊的代表值。代表值可以是在相應塊中的所有像素的 平均像素值、在相應塊的像素值之中最頻繁出現的像素值或所有像素值的總和。第一解析 器152比較代表值,並確定是否存在具有相似的代表值並連續排列的塊。包括在同一對象 被拍攝的區域中的塊具有相似的代表值。
[0150] 當確定是連續的相似塊時,第一解析器152將與具有不同於識別出的相似塊的代 表值的塊之間的邊界相應的塊檢測為邊緣。
[0151] 之後,第一解析器152使用檢測出的邊緣來識別在圖像中拍攝的對象。例如,如果 多於預定數量的具有作為代表值的與用戶的人臉顏色相應的像素值的塊被連續排列並與 人臉形狀相似,則第一解析器152將相應區域檢測為用戶的人臉區域,並向控制器120提供 關於該區域的信息。
[0152] 控制器120可根據檢測出的人臉區域的大小來估計用戶和透明顯示器110之間的 距離。可基於通過預先進行的實驗產生的資料庫來估計該距離。例如,實際測量與人臉區 域相應的塊的數量和相應距離,並且將匹配值存儲為資料庫。
[0153] 此外,控制器120可通過從拍攝的用戶圖像分析用戶的人臉顏色或眼睛大小來確 定用戶是在開車時打瞌睡還是喝醉了地開車。例如,如果人臉肌肉超過預定時間(例如,1 秒)沒有運動並且眼皮閉上,或者如果用戶周期性地低下他/她的頭,則控制器120可確定 用戶是在開車時打瞌睡。此外,如果人臉顏色變得比平常紅,則控制器120可確定用戶是在 喝醉了地開車。當確定用戶處於這種不正常狀態下時,控制器120可通過透明顯示器顯示 消息以向用戶警告他/她的狀態,或可提供警告聲或喇叭聲。
[0154] 控制器120可根據用戶的眼睛位置來確定信息的顯示位置,當用戶通過沿彎道行 駛或掉頭改變他/她的姿勢時,控制器120可根據改變後的姿勢來改變信息的顯示位置。
[0155] 外部檢測器160是拍攝在運輸設備外面的對象的元件。外部檢測器160包括外部 圖像拾取單元161和第二解析器162。外部圖像拾取單元161可被置於運輸設備的外面。 例如,外部圖像拾取單元161可被置於諸如圍繞車頭燈、前格柵(front grill)或側視鏡的 各種方向上。第二解析器162對由外部圖像拾取單元161拍攝的圖像進行解析,並向控制 器120提供解析結果。控制器120使用解析結果來確定周圍對象的位置。可以以與位置檢 測器150的第一解析器152的方式相同的方式來實現解析方法,因此省略重複的解釋。
[0156] 傳感器170是包括各種傳感器的元件。具體地,傳感器170可包括地磁傳感器171、 加速度傳感器172、陀螺儀傳感器173和觸摸傳感器174。
[0157] 地磁傳感器171是使用2-軸磁通門或3-軸磁通門感測周圍地磁的改變的傳感 器。控制器120可使用由地磁傳感器171感測的地磁值來計算方位。因此,控制器120可 確定運輸設備沿哪個方向運動。
[0158] 加速度傳感器172是當進行運動時測量加速度和加速度的方向的傳感器。具體 地,加速度傳感器172輸出與根據附接有加速度傳感器的運輸設備的坡度而改變的重力加 速度相應的感測值。控制器120可使用加速度傳感器172的輸出值來確定運輸設備的坡度。
[0159] 陀螺儀傳感器173是這樣的傳感器:如果發生旋轉運動,則通過測量沿運動的速 度方向施加的科裡奧利力來感測角速度。控制器120可使用由陀螺儀傳感器173測量的值 來檢測運輸設備的旋轉方向。
[0160] 觸摸傳感器174連接到透明顯示器110或嵌入式顯示器180,並感測在每個顯示 器110或180上的用戶觸摸。例如,如果觸摸傳感器174被設置在透明顯示器110中,則觸 摸傳感器174可包括在透明顯示器110中的基板上沉積的透明導電薄膜(諸如,氧化銦錫 (ITO))和布置在透明導電薄膜上的薄膜。因此,當用戶觸控螢幕幕時,上板和下板在觸摸點相 互接觸,並且電信號被發送到控制器120。控制器120使用電信號被發送到的電極的坐標來 識別觸摸點。例如,如果觸摸傳感器174被設置在嵌入式顯示器180中,則觸摸傳感器174 可以以與一般觸控螢幕相同的方式來實現。省略其詳細描述。
[0161] 通信單元130可包括射頻識別(RFID)晶片131、數字多媒體廣播(DMB)接收晶片 132、全球定位系統(GPS)晶片133和無線通信晶片134。
[0162] RFID晶片131是用於根據RFID通信標準與外部介質進行通信的晶片。RFID通 信標準可使用諸如 135KHz、13. 56MHz、433MHz、860MHz 至 960MHz 和 2. 45GHz 的頻帶。RFID 晶片131可使用以上提到的頻帶中的至少一個進行通信。具體地,使用這些頻帶之中的 13. 56MHz的頻率的技術是指近場通信(NFC)方法。如果RFID晶片131通過使用以NFC方 法操作的NFC晶片來實現,則RFID晶片131可被設置在運輸設備的門鑰匙中。因此,當用 戶對他/她自己的NFC終端加標籤時,NFC晶片131讀取記錄在NFC終端上的信息,並將該 信息發送到控制器120,控制器120識別該信息是否與預存的信息一致,並開啟門鑰匙。
[0163] DMB接收晶片132是接收並處理DMB信號的元件。
[0164] GPS晶片133是從GPS衛星接收GPS信號並計算運輸設備的當前位置的元件。
[0165] 無線通信晶片134是根據無線通信標準與外部設備進行通信的元件。無線通信標 準的示例可以是Wi-Fi、藍牙、IEEE和Zigbee 0
[0166] 如上所述,通信單元130可以以各種方式與外部設備進行通信。例如,通信單元 130可與管理本地區域的伺服器設備進行通信,並可接收周圍情況信息。控制器120分析周 圍情況信息,並識別周圍對象。因此,控制器120可將識別出的周圍對象之中的可能與運輸 設備碰撞的對象確定為危險元素。
[0167] 嵌入式顯示器180是與透明顯示器110分開設置的顯示元件。嵌入式顯示器190 可通過使用LCD實現,並可輸出導航屏幕、各種內容再現屏幕和車輛狀態屏幕。
[0168] 此外,可包括輸出聲音的揚聲器191-1和輸入各種用戶命令的按鈕191-2。按鈕 191-2可被設置在車輛中的中控儀錶盤(center fascia)或其它特定區域上,並且例如,可 通過使用各種類型的按鈕(諸如,機械按鈕)、觸摸板或旋輪(wheel)來實現。
[0169] 存儲器140可存儲與顯示控制系統的操作相關的各種程序或數據、由用戶設置的 設置信息、系統操作軟體、各種應用程式和關於與用戶的操縱相應的操作的信息。
[0170] 控制器120可使用存儲在存儲器140中的各種軟體來執行各種操作。
[0171] 參照圖12,控制器120包括系統存儲器121、主CPU 122、圖形處理器123、視頻處 理器124、音頻處理器125、各種接口 126-1至126-n以及總線129。
[0172] 系統存儲器121、主CPU 122、圖形處理器123、視頻處理器124、音頻處理器125和 各種接口 126-1至126-n可通過總線129相互連接,並且可相互交換數據或信號。
[0173] 第一接口 126-1至第η接口 126-n連接到以上描述的元件。這些接口中的一個接 口可以是通過網絡連接到外部設備的網絡接口。
[0174] 主CPU 122訪問存儲器140,並使用存儲在存儲器140中的Ο/S來執行啟動。此 夕卜,主CPU 122使用存儲在存儲器140中的各種程序、內容和數據來執行各種操作。
[0175] 具體地,系統存儲器121可包括只讀存儲器(ROM) 121-1和隨機存取存儲器 (RAM) 121-2。ROM 121-1可存儲用於啟動系統的命令集。當輸入開啟命令並供電時,主CPU 122根據存儲在ROM 121-1中的命令將存儲在存儲器140中的0/S複製到RAM 121-2中,執 行0/S,並啟動系統。當完成啟動時,主CPU 122將存儲在存儲器140中的各種應用程式復 制到RAM 121-2中,執行複製到RAM 121-2中的應用程式,並執行各種操作。
[0176] 圖形處理器123在主CPU 122的控制下產生指示各種信息的圖形對象。
[0177] 圖形處理器123包括渲染器123-1和計算器123-2。計算器123-2計算屬性值(諸 如,將被顯示的圖形對象的坐標值以及圖像對象的形狀、大小和顏色)。渲染器123-1基於 由計算器123-2計算的屬性值來產生圖形對象。由渲染器123-1產生的圖形對象可以被顯 示在透明顯示器110上。主CPU 122可如上所述考慮危險元素所處的方向或用戶的位置, 來確定圖形對象的顯示位置。此外,主CPU 122可根據各種情況(諸如危險元素的位置、類 型、運動方向、運動速度和加速度以及到運輸設備的距離)來改變圖形對象的細節。如果危 險元素是一般車輛,則可以以圖形對象形式來產生包括關於車輛的運動方向、運動速度和 估計的碰撞時間的文本的信息,並可將該信息與一般車輛圖像一起顯示。另一方面,如果危 險元素是活物(諸如,人),則可以以圖形對象形式來產生包括各種文本的信息,並可將該 信息與活物的圖像一起顯示。
[0178] 視頻處理器124可包括視頻解碼器、渲染器和縮放器。因此,視頻處理器124對包 括在多媒體內容中的視頻數據進行解碼,通過對解碼後的視頻數據進行渲染來形成幀,並 根據信息顯示區域來對形成的幀的尺寸進行縮放。主CPU 122可將由視頻處理器124形成 的幀顯示在嵌入式顯示器180或透明顯示器110上。
[0179] 音頻處理器125可包括音頻解碼器、噪聲過濾器和放大器。因此,音頻處理器125 可針對包括在多媒體內容中的音頻數據執行音頻信號處理,諸如解碼、過濾和放大。主CPU 122通過揚聲器191-1輸出由音頻處理器125處理的音頻信號。
[0180] 當顯示控制系統被安裝在車輛中時,在總體上考慮到車輛的各種功能的情況下, 示出了圖12的配置。因此,顯示控制系統還可包括與圖12中的那些元件不同的元件,或可 根據安裝有顯示控制系統的運輸設備的種類而改變或省略某些元件。省略對這種修改的示 例性實施例的說明和解釋。
[0181] 如上所述,控制器120可將存儲在存儲器140中的程序複製到系統存儲器121中, 可執行所述程序,並可執行各種操作。
[0182] 圖13是用於解釋存儲在存儲器140中的軟體層的示圖。參照圖13,存儲器140可 存儲包括基礎模塊141、感測模塊142、通信模塊143、呈現模塊144、web瀏覽器模塊145和 服務模塊146的軟體。
[0183] 基礎模塊141是指處理從在顯示設備100內發送的信號並將信號發送到上層模塊 的模塊。
[0184] 基礎模塊141包括存儲模塊141-1、基於位置的模塊141-2、安全模塊141-3和網 絡模塊141-4。
[0185] 存儲模塊141-1是管理資料庫(DB)或註冊表的程序模塊。主CPU 122可使用存 儲模塊141-1訪問存儲單元140中的資料庫,並可讀出各種數據。基於位置的模塊141-2 是與各種硬體(諸如,GPS晶片)互鎖並支持基於位置的服務的程序模塊。安全模塊141-3 是支持對硬體的認證、對請求的許可和安全存儲的程序模塊。網絡模塊141-4是支持網絡 連接的模塊,網絡模塊141-4包括分布式網絡(DNET)模塊和通用即插即用(UPnP)模塊。
[0186] 感測模塊142是從包括在傳感器170中的各種傳感器收集信息並分析和管理收集 到的信息的模塊。具體地,感測模塊142是檢測操縱屬性(諸如,執行觸摸的點的坐標值、 觸摸移動方向、移動速度和移動距離)的程序模塊。此外,根據情況,感測模塊142可包括 人臉識別t旲塊、語音識別t旲塊、運動識別t旲塊和NFC識別t旲塊。
[0187] 通信模塊143是用於與外部設備進行通信的模塊。通信模塊143包括消息模塊 143-1(諸如信使程序、短消息服務(SMS)和多媒體消息服務(MMS)程序以及電子郵件程 序)和電話模塊143-2,其中,電話模塊143-2包括呼叫信息聚合器程序模塊和通過網際網路 協議的語音(VoIP,網絡電話)模塊。
[0188] 呈現模塊144是產生顯示屏幕的模塊。呈現模塊144包括用於再現多媒體內容並 輸出多媒體內容的多媒體模塊144-1以及用於處理用戶界面(UI)和圖形的UI和圖形模塊 144-2。多媒體模塊144-1可包括播放器模塊、攝影機模塊和聲音處理模塊。因此,多媒體 模塊144-1通過再現各種多媒體內容來產生屏幕和聲音,並再現這些屏幕和聲音。Π 和圖 形模塊144-2可包括用於組合圖像的圖像合成器模塊、用於組合屏幕上的坐標以顯示圖像 並產生坐標的坐標組合模塊、用於從硬體接收各種事件的Xll模塊以及提供用於配置2D或 3D格式的Π 的工具的2D/3D Π 工具箱。
[0189] web瀏覽器模塊145是執行web瀏覽並訪問web伺服器的模塊。web瀏覽器模塊 145可包括用於渲染和查看web頁的web查看模塊、用於下載的下載代理模塊、書籤模塊和 Web-kit 模塊。
[0190] 服務模塊146是用於提供各種服務的應用模塊。參照圖13,服務模塊146可包括 各種模塊,諸如,情況信息處理模塊146-1、危險元素確定模塊146-2和導航模塊146-3。
[0191] 情況信息處理模塊146-1是這樣的模塊:當從周圍伺服器或周圍對象接收到周圍 情況信息時,分析接收到的周圍情況信息並識別周圍對象。危險元素確定模塊146-2是考 慮識別出的周圍對象的特性和運輸設備的運動特性來確定識別出的周圍對象是否是危險 元素的模塊。主CPU 122可通過執行情況信息處理模塊146-1和危險元素確定模塊146-2 來指定危險元素。導航模塊146-3是使用從GPS晶片133接收到的當前位置來提供各種導 航功能的模塊。
[0192] 當作為執行情況信息處理模塊146-1和危險元素確定模塊146-2的結果,確定存 在危險元素時,主CPU 122可執行Π 和圖形模塊144-2,並向圖形處理器123提供用於調整 圖形對象的顯示狀態的各種基本數據。基本數據可以是包括在圖形對象中的文本以及圖像 的種類、大小、顏色和顯示時間。因此,圖形處理器123產生危險元素的圖形對象,並將圖形 對象顯示在如上所述的透明顯示器110上。
[0193] 可根據顯示控制系統的種類和特性而省略、改變或添加在圖13中示出的各種程 序模塊中的某些程序模塊。
[0194] 如上所述,關於危險元素的信息可被顯示在各種位置上。當危險元素運動時,可根 據危險元素運動到的位置來調整圖像的顯示位置。圖14示出根據示例性實施例的在其上 調整信息顯示位置的透明顯示器110的顯示狀態。
[0195] 圖14示出另一車輛20行駛在運輸設備的前方並且其它車輛2000進入車輛20的 前方的情況。在這種情況下,在運輸設備前方的車輛20被視作障礙物,並遮擋了進入的車 輛2000。控制器120分析周圍情況信息,並識別進入的車輛2000,並在進入的車輛2000所 處的方向上顯示信息30。在圖14中,可顯示包括表示進入的車輛2000的種類的圖像、指示 前進方向的箭頭和文本的信息30。
[0196] 在這種情況下,當進入的車輛2000進一步接近時,調整信息30的顯示位置,並且 還根據接近的車輛2000的位置而改變諸如信息的尺寸和顏色的顯示屬性。也就是說,隨著 碰撞風險的增加,信息的尺寸增大,並且信息的顏色可被改變為明顯的顏色。此外,可添加 閃爍效果,或者還可輸出警告聲音。
[0197] 當運輸設備1000或進入的車輛2000停止或改變它的方向,並因此確定可能發生 碰撞的可能性低時,控制器120可顯示指示危險元素已去除的信息30。也就是說,可改變顯 示在透明顯示器110上的信息的細節。
[0198] 圖15是示出根據示例性實施例的顯示信息的方法的示圖。參照圖15,可根據在相 同情況下的用戶的位置來確定信息的顯示位置。也就是說,信息被顯示在透明顯示器110 的所有區域之中的在用戶前面的區域上。在這種情況下,當危險元素2000遠離運輸設備 時,僅為了喚起用戶注意的信息30-1可被顯示,而當危險元素2000接近並因此碰撞風險增 加時,信息可被改變為提高了警告等級的信息30-2。參照圖15,信息30-1和信息30-2可 包括指示危險元素2000的位置的箭頭、警告語和到危險元素的距離。
[0199] 此外,雖然在以上描述的示例性實施例中根據與正運動的外部對象碰撞的可能性 來顯示信息,但是可考慮與靜止的外部對象碰撞的可能性。
[0200] 圖16是示出用於顯示信息的方法的示圖。參照圖16,當外部對象2000-1和 2000-2阻塞道路並因此存在碰撞風險時,顯示信息30。信息30可根據當前情況被產生。例 如,當由於如圖16中示出的車禍而存在碰撞風險時,可顯示信息30,其中,信息30用於通知 由於車禍而存在危險元素。
[0201] 可從外部伺服器(諸如,交通控制伺服器)發送用於通知諸如車禍、周邊設施倒塌 或封路的情況的周圍情況信息。在這種情況下,即使當由於黑夜或大霧降低了可視性時,也 可預先通過透明顯示器110顯示信息,並因此防止事故。
[0202] 可根據用戶所看的方向來調整信息30的顯示位置。為了實現這個,通過跟蹤用 戶的眼睛或人臉方向來抓取用戶的視場的方向,並隨後將信息顯示在與該方向相應的區域 上。此時,為了更準確地測量用戶的視場,可使用多個內部圖像拾取單元151。
[0203] 圖17是示出內部圖像拾取單元151和外部圖像拾取單元的布置的示例的示圖。參 照圖17,內部圖像拾取單元151參考用戶的位置被置於不同的方向上,並因此從多個不同 的角度拍攝用戶。在圖17中,示出了兩個內部圖像拾取單元151-1和151-2。第一內部圖 像拾取單元151-1可被安裝在室內鏡上,而第二內部圖像拾取單元151-2可被安裝在用戶 前面的表面上。圖17的布置僅為示例,內部圖像拾取單元151的數量和位置不限於圖17 的數量和位置。外部圖像拾取單元161可與第一內部圖像拾取單元151-1相反地布置。控 制器120可分析由第一內部圖像拾取單元151-1和第二內部圖像拾取單元151-2中的每一 個拍攝的圖像,跟蹤用戶的人臉方向或用戶的眼睛,並可根據跟蹤的結果來檢測視場。
[0204] 具體地,控制器120從由第一內部圖像拾取單元151-1拍攝的圖像檢測邊緣,並在 由邊緣劃分的對象區域之中檢測與用戶的人臉或瞳孔相應的區域。可基於對象區域的顏色 來檢測與用戶的人臉或瞳孔相應的區域。例如,可將具有與人臉顏色或瞳孔顏色相應的像 素值的多個像素塊聚集的部分檢測為人臉區域或瞳孔區域。
[0205] 控制器120可考慮到用戶的距離、人臉區域的大小和人臉區域的形狀來確定用戶 所看的方向,也就是說,可確定用戶正在向前看、向上看、向下看、向左看還是向右看。例如, 如果檢測到的人臉區域在垂直方向上和水平方向上對稱,並且人臉區域的大小是最大的, 則確定用戶正在向前看。另一方面,如果人臉區域小於最小值,並且在垂直方向上不對稱, 則可通過參考人臉區域的中心線將左邊區域的大小與右邊區域的大小進行比較,來估計用 戶正在向左看還是向右看。在用戶的眼睛的情況下,可考慮與眼白相應的區域與用戶眼睛 的區域的比率以及與眼睛的瞳孔相應的區域與用戶眼睛的區域的比率,來估計用戶所看的 方向。
[0206] 以相同的方式,控制器120可分析由第二內部圖像拾取單元151-2拍攝的幀。控 制器120將分析由第一內部圖像拾取單元151-1和第二內部圖像拾取單元151-2拍攝的數 據的結果進行組合,並估計用戶的人臉方向或用戶的眼睛的方向。此外,通過參考估計的方 向應用一般的人的視角來估計視場。控制器120在用戶的視場內顯示各種信息30。
[0207] 圖18是用於解釋根據示例性實施例的顯示方法的基本流程的流程圖。
[0208] 參照圖18,透明顯示設備100接收周圍情況信息(操作S1810)。周圍情況信息是 用於通知安裝有透明顯示設備100的運輸設備的周圍區域的情況的信息。可從各種源(諸 如,外部伺服器、周圍運輸設備和外部相機)提供周圍情況信息。
[0209] 透明顯示設備100分析接收到的周圍情況信息,識別周圍對象,並在識別出的周 圍對象之中確定是否存在危險元素(操作S1820)。以上已經描述了確定危險元素的方法, 因此省略重複的解釋。
[0210] 當存在危險元素時,透明顯示設備100將關於危險元素的信息顯示在透明顯示器 110上(操作S1830)。在以上描述的示例性實施例中已經對關於危險元素的信息及其顯示 方法的示例進行了描述,因此省略重複的解釋。
[0211] 雖然圖18中沒有示出,但是透明顯示設備100可基於周圍情況信息來確定危險元 素的特性。此外,顯示方法還可包括根據危險元素的特性來調整顯示在透明顯示器上的信 息的顏色、大小、顯示時間、顯示位置、閃爍狀態、字體和文本粗度中的至少一個。例如,當發 生碰撞的可能性高並且危險元素是大的危險元素時,可以以更明顯的顏色或更長的時間顯 示信息。此外,可以使用粗體文本或特定字體來顯示信息或使信息閃爍。另一方面,當發生 碰撞的可能性低並且危險元素相對不太危險且是小的危險元素(諸如,進入道路的球或氣 球)時,可不同地應用信息的顏色、顯示時間、閃爍狀態、字體、文本粗度。
[0212] 危險效果的特性可以是如上所述的危險元素的位置、種類、運動速度和GPS值。信 息可以是表示危險元素的位置和種類中的至少一個的圖形對象、運輸設備與危險元素之間 的距離、危險元素的接近速度和估計的碰撞時間。
[0213] 具體地,信息可包括與危險元素的種類相應的圖像。然而,信息可使用簡單的圖形 符號表示危險元素。此外,由於可能不能準確地獲知危險元素距地面的高度,所以可以以簡 單的條形圖的形式來表示危險元素的位置。此外,危險元素可被劃分為車輛、自行車、行人 和其他對象(例如,球或動物),並可以以不同的大小或顏色來表示危險元素。此外,相較於 真實大小,可縮小信息的大小,使得用戶可一眼看到危險元素的運動。此外,可根據危險的 程度不同地調整信息的顏色、亮度或大小。也就是說,當危險的程度增大時,可以以紅色來 顯示信息或連同大圖像來顯示信息,而當危險的程度減小時,可以以淺黃色來顯示圖像或 連同小圖像來顯示圖像。此外,當危險元素被障礙物遮擋時,可改變信息的大小或顏色,或 者添加閃爍效果,使得用戶可獲知危險元素被遮擋。
[0214] 此外,除了簡單的信息30之外,還可通過從透明顯示器110上的與用戶10的位置 相應的點到與危險元素的位置相應的點劃線來顯示到危險元素的距離信息。
[0215] 此外,可以從如上所述的各種源提供周圍情況信息。在下文中,將詳細地描述通過 伺服器向運輸設備提供周圍情況信息的方法。
[0216] 伺服器可通過單向通信或雙向通信連接到每個車輛。
[0217] 根據執行單向通信的示例性實施例,伺服器可以以廣播的方法向車輛提供各種信 息。將被提供的信息可包括由伺服器管理的小區中的每個車輛的位置、運動速度和運動方 向。
[0218] 圖19是示出根據單向通信方法向運輸設備提供周圍情況信息的伺服器的示例的 示圖。在圖19中,運輸設備是車輛。參照圖19,在諸如十字路口的道路環境下,傳感器310、 320、330和340可被設置在每個方向上的道路上。這些傳感器可通過使用相機來實現,或可 通過使用用於檢測在每條道路上的運輸設備的速度和距離的各種類型的傳感器(諸如,加 速度傳感器和接近傳感器)來實現。
[0219] 每個傳感器實時地收集道路情況,隨後將道路情況發送到伺服器3000。伺服器 3000是管理特定本地區域的伺服器。伺服器3000基於從每個傳感器310、320、330和340 接收到的信息來產生本地區域的周圍情況信息。
[0220] 例如,傳感器310、320、330和340可包括相機。相機可被置於十字路口或道路上, 並且可獲得關於每個方向上的危險情況的視覺信息(即,照片)。因此,每個傳感器310至 340可實時地收集關於違反交通信號或加速飛奔的車輛的信息。
[0221] 伺服器3000分析從傳感器310至340提供的照片,並獲得關於每個車輛的位置信 息。具體地,伺服器3000可通過將周圍結構(諸如,大樓、路燈和街邊樹)的已知位置與車 輛的位置進行比較來確定車輛的位置。可選地,伺服器3000可對照片中指示車道的白色虛 線的數量進行計數,並可使用與白色虛線的數量相應的距離來確定車輛的位置。此外,服務 器3000可分析顯示在照片上的對象的大小和位置,並可確定車輛的位置。將詳細地對該示 例性實施例進行解釋。
[0222] 例如,傳感器310至340可包括速度測量裝置。伺服器3000可分析由傳感器310 至340感測的信息,並可計算車輛的位置信息和速度以及到車輛的距離。
[0223] 伺服器3000在本地區域中廣播產生的周圍情況信息。可在特定的無線電頻帶內 執行廣播。
[0224] 因此,進入本地區域的每個運輸設備可從伺服器3000接收廣播的周圍情況信息, 並可識別周圍對象。此外,運輸設備可考慮周圍對象的特性和運輸設備的運動特性來估計 碰撞的可能性。
[0225] 圖20是示出根據圖19的示例性實施例的伺服器的配置的框圖。參照圖20,服務 器3000包括傳感器信號接收器3100、信息處理器3200和信號發送器3300。
[0226] 傳感器信號接收器3100從本地區域中的傳感器310、320、330和340接收傳感器 信號。傳感器信號接收器3100可通過線纜直接連接到傳感器310、320、330和340,或者可 通過根據各種無線通信協議的通信連接到傳感器310、320、330和340。
[0227] 信息處理器3200分析已發送傳感器信號的傳感器310、320、330和340的標識信 息和傳感器信號,並產生周圍情況信息。
[0228] 具體地,如果傳感器是相機,則信息處理器3200接收由每個相機拍攝的照片,分 析接收到的照片,並基於拍攝的對象的位置、大小和形狀來計算對象的運動信息。運動信息 可以是關於對象的運動方向和運動速度的信息。
[0229] 信息處理器3200可以以各種方式來計算對象的運動信息。例如,信息處理器3200 可使用顯示在由傳感器拍攝的圖像幀上的車道來檢測對象的運動方向和運動速度。
[0230] 例如,以虛線來顯示並非中間車道的車道,並因此將其與中間車道區分開。信息處 理器3200在由傳感器310至340提供的照片中檢查到對象所位於的點的虛線的數量。由 於虛線具有相同長度,所以信息處理器3200基於虛線的數量來計算到對象的距離。
[0231] 很多道路具有沿中間車道周期性地排列的照明器或反射器,從而可在晚上容易地 識別出中間車道。在這種情況下,信息處理器3200對直到對象所處的點存在的照明器或反 射器的數量進行計數,並確定到對象的距離。除了這些之外,還可參考人行橫道之間的間距 或周圍地理特徵的位置來計算對象的位置。
[0232] 信息處理器3200可以以相同的方式在由傳感器310至340提供的下一照片中計 算到對象的距離。因此,信息處理器3200可通過將在兩個照片中計算的距離進行比較來抓 取對象的運動方向。此外,信息處理器3200可基於在照片中看到的車道的布局方向來確定 對象的運動方向。例如,由於大部分車輛與車道並行行駛,所以可基於車道的布局方向來估 計車輛的運動方向。例如,如果車道的方向由北向東轉了大約20度,則可確定車輛沿北向 東運動了 20度。
[0233] 當信息處理器3200完成了對傳感器310、320、330和340的傳感器信號的分析時, 信號處理器3200將分析的結果進行組合,並產生周圍情況信息。信號發送器3300廣播由 信息處理器3200產生的周圍情況信息。周圍情況信息的格式及其發送方法可根據針對服 務器3000預定義的通信協議而被不同地定義。例如,信號發送器3300以各種方法(諸如, 頻率調製方法、幅度調製方法和正交幅度調製(QAM)方法)對周圍情況信息進行調製,隨後 將周圍情況信息轉換為特定頻帶的RF信號,並通過天線輸出RF信號。
[0234] 雖然在圖19和圖20中伺服器被設置在道路之外並且從傳感器310、320、330和 340收集信息,但是伺服器可包括傳感器功能。
[0235] 圖21是示出包括傳感器的伺服器的配置的示例的示圖。參照圖21,伺服器4000 可被設置在十字路口的中心。為了道路交通,伺服器4000可被埋在地表面之下,或者服務 器4000可被設置在形成在道路上面的支架(諸如,交通燈和路標)上。伺服器4000可使 用置於每個道路方向上的傳感器來直接產生交通信息。
[0236] 在圖21中,伺服器4000可包括嵌入其中的相機。可提供多個相機,並且可在每個 道路方向上放置多個相機。以上已經參照圖19和圖20描述了使用由相機拍攝的照片確定 車輛的位置、速度和方向的方法,因此,省略重複的解釋。
[0237] 根據示例性實施例,圖21的伺服器4000可包括距離傳感器而不包括相機。也就是 說,如果在每個道路方向上設置了距離傳感器,則距離傳感器感測距接近距離傳感器的運 輸設備的距離。伺服器4000可使用它的位置與運輸設備之間的距離的改變來計算運輸設 備的速度和時間。因此,伺服器4000將關於伺服器位置、伺服器與運輸設備之間的距離、運 輸設備的方向和運輸設備的速度的信息進行組合,產生周圍情況信息,並將周圍情況信息 發送到本地區域中的每個運輸設備1000-1U000-2和1000-3。每個運輸設備可基於伺服器 400與每個運輸設備本身之間的距離、其它運輸設備與伺服器之間的距離、它們各自的速度 和其它運輸設備的速度來確定碰撞的可能性。
[0238] 根據示例性實施例,圖21的伺服器可包括通信模塊而不包括相機或距離傳感器。 也就是說,伺服器400可與本地區域中的每個運輸設備1000-1、1000-2和1000-3執行雙向 通信。伺服器4000在執行雙向通信時不必位於如圖21所示的十字路口的中心。伺服器 4000可位於能夠與每個方向的運輸設備進行通信的任何範圍內。
[0239] 為了執行雙向通信,伺服器4000可在本地區域中廣播各種連接信息(諸如,服務 集標識符(SSID)、加密密鑰、網際網路協議(IP)地址和接收頻帶)。進入本地區域的運輸設 備1000-1、1000-2和1000-3接收廣播的連接信息,並使用連接信息執行與伺服器4000的 配對。
[0240] 如果完成了配對,則伺服器4000接收運輸設備1000-1、1000-2和1000-3的運動 信息。運動信息可以是速度信息、GPS坐標值、車輛的類型和運動方向。
[0241] 伺服器4000將在本地區域中收集的運動信息進行組合,產生周圍情況信息,並將 產生的周圍情況信息發送到本地區域中的運輸設備1〇〇〇-1、1〇〇〇-2和1000-3中的每個運 輸設備。可以以各種方法(諸如,單播、多播或廣播)實現發送的方法。
[0242] 當執行雙向通信時,運輸設備1000-1、1000-2和1000-3可向伺服器4000通知它 們各自的狀態。例如,當運輸設備1000-1、1000-2和1000-3提前向伺服器4000通知它們的 外部狀態(諸如,輪胎內壓或制動狀態、當前速度和由導航程序確定的前行路徑)或向服務 器4000通知用戶狀態(諸如,打瞌睡駕駛、酒駕或用戶沒有保持眼睛向前)時,伺服器4000 可基於這些信息確定危險元素。
[0243] 圖22是示出根據圖21的示例性實施例的伺服器4000的配置的框圖。參照圖22, 伺服器4000包括通信單元4100、存儲器4200和控制器4300。
[0244] 通信單元4100接收本地區域中的每個運輸設備的運動信息。存儲器4200存儲接 收到的運動信息。控制器4300將存儲的運動信息進行組合,並按預定時間間隔產生周圍情 況信息。周圍情況信息可包括各種信息,諸如在本地區域中的每個運輸設備的真實位置、運 動速度、運動方向和類型。控制器4300控制通信單元4100將產生的周圍情況信息發送到 本地區域中的每個運輸設備。
[0245] 因此,本地區域中的每個運輸設備可獲得關於其它運輸設備的運動狀態的信息, 可估計與它本身碰撞的可能性,並可顯示合適的信息。
[0246] 根據示例性實施例,可通過使用蜂窩網絡進行通信的基站來實現伺服器。在這種 情況下,車輛可通過將US頂卡直接插入設置在車輛中的透明顯示設備中或使用連接到車 輛的行動電話來與伺服器進行通信。
[0247] 伺服器可通過安裝在每個車輛中的USIM卡或行動電話來產生各種周圍情況信息 (諸如每個車輛的位置、運動速度、運動方向),並可將周圍情況信息發送到伺服器管理的 小區中的車輛。發送的數據可僅包括位置和速度,並且相應區域的索引可被添加。區域的 索引是指唯一地分配給每個區域的標識信息。也就是說,一個小區可被劃分為多個區域,並 且可對每個區域分配索引。在這種情況下,每個區域中的車輛僅檢測分配給它們的區域的 索引的信息,並可使用檢測到的信息確定它們的區域中的危險元素。這種區域索引可根據 各種標準(諸如,行政區域(例如,市、縣、州和國家)或道路名稱、交叉路口和頻繁發生事 故的區域)被分配。區域索引可由伺服器運營商定義,並可與運輸設備共享。運輸設備通 知伺服器與運輸設備所位於的區域相應的區域索引,伺服器可選擇性地發送與接收到的區 域索引相應的信息或與區域索引鄰近的相關數據。
[0248] 當車輛從與車輛的當前位置無關的伺服器接收到周圍情況信息,或接收到關於與 車輛的位置無關的區域的周圍情況信息時,車輛可將接收到的信息丟棄,或可存儲接收到 的信息,從而當車輛在將來行駛在相關區域時可使用該信息。
[0249] 以上,已經對通過伺服器抓取周圍情況的各種示例性實施例進行了描述。然而,根 據另一示例性實施例,運輸設備可在沒有伺服器的情況下通過相互交換信息來抓取周圍情 況。
[0250] 圖23是用於解釋在沒有伺服器的情況下通過相互通信的運輸設備獲得周圍情況 信息的方法的示圖。參照圖23,當第一運輸設備1000-1的通信範圍(區域1)與第二運輸 設備1000-2的通信範圍(區域2)相互重疊時,這兩個運輸設備1000-1和1000-2可識別 彼此的運動信息。因此,每個運輸設備1000-1和1000-2確定碰撞的可能性,並根據確定的 結果將信息顯示在設置在每個運輸設備中的透明顯示器上。
[0251] 在圖23中,每個運輸設備1000-1和1000-2周期性地廣播它們自己的運動信息, 並以RF通信方法接收由其它運輸設備廣播的運動信息。也就是說,運輸設備可包括用於相 互交換RF信號的天線,並可使用該天線交換運動信息。
[0252] 根據情況,可根據各種無線通信協議(諸如,藍牙,Zigbee和IEEE)執行通信方法。
[0253] 另一方面,可由附接到相應運輸設備的外部的相機而非外部伺服器或外部運輸設 備來獲得周圍情況?目息。
[0254] 圖24是使用外部相機獲得周圍情況信息的示例性實施例的示圖。參照圖24,多個 外部圖像拾取單元161-1和161-2可附接到運輸設備的外部。外部圖像拾取單元161-1和 161-2的數量、放置位置和形狀可以以不同方式被實現。
[0255] 在圖24中,第一外部圖像拾取單元161-1被置於左側視鏡的下部,第二外部圖像 拾取單元161-2被置於右側視鏡的下部。控制器120可根據用戶的意圖輸出與由第一外部 圖像拾取單元161-1或第二外部圖像拾取單元161-2拍攝的圖像相應的信息。例如,當用 戶打開左方向指示器,或將手柄向左轉動超過預定程度時,控制器120可激活左側的第一 外部圖像拾取單元161-1,並可接收由第一外部圖像拾取單元161-1拍攝的圖像。控制器 120分析接收到的圖像,並確定在左方向上是否存在危險元素,並且當確定在左方向上存在 危險元素時,將關於危險元素的信息30顯示在透明顯示器110上。另一方面,當用戶打開右 方向指示器,或將手柄向右轉動超過預定程度時,控制器120可激活右側的第二外部圖像 拾取單元161-2,並可接收由第二外部圖像拾取單元161-2拍攝的圖像。因此,控制器120 確定在右方向上是否存在危險元素,並根據確定的結果顯示信息30。
[0256] 信息30的顯示位置可被固定到用戶前面的前表面,或可根據轉動方向而改變。例 如,當用戶向左轉動時,信息30可被顯示在透明顯示器110的左側區域上,並且當用戶向右 轉動時,信息30可被顯示在透明顯示器110的右側區域上。
[0257] 雖然在圖24中信息30是警告消息,但是由第一外部圖像拾取單元161-1或第二 外部圖像拾取單元161-2拍攝的圖像可被圖形處理,並且可如實被顯示在透明顯示器110 上。因此,關於通過側視鏡無法看到的盲區的屏幕可透過透明顯示器110如實被提供。
[0258] 雖然在以上描述的示例性實施例中,關於可能碰撞的外部對象的信息被顯示在透 明顯示器110上,但是這不應被理解為限制性的。例如,如果外部圖像拾取單元161被置於 車輛的前格柵上並監視車輛保險槓,則用戶可在停車時查看由外部圖像拾取單元161拍攝 的圖像。
[0259] 圖25是示出用於使用透明顯示器識別盲區的方法的示圖。參照圖25,外部圖像 拾取單元161被置於運輸設備1000的前格柵上。外部圖像拾取單元161在預定角度(Θ ) 的拍攝範圍內進行拍攝。拍攝範圍可根據從保險槓的上端查看的方向被設定。雖然在圖25 中僅示出了一個外部圖像拾取單元161,但是多個外部圖像拾取單元161可按照間隔相互 並行地排列,並可拍攝保險槓。
[0260] 當用戶10選擇停車模式時,控制器120對由外部圖像拾取單元161拍攝的圖像進 行圖形處理,並將圖像顯示在透明顯示器110的下端。在這種情況下,用戶可在查看真實場 景的圖形圖像30時,實時檢查保險槓的端部是否觸碰到外部對象。
[0261] 此外,控制器120可以以各種方式從各種源接收周圍情況信息,並可根據周圍情 況信息將各種信息顯示在透明顯示器110上。因此,增加了透明顯示設備的利用率,並還可 減小運輸設備的碰撞風險。
[0262] 圖26是示出根據示例性實施例的顯示信息的透明顯示設備的示圖。
[0263] 參照圖26,透明顯示設備可使用車輛的前進方向和速度以及危險元素的前進方向 和速度來獲得估計的碰撞點,並還可顯示關於估計的碰撞點的信息。
[0264] 在圖26中,假定:危險元素的位置是PQ(XQ,Y。),設置在車輛中的透明顯示器110 的中心點是P 1G1, Y1),估計的碰撞點是P2(X2, Y2),用戶眼睛的位置是P3(X3, Y3),看到估計 的碰撞點的用戶的位置是P4 (X4, Y4),從用戶的位置起關於危險元素的信息應被顯示的位置 是P5(X5, Y5)。在這種情況下,由於透明顯示器110的中心點P1是基於車輛1000的當前位 置確定的,所以P 1可被視為車輛1000的當前位置。
[0265] 可基於車輛1000的當前位置P1、前進方向和速度V1以及危險元素2000的當前位 置P tl和速度V 2來確定估計的碰撞點P 2。車輛1000的前進方向可通過在車輛1000中計算 出的偏航角來確定。偏航角可以以各種方法來計算。
[0266] 例如,偏航角可通過設置在車輛1000中的地磁傳感器來計算。
[0267] 例如,伺服器可通過識別道路上的車輛的前進方向來計算偏航角。也就是說,當服 務器確定車輛沿特定道路運動時,伺服器可基於道路的布局方向來確定車輛的前進方向。 在這種情況下,即使在車輛1000中沒有設置單獨的傳感器,也可僅基於地圖和車輛的位置 ?目息來獲得前進方向。
[0268] 估計的碰撞點匕可由車輛1000計算,或者可選地,可由以上描述的在各種示例性 實施例中的伺服器計算。
[0269] 用戶眼睛的位置P3(X3, Y3)可通過拍攝用戶的人臉區域並計算人臉區域與透明顯 示器110之間的距離和位置來計算。
[0270] 當用戶眼睛的位置P3和估計的碰撞AP2被計算出時,透明顯示設備100獲得連接 PJP P 2的線與透明顯示器110相交的交點P 4。連接己和P 2的線可通過以下等式表示:
[0271] [等式 1] Υ3-Υ2
[0272] F =-(Χ-Χ3) + Υ3 Χ3-Χ2
[0273] 透明顯示器110的表面可通過以下等式表示:
[0274] [等式 2]
[0275] Y = tan Θ (X-Xl)+Yl
[0276] 透明顯示設備100可組合等式1和等式2,並可計算它們的交點P4 (X4, Y4)。
[0277] 透明顯示設備100可在點匕處顯示指示估計的碰撞點的圖形對象(諸如,文本或 圖像)。
[0278] 此外,透明顯示設備100計算連接P3和危險元素的位置Ptl的線與透明顯示器110 相交的交點P5。
[0279] 連接己和P。的線可通過以下等式表示:
[0280] [等式 3] Vr^ _ VQ
[0281] Y =-{X-XQ) +YQ X3-X0
[0282] 透明顯示設備100可組合等式3和等式2,並可計算它們的交點P5。
[0283] 透明顯示設備100可在點P5處顯示用於呈現危險元素的信息。透明顯示設備100 實時地計算P 5,並在該點顯示信息,使得用戶可一眼察覺到被障礙物20遮擋的危險元素 2000的存在以及該危險元素2000的位置。
[0284] 如在圖26的示例性實施例中描述的,透明顯示設備100可使用等式1、2和3確定 危險元素,並可確定透明顯示器110的哪塊區域將顯示關於估計的碰撞點或危險元素的信 息。在圖26中描述的確定的方法和等式可以以相同的方式被應用到在以上描述的示例性 實施例中描述的確定危險元素或確定信息顯示區域的處理。
[0285] 雖然在以上描述的示例性實施例中通過透明顯示器提供關於危險元素的信息,但 是可通過透明顯示器提供從外部源提供的拍攝的圖像,而不用直接確定危險元素。
[0286] 圖27是用於解釋提供拍攝的圖像的透明顯示設備的操作的示圖。參照圖27,包括 相機的伺服器3000可被置於十字路口的中心。伺服器3000拍攝每個方向上的車輛,並廣 播對車輛拍攝的圖像。
[0287] 當進入十字路口的運輸設備1000接收到在不同方向上進入的另一運輸設備2000 的拍攝的圖像時,拍攝的圖像30如實被顯示在透明顯示器110上。根據該示例性實施例, 降低了確定另一運輸設備是否是危險元素的計算負擔,此外,用戶可直觀地獲知周圍道路 情況。
[0288] 此外,雖然在以上描述的示例性實施例中已經描述了由包括透明顯示器的透明 顯示設備執行的操作,但是這些操作可由用戶終端設備(諸如,行動電話、個人數字助理 (PDA)、平板PC或膝上型PC)執行,而不由透明顯示設備執行。
[0289] 圖28示出連接到運輸設備1000的用戶終端設備2800的狀態。在圖28中,運輸 設備1000和用戶終端設備2800以無線通信方法相互連接。
[0290] 參照圖28,用戶終端設備2800可連接到安裝在運輸設備1000中的車輛控制系統、 主機或中控儀錶盤,或連接到嵌入運輸設備1000中的或連接到運輸設備1000的導航裝置。 在下文中,為了便於解釋,將把用戶終端設備2800描述為連接到運輸設備1000。
[0291] 當運輸設備1000和用戶終?而設備2800如圖28中所不相互連接時,用戶終?而設備 2800從外部伺服器接收周圍情況信息,並使用周圍情況信息來控制運輸設備的操作。周圍 情況信息可包括如上所述的各種信息,諸如關於在由伺服器管理的本地區域內存在的各種 對象的信息、拍攝的圖像和交通信息。
[0292] 用戶終端設備2800使用設置在其中的GPS晶片來確定運輸設備1000的位置。也 就是說,由於當用戶終端設備2800連接到運輸設備1000時,用戶終端設備2800可被視為 位於運輸設備1000中,所以用戶終端設備2800的位置可被視為運輸設備的位置。
[0293] 用戶終端設備2800分析周圍情況信息,並識別周圍對象,並且考慮運輸設備1000 的位置、運動方向和運動速度在周圍對象之中確定可能發生碰撞的危險元素。用戶終端設 備2800向運輸設備1000提供關於確定的危險元素的信息。運輸設備1000將信息顯示在 透明顯示器上。
[0294] 圖29是示出根據示例性實施例的用戶終端設備的配置的框圖。參照圖29,用戶終 端設備2800包括接口 2810、控制器2820和通信單元2830。
[0295] 接口 2810是連接到運輸設備1000的元件。接口 2810可以以有線方法或無線方 法連接到運輸設備1000。具體地,接口 2810可通過使用各種通信接口(諸如,Wi-Fi、藍牙、 IEEE、Zigbee、近場通信(NFC)和USB接口)來實現。
[0296] 通信單元2830從外部伺服器接收周圍情況信息。通信單元2830可使用用於接收 RF信號的RF接收模塊和用於接收廣播信息的調諧器來接收周圍情況信息,或可根據各種 通信方法(諸如,Wi-Fi、藍牙、IEEE和Zigbee)來接收周圍情況信息。
[0297] 控制器2820使用通過通信單元2830接收到的周圍情況信息和運輸設備的位置來 確定可能與運輸設備碰撞的危險元素。控制器2820通過接口 2810向運輸設備1000提供 用於通知確定的危險元素的信息。
[0298] 控制器2820可使用設置在用戶終端設備2800中的GPS晶片(未示出)來確定運 輸設備的位置。
[0299] 此外,控制器2820可分析周圍情況信息,並識別周圍對象,並可將在周圍對象之 中的參考運輸設備的位置所確定的可能碰撞的周圍對象確定為危險元素。以上已經描述了 確定的方法,因此省略重複的解釋。
[0300] 用戶終端設備2800可根據用戶終端設備2800的種類而包括各種元件。具體地, 用戶終端設備2800可具有圖12的配置。
[0301] 當危險元素被確定時,控制器2820向運輸設備1000提供關於危險元素的信息。運 輸設備1000可基於提供的信息將信息顯示在透明顯示器上。如上所述,可以以各種形式來 顯示信息。
[0302] 根據如上所述的各種示例性實施例的透明顯示設備不僅可被應用到車輛,而且還 可以被應用到各種運輸設備(諸如,船舶、飛機、摩託車和自行車)。具體地,如果透明顯示 設備被應用到船舶,則船舶的底面可由透明顯示器實現。在這種情況下,透明顯示器可與魚 傳感器(fish sensor)互鎖,並可在存在魚的方向上顯示關於魚的各種信息。此外,可由雷 達對海底的結構進行探索,並可在透明顯示器上將探索到的海底的結構顯示為3D圖形對 象。
[0303] 以上描述的各種方法可被生成為軟體,並且軟體可被安裝在透明顯示設備或顯示 控制系統中並被執行。
[0304] 具體地,根據示例性實施例,可準備存儲用於執行以下操作的程序的非暫時性計 算機可讀介質:接收周圍情況信息;使用周圍情況信息識別周圍對象,並使用周圍情況信 息和運輸設備的位置信息來確定可能與運輸設備碰撞的危險元素;將用於向用戶通知危險 元素的信息顯示在透明顯示器上,並且該非暫時性計算機可讀介質可被提供給各種設備。 因此,可根據以上描述的示例性實施例將信息顯示在透明顯示器上。
[0305] 非暫時性計算機可讀介質是指半永久性地存儲數據而非將數據存儲極短時間 (諸如,寄存器、高速緩存和內存)的並可由設備讀取的介質。具體地,可在非暫時性計算機 可讀介質(諸如,緻密盤(CD)、數字多功能盤(DVD)、硬碟、藍光碟、通用串行總線(USB)、存 儲卡和只讀存儲器(ROM))中存儲並可提供以上描述的各種應用或程序。
[0306] 以上描述的實施例可被記錄在包括用於實現由計算機實施的各種操作的程序指 令的計算機可讀介質中。所述介質還可單獨包括程序指令、數據文件、數據結構等或包括以 上組合。記錄在介質上的程序指令可以是為了實施例的目的而被專門設計和構造的程序指 令,或者這些程序指令可以是對於計算機軟體領域的技術人員而言公知和可用的。計算機 可讀介質的示例包括磁介質(諸如,硬碟、軟盤和磁帶);光介質(諸如,CD ROM盤和DVD); 磁光介質(諸如,光碟);以及專門被配置為存儲和執行程序指令的硬體裝置(諸如,只讀 存儲器(ROM)、隨機存取存儲器(RAM)和快閃記憶體等)。計算機可讀介質還可以是分布式網絡, 從而以分布方式來存儲並執行程序指令。程序指令可由一個或更多個處理器執行。計算機 可讀介質還可在執行(如同處理器處理)程序指令的至少一個專用集成電路(ASIC)或現 場可編程門陣列(FPGA)中實施。程序指令的示例包括諸如由編譯器產生的機器代碼和包 含可由計算機使用解釋器執行的更高級代碼的文件兩者。以上描述的裝置可被配置為用作 一個或更多個軟體模塊以執行以上描述的實施例的操作,反之亦然。
[0307] 前述示例性實施例和優點僅是示例性的,並不應被解釋為對本發明構思的限制。 所述示例性實施例可被容易地應用於其他類型的設備。此外,所述示例性實施例的描述意 在說明而非限制權利要求的範圍,並且對於本領域的技術人員而言,很多替代形式、修改和 變化將是顯而易見的。
[0308] 儘管已示出和描述了一些實施例,但本領域的技術人員將理解,在不脫離本發明 的原理和精神的情況下,可在這些實施例中進行改變,本發明的範圍在權利要求及其等同 物中限定。
【權利要求】
1. 一種在運動裝置中使用的透明顯示設備,所述透明顯示設備包括: 通信單元,接收周圍情況信息; 控制器,使用周圍情況信息和運動裝置的位置信息來確定可能與運動裝置碰撞的危險 元素; 透明顯示器,顯示用於向用戶通知危險元素的信息。
2. 如權利要求1所述的透明顯示設備,其中,控制器使用周圍情況信息來識別周圍對 象,並在周圍對象之中確定危險元素。
3. 如權利要求2所述的透明顯示設備,還包括:位置檢測器,檢測用戶眼睛的位置,其 中,控制器根據位置檢測器的檢測結果來確定用戶的視場,將在所述視場內被障礙物遮擋 的周圍對象確定為危險元素,並參考用戶眼睛的位置來確定所述信息在透明顯示器上的顯 示位置。
4. 如權利要求3所述的透明顯示設備,其中,控制器將透明顯示器的所有區域之中的 使用戶的視場內存在的第一對象和用戶眼睛的位置連接的第一穿透區域與使第一對象後 面存在的第二對象和用戶眼睛的位置連接的第二穿透區域進行比較以確定第一穿透區域 和第二穿透區域是否相互重疊,並且當確定第一穿透區域與第二穿透區域相互重疊時,控 制器確定第一對象被視為對第二對象的障礙物。
5. 如權利要求3所述的透明顯示設備,其中,控制器將關於被障礙物遮擋的危險元素 的信息顯示在透明顯示器的所有區域之中的穿透區域上,其中,障礙物通過所述穿透區域 被看到。
6. 如權利要求2所述的透明顯示設備,還包括:位置檢測器,檢測用戶的位置,其中,控 制器將所述信息顯示在透明顯示器的所有區域之中的與用戶的位置相應的區域上。
7. 如權利要求1所述的透明顯示設備,其中,控制器根據危險元素的特性來調整顯示 在透明顯示器上的信息的以下項中的至少一項:顏色、大小、顯示時間、顯示位置、閃爍狀 態、字體和文本粗度。
8. 如權利要求1所述的透明顯示設備,其中,所述信息在透明顯示器上被顯示在危險 元素所處於的方向上, 其中,所述信息是表示以下項中的至少一項的圖形對象:危險元素的位置、危險元素的 種類、運動裝置與危險元素之間的距離、危險元素的接近速度和估計的碰撞時間。
9. 如權利要求1所述的透明顯示設備,其中,當運動裝置進入本地區域時,通信單元從 管理本地區域的伺服器接收本地區域的周圍情況信息, 其中,運動裝置是車輛,透明顯示器包括車輛的擋風玻璃。
10. -種在運動裝置中使用的透明顯示設備的顯示方法,所述方法包括: 接收周圍情況信息; 使用周圍情況信息和運動裝置的位置信息來確定可能與運動裝置碰撞的危險元素; 將用於向用戶通知危險元素的信息顯示在透明顯示器上。
11. 如權利要求10所述的方法,其中,確定危險元素的步驟包括:使用周圍情況信息來 識別周圍對象,並在周圍對象之中確定危險元素。
12. 如權利要求11所述的方法,還包括: 檢測用戶眼睛的位置; 參考用戶眼睛的位置來確定所述信息在透明顯示器上的顯示位置, 其中,確定危險元素的步驟包括:使用用戶眼睛的位置來確定視場,並將在所述視場內 被障礙物遮擋的周圍對象確定為危險元素。
13. 如權利要求12所述的方法,其中,確定危險元素的步驟包括: 將透明顯示器的所有區域之中的使用戶的視場內存在的第一對象和用戶眼睛的位置 連接的第一穿透區域與使第一對象後面存在的第二對象和用戶眼睛的位置連接的第二穿 透區域進行比較以確定第一穿透區域與第二穿透區域是否相互重疊; 當確定第一穿透區域與第二穿透區域相互重疊時,確定第一對象被視為對第二對象的 障礙物。
14. 如權利要求11所述的方法,還包括:檢測用戶的位置, 其中,將用於向用戶通知危險元素的信息顯示在透明顯示器上的步驟包括:將所述信 息顯示在透明顯示器的所有區域之中的與用戶的位置相應的區域上。
15. 如權利要求10所述的方法,還包括:根據危險元素的特性來調整顯示在透明顯示 器上的信息的以下項中的至少一項:顏色、大小、顯示時間、顯示位置、閃爍狀態、字體和文 本粗度。
【文檔編號】G08G1/0968GK104428707SQ201380037261
【公開日】2015年3月18日 申請日期:2013年7月10日 優先權日:2012年7月10日
【發明者】李韓成, 李昌秀, 李根鎬 申請人:三星電子株式會社