沉浸式和交互式的視頻會議房間環境的製作方法
2023-05-16 22:48:06 3
沉浸式和交互式的視頻會議房間環境的製作方法
【專利摘要】本發明涉及一種沉浸式和交互式的視頻會議房間環境。一種用於協同視頻會議環境的排布被公開。具有基本上「L形狀」的配置的顯示屏允許同時對遠程參與者的視頻和協同材料進行顯示，這為與協同材料進行交互的會談參與者提供了更自然的交互。此外，當會談參與者與協同材料交互時，攝像頭被排布為聚焦於該會談參與者的肩上。攝像頭這樣的位置向遠程用戶提供了協同者的更自然的視圖。
【專利說明】沉浸式和交互式的視頻會議房間環境
【技術領域】
[0001] 本公開一般地涉及諸如視頻會議（videoconference)系統和內容協同 (collaboration)系統之類的協同會議系統，並且更具體地涉及集成的視頻會議--電子 協同工作空間環境。
【背景技術】
[0002] 視頻會議技術的進步已經開始帶來效益，並且針對一些會談（meeting),視頻會議 已經提供了對親身會談的合理替代。當前技術水平的視屏會議系統向一個或兩個或更多用 戶提供了專用攝像頭和監視器，利用革新的房間排布，通過將監視器和揚聲器放置在如果 遠程會談參與者親自參加的話他們將就坐的位置來使得遠程參與者感覺好像他們處於相 同的房間。這樣的系統更好地達成了面對面通信的範例，其中會談參與者可以觀看無法在 電話會議中達成的面部表情和身體語言。這些系統中的一些允許內容、應用或計算機屏幕 被共享。然而關於更為協同的會談，這樣的系統常常是不足的，其中在這些更為協同的會 談中兩個或更多的成員可能想要在白板上共同工作，或者甚至想要同時觀看演示以及演講 者。
[0003] 最近，協同系統已經有了進步，其中兩個或更多用戶可以遠程地在相同的工作 空間上工作，相同的工作空間例如是可以作為白板和視頻監視器進行一體化工作的電 子板。這樣的系統改善了協同者們在共享空間中工作的能力，但卻具有差的用戶參與 (engagement)特徵。這些系統最多可以允許遠程用戶的小視頻圖像被顯示在電子板上，而 板的剩餘部分被保留用於協同空間。
[0004] 在對達成協同系統和視頻會議技術的最好方面的嘗試中，有時這兩種系統將被部 分署為並行的。然而，這種途徑留下了許多希望的空間，因為這兩種系統未被集成，並且沒 有哪一種技術被配置為考慮無縫集成方式的其它技術的存在。
【發明內容】
[0005] 根據一個方面，提供了一種系統，包括：顯示屏，所述顯示屏可以被分割為協同分 區和視頻分區，所述協同分區和所述視頻分區被以少於180度的角度偏移；肩視圖攝像頭， 所述肩視圖攝像頭的位置接近視頻屏幕的所述視頻分區，並且被配置為捕獲接近所述視頻 屏幕的所述協同分區的演示者區域並且捕獲會談參與者區域。
[0006] 根據另一方面，提供了一種視頻會議系統，包括：本地視頻會議顯示屏，包括：第 一分區；中心分區，所述中心分區的位置與所述第一分區和第三分區相鄰並且在所述第一 分區和第三分區之間；以及所述第三分區，每個分區被從與它相鄰的分區偏移小於180度 的角度。
[0007] 根據又一方面，提供了一種視頻會議房間排布，包括：協同視頻會議顯示屏排布， 所述協同視頻會議顯示屏排布為基本上凹型的配置，所述顯示屏被配置為同時地在所述顯 示屏的視頻分區中顯示視頻內容以及在所述顯示屏的協同分區中顯示協同工作空間；演示 者區域，所述演示者區域與所述顯示屏的所述協同分區相鄰；以及肩視圖視頻攝像頭，所述 肩視圖視頻攝像頭被配置為捕獲所述演示者區域。
【專利附圖】
【附圖說明】
[0008] 為了描述可以獲得本公開的上述特徵和其它特徵的方式，被在上文簡要說明的原 理的更具體說明，將被通過參考它的示出在附圖中的具體實施例來呈現。應當理解，這些圖 示僅描繪了本公開的示例性實施例，並且因此將不被視為限制它的範圍，本文的原理的附 加的特性和細節被通過對附圖的使用來描述和討論，其中：
[0009] 圖1示出了沉浸式和交互式的視頻會議房間環境的陳設的示例性俯視圖；
[0010] 圖2示出了示例性本地和遠程交互視頻會議房間環境；
[0011] 圖3示出了交互視頻會議房間環境的示例性室內視角的視圖；
[0012] 圖4A-4C示出了交互視頻會議房間環境的顯示屏排布的一個實施例的示例性細 節；
[0013] 圖5A和5B示出了兩種示例性系統模式；
[0014] 圖6示出了示例性本地系統實施例；
[0015] 圖7示出了示例性網絡系統實施例；
[0016] 圖8示出了使得多個站點處的會談參與者可以彼此協同的示例性方法；
[0017] 圖9示出了被配置為排布呈現在顯示屏上的內容窗口的計算設備的示例性實施 例；
[0018] 圖10示出了在顯示屏上呈現內容窗口的示例性實施例；
[0019] 圖11示出了在顯示屏上呈現多個內容窗口的示例性實施例；
[0020] 圖12示出了排布內容窗口的呈現位置的示例性方法實施例；
[0021] 圖13示出了管理參與者交互的多個層級（class)的示例性方法實施例；
[0022] 圖14示出了被配置為運行於協同會議系統兼容的應用的個人計算設備；
[0023] 圖15示出了運行在個人計算設備上的應用的示例性顯示屏；
[0024] 圖16A和16B示出了協同屏幕顯示的示例性實施例；
[0025] 圖17示出了用來創建可以被共享的內容的內容創建屏幕的示例性實施例；
[0026] 圖18示出了從協同顯示屏上載或下載內容的示例性方法實施例；
[0027] 圖19示出了用於共享內容至顯示屏幕或者從該顯示屏幕下載內容的示例性用戶 界面實施例；並且
[0028] 圖20A和20B示出了示例性計算系統實施例。
【具體實施方式】
[0029] 鍵
[0030] 公開了與協同會談系統，尤其是沉浸式和交互式協同會談系統房間環境相關的系 統、方法、設備和非易失性計算機可讀存儲介質。
[0031] 與遠程參與者的協同會談正變得更為流行。這要求今天的視頻會議系統不僅向用 戶（本地用戶）提供遠程參與者的視頻，還提供會談材料（通常為電子文檔）。
[0032] 多數現有視頻會議系統是十分受限的。它們需要參與者一直坐在預定的位置上。 當用戶需要在會談中呈現電子文檔時，系統通常在兩個分離的區域顯示遠程參與者的視頻 和該電子文檔。
[0033] 然而，遠程參與者的視頻和電子文檔之間的分離導致了協同會談中的一些問題。 這些問題將使得整個遠程協同的體驗打折扣。例如，這些系統未能支持不同類型的會談。由 於攝像頭設定的約束，多數現有視頻會議系統被設計為僅支持坐下時的情景。當用戶站起 時，他們的手將不再被顯示在視頻中。另一個附加的示例是，現有系統未能顯示遠程參與者 和電子文檔之間的交互。當人們在相同的位置召開協同會談時，他們可以看到文檔材料和 其它會談參與者之間的每次交互，例如當其它參與者在文檔上指點時、當他們開始做出編 輯時等。
[0034] 本技術通過提供調節具有或不具有電子材料的視屏會議會談的系統來改善協同 視頻會議體驗，調節是通過提供可被分割為協同分區和視頻分區的可分割顯示屏來達成 的。可分割的顯示屏由被集成作為一個顯示設備來執行的多個面板組成。面板的角度配置 被排布為提供某種程度的環繞（wrap around)或"L形狀"或凹型配置。當沒有要顯示的電 子材料時，該環繞系統可以僅被用於與來自遠程站點的視頻全景視圖進行視頻會議。當電 子協同材料在會談中被使用時，顯示屏被分割成視頻部分和協同部分。在一些實施例中，視 頻部分和協同部分被以一角度關係排布，其中協同分區和視頻分區相對於彼此被偏移少於 180度的角度。在一些實施例中，該角度為大約90度的偏移。
[0035] 該角度關係支持模仿真實世界的肩並肩的（shoulder-to-shoulder)協同體驗， 其中當用戶在白板上書寫時，該用戶在他/她肩膀旁邊有其他協同者。為進一步支持肩並 肩協同體驗，肩視圖攝像頭被排布在顯示屏的視頻部分上或周圍並且被對焦於臨近該顯示 屏的協同分區的區域，從而捕獲會談參與者與顯示屏的協同分區的交互。
[0036] 在一些實施例中，顯示屏的角度排布是通過將組成顯示屏的面板排布成三個分區 來創建的，這三個分區為：第一分區、與第一和第三分區相鄰並且在第一和第三分區之間的 中心分區以及第三分區。每個分區可以從它的鄰接分區被偏移小於180度的角度。
[0037] 如上文指出的，顯示屏可以被配置為在全景視頻模式和協同模式之間切換。這樣 的配置由顯示屏處理器控制，顯示屏處理器通常控制顯示屏從一種模式到另一種的切換並 且控制顯示屏的演示部分和協同部分將被放置在該顯示屏上的何處。
[0038] 除了對顯示屏的排布，當與對顯示屏的排布結合使用時，對房間的排布也增強了 協同視頻會議體驗。如上所述，顯示屏可以被配置為具有視頻分區和協同分區的大體上凹 型的配置。房間可以被配置為具有鄰接於顯示屏的協同分區的演示者（presenter)區域以 及被配置為捕獲演示者區域的肩視圖（shoulder-view)視頻攝像頭。
[0039] 其他協同者通常就坐在相較演示者區域距離顯示屏的協同分區較遠的前景 (foreground)會談參與者區域。前景會談參與者區域被配置為使得該區域內的協同者可以 容易地接近顯示屏，或者使得他們可以保持位於他們基本在攝像頭的全視圖中的前景會談 參與者區域中，並且可以被以幾乎真人的尺寸呈現至遠程站點。
[0040] 視頻會議房間還被排布為具有相較前景會談參與者區域距離顯示屏較遠的背景 (background)會談參與者區域，以使得前景會談參與者區域中的人或對象可以從攝像頭的 視圖中遮擋背景會談參與者區域中的人或對象。就坐在房間的這部分的參與者可以通過便 攜式電子設備來與協同視頻會議系統交互。
[0041] 房間棑布
[0042] 下文討論本公開的各種實施例。儘管討論了具體實現方式，應當理解這僅被針對 示例的目的而做出。相關領域技術人間將認識到在不背離本公開的精神和範圍的情況下， 可以使用其它組件和配置。
[0043] 公開的技術解決了本領域對這樣的系統的需要：該系統提供更為自然的會議環 境，其特別適合於（儘管非排他的）交互式和協同式視頻會議會談，在其中會談參與者在顯 示屏幕的協同分區上交互並且在顯示屏幕的視頻分區上自然地觀看彼此。
[0044] 圖1示出了沉浸式和交互式的視頻會議房間環境100的陳設的示例性俯視圖，房 間環境100在主持和參與交互式和協同式視頻會議會談中是有用的，其中會談參與者在顯 示屏的協同分區上交互並且在顯示屏的視頻分區上自然地觀看彼此。房間100包括基本為 "L形狀"配置的顯示屏102。顯示屏102可以由一個或多個面板組成。例如，圖1示出了顯 示屏102由至少5個面板102a、102b、102c、102d和102e組成。面板102a和102b組成第 一分區，面板102d和102e組成第三分區，並且面板102c組成第二分區（中心分區）。在一 些使用模式中，第一分區、中心分區和第三分區可以被共同稱為視頻分區。每個分區彼此鄰 接，但相較彼此排布成一定的角度。第一分區（面板l〇2a和102b)和第三分區（面板102d 和102e)被以相對彼此小於180度的角度排布，在一些實施例中，第一分區和第三分區被以 相對彼此大約90度的角度排布。第一分區和第三分區都被以相較中心分區大約相同的角 度排布，其中該角度小於180度，並且在一些實施例中該角度為大約135度。這些面板一起 組成了一個可被任意分割為多個顯示分區的集成顯示屏幕。例如在一些實施例中，第一分 區或第三分區可以被指定為協同分區，而留下顯示屏的剩餘分區（例如，分別地，第三分區 和中心分區，或者第一分區和中心分區）被指定為視頻分區。
[0045] 顯示屏102被安裝在臺坪（apron) 104上，或者位於臺坪104上方。臺坪104在面 板前延伸一段距離並且起到防止會談參加者站立得太靠近顯示屏102的作用，從而減少對 顯示屏102的無意接觸，其可以導致對顯示屏102的損壞和/或正被註冊的非有意命令。
[0046] 圖1的交互視頻會議房間環境100還包括多個攝像頭106、108和110。攝像頭106 是被配置為捕獲房間的寬圖像的全景攝像頭。在一些實施例中，攝像頭106被配置為在全 景拍攝模式中使用，在該模式中整個顯示屏幕102被用於顯示會談參與者。如圖1所示，攝 像頭106位於並且靠近房間的中間。在一些實施例中，兩個具有更窄視場的攝像頭可替代 單一全景攝像頭。在這樣的實施例中，兩個攝像頭可以位於大體上彼此鄰接的位置以具有 類似的焦點。在一些實施例中，可以使用一個或多個鏡子以進一步對齊兩個攝像頭的焦點。
[0047] 攝像頭108是肩視圖攝像頭並可以被配置為在協同模式中使用，並且位於臨近 第三分區的邊緣且目標為演示者區112,從而當演示者正與顯示屏102的協同分區102a、 102b (亦作第一分區）交互時，該攝像頭被直接地指向演示者的肩膀。攝像頭108還可以捕 獲房間中的其它會談參與者，儘管該攝像頭的主要關注點在演示者處。
[0048] 攝像頭110是整個房間攝像頭並且在演示模式下使用，在該模式中系統適於沒有 室內協同者的更為傳統的演不。在一些實施例中，例如被在演不模式下利用的實施例中，房 間100可以被配置為不具有桌子115和前景會談參與者區域114。
[0049] 圖1的沉浸和交互式視頻會議室內環境100還示出了一些會談參與者區112、114 和116。演示者區112大約描繪出了演示者的交互區的輪廓。站在該區中的演示者可以與 顯示屏102的協同分區交互，同時可以越過她的右肩膀通過視屏攝像頭108看到顯示在顯 示屏102的視屏分區上的她的遠程觀眾。因此演示者可以通過從他們的肩膀上看過去來觀 看室內會談參與者，從而以與在白板上工作的協同者類似的方式來自然地與其它會談參與 者交互。因此演示者區112的特徵在於它是前景會談參與者區114和顯示屏102之間的、 演示者可以站立的區。另外，演示者區112的至少一部分的位置距離顯示屏102足夠近以 允許站在區112中的演示者與顯示屏102進行物理上的交互。
[0050] 前景會談參與者區114描繪了針對這樣的會談參與者的區域的輪廓：這些會談參 與者當前並未在演示者區112的屏幕中，但在會談的前景中。當顯示屏102處於全景模式 中時這些會談參與者位於攝像機106的全視圖中，或者當顯示屏處於協同模式中時這些會 談參與者位於攝像機108的視圖中。這些參與者將向遠程會議觀眾表現為大體上真人尺 寸。會談參與者區114還可以包括桌子115。如圖1中所示，桌子11基本上不遮擋前景會 談參與者接近屏幕。因此會談參與者區114的特徵在於相較演示者區112距離顯示屏112 更遠，並且具有顯示屏102的各部分中的至少一個部分的基本上未被遮擋的視圖。
[0051] 背景會談參與者區116描繪出了針對就坐在房間後部的會談參與者的區域的輪 廓。如果前景會談參與者未將他們從視圖中擋住，則這些參與者可以被在攝像頭106或攝 像頭108中的一個上觀看。背景會談參與者主要被預期為觀察者，儘管如將在下文中更詳 細論述的，這些會談參與者可以通過個人計算設備與屏幕上的內容交互而不是不得不接近 該屏幕。
[0052] 圖2示出了示例性本地和遠程交互視頻會議房間環境。如示出的，本地環境120 被示出在虛線示出的遠程環境120'旁邊。當通過肩視圖攝攝像頭108和108'被觀看時， 每個環境是彼此的鏡像。各個房間被布置為鏡像，是因為，當被捕獲時，兩種環境都將與用 戶在其中的環境看上去是一樣的。
[0053] 圖3示出了交互視頻會議房間環境100的示例性室內視角的視圖。再次，交互視頻 會議房間環境1〇〇被示出為其中具有顯示屏102。如示出的，顯示屏102由2X5柵格的多 個面板1029、1021'、1028、102扒10211、102 ￥、102￥、1021、1027和1022組成。圖3還示出了全 景攝像頭106以及肩視圖攝像頭108的示例性位置。還示出了來自前景會談參與者區114 的桌子115。
[0054] 除了已經指出的交互視頻會議房間環境100的特徵，環境100還包括揚聲器117 和麥克風118。在示出的實施例中，揚聲器117是安裝在牆上的，並且位於顯示屏102的第 一分區或第三分區的正後方，以便向遠程會談參與者給予立體聲效果。同樣地，麥克風118 位於顯示屏102的第一分區或第三分區的正上方，以便採集與一個麥克風或其它麥克風接 近的音頻，以使得捕獲的音頻的定向品質（directional quality)可以由揚聲器117在遠 程環境中回放。
[0055] 對本領域普通技術人員顯而易見的是，對攝像頭、揚聲器和麥克風的放置僅僅是 示例性的。此外，可以使用更多或更少的攝像頭、揚聲器和麥克風。儘管圖3中揚聲器和麥 克風的放置許可了將被利用的基本定向音頻特徵，如電話會議領域普通技術人所知的，揚 聲器和麥克風的陣列可以用來提供更先進的定向音頻特徵，例如基於個體周圍的聲場來識 別該指定個體正在講話的特徵。類似地，儘管圖1和圖3中攝像頭的放置提供了被視為最 重要的基本視圖，在本技術的一個實施例中，可以使用許多其它攝像頭來唯一地聚焦於會 議中的每個個體。如視頻分析和多路復用技術中已知的，視頻映射技術可以用於將許多攝 像頭的輸出混合為僅僅一個圖像。
[0056] 圖4A-4C示出了交互視頻會議房間環境的顯示屏排布的一個實施例的示例性細 節。圖4A示出了顯示屏排布102的俯視平面圖。在圖4A中，五個顯示面板的頂部被示出 為位於陣列中，以使得（組成第一顯示部分的）前兩個面板相對於中心部分以一定角度被 排布，中心部分進一步被排布為與（組成第三顯示部分的）後兩個面板有一定的角度。總 體上，面板的三個部分組成了大體上為凹型排布的顯示屏。在示出的實施例中，第一部分和 第三部分被排布為相對於中心部分具有135度的角度。
[0057] 圖4B示出了組成第一部分和中心部分的顯示屏的前視平面圖。其中示出了存在 兩行顯示屏--一行堆疊（stack)在另一行上。兩行顯示屏被支持在臺坪104之上。
[0058] 圖4C示出了組成第三部分和中心部分的顯示屏的前視平面圖。其中示出了存在 兩行顯示屏--一行堆疊在另一行上。兩行顯示屏被支持在臺坪104之上。
[0059] 本領域普通技術人員將會明白，儘管本文中顯示屏102被示出為由多個面板組 成，可以使用更多或更少的面板。在一些實施例中，可能僅有一個面板是必須的，例如柔性 0LED顯示屏。如果將使用柔性顯示屏，則將不需要顯示屏的各部分之間的角度關係，並且可 以使用連續彎曲顯示屏或部分彎曲顯示屏且仍然形成大體類似的配置。
[0060] 圖5A不出了不例性協同系統模式，其中顯不屏102被分割成協同部分102g和視 頻部分102h。對本領域普通技術人員顯而易見的是，儘管協同部分102g位於顯示屏102的 右側，但是協同部分102g可以位於顯示屏102的左側。
[0061] 圖5A還示出了使用本技術的兩個一起工作的協同者。協同者140是觀看遠程協 同者145與顯示屏102的協同部分102g交互的本地協同者。不僅可以在顯示屏102的視 頻部分102h上觀看遠程協同者145與顯示屏102交互，虛擬手147還反映了遠程協同者與 顯示屏102的交互，例如指向顯示屏上的位置、繪圖、擦除等。在一些實施例中，與顯示屏 102的協同部分102g的所有交互被反映到協同視頻會議的其它端點，從而其它協同者意識 到發生在板上的所有動作，就如同他們在相同地物理房間中與遠程協同者在一起時意識到 的那樣。
[0062] 圖5B示出了示例性全景模式，其中整個顯示屏102用於顯示遠程會談參與者的視 頻饋給（feed)。如圖5B所示，在該模式中，會談參與者可以在面對面對話中自然地加入彼 此，而不是被桌子遮擋和感知到距離。會談參與者能夠接近屏幕並且表現為如同當他們在 相同的物理房間中談話時一樣地站立。圖5B還示出了，對於所有會談參與者整個遠程房間 是可見的，因而也使得會談對他們更有吸引力。
[0063] 在一些實施例中，會談參與者可被識別和追蹤，並且他們的名字或其它標識符可 被用在出現在每個節目參與者的視頻圖像上方的標籤150中。如下面將更詳細討論的，本 技術可被配置有臉部識別軟體、骨架追蹤相機、語音識別軟體和/或定向音頻軟體等。這些 技術中的每個可被用來追蹤遍及會談房間的會談參與者的移動。此外，由於該系統可被配 置為追蹤會談參與者，因此還可被配置為記錄整個會談中與每個節目參與者交互有關的各 個元數據。
[0064] 另外，圖5B還示出了出席名冊152,包括已知參與該會談的每個會談參與者的名 字。在一些實施例中，這些名字可從與已知在該會談房間中的個人計算設備相關聯的用戶 帳戶來得出，或者它們可從會談邀請得出；它們還可由會談參與者輸入。
[0065]
[0066] 圖6示出了示例性系統實施例。示出的系統實施例可以代表由本地和遠程會談參 與者使用來進行交互視頻會議的系統。例如，本地和遠程會談參與者都可以訪問諸如系統 200之類的系統，系統可以用於在本地和遠程會談參與者之間通信。
[0067] 如示出的，系統200包括計算設備208。計算設備208可以是支持與其它計算設備 的網絡通信的任何類型的計算設備，例如，計算設備208可以是個人計算設備，例如臺式機 或工作站、商務伺服器或者可攜式計算設備，例如膝上型電腦、智慧型電話或平板PC，。計算設 備208可以包括示出在圖20A和20B中的計算設備的特徵、組件以及外圍設備中的一些或 全部。例如計算設備208可以包括如圖20A和20B所示的輸入和輸出設備。
[0068] 如示出的，計算設備208可以被配置為向顯示屏202輸出並且從觸摸設備204接 收輸入。儘管顯示屏202和觸摸設備204被示出為分離的設備，這僅出於示例性目的。顯 示屏202和觸摸設備204可以形成集成的觸摸顯示屏，其中顯示屏202代表設備的顯示部 分，並且觸摸設備204代表觸摸顯示屏硬體。
[0069] 在一些實施例中，觸摸設備204可以是用於傳輸和接收紅外光束的板（bezel)。在 利用觸摸板的實施例中，板可以被從本領域已知的板來修改。傳統的觸控螢幕幕板常常圍繞 顯示設備形成邊界並且在水平和垂直方向中發送紅外光束。然而由於顯示屏的第一部分和 第三部分都以某角度與中心部分接壤，並且不希望在顯示屏的部分之間放置板，因為水平 方向中紅外光束不能被傳輸。由此，板系統可以被修改以僅傳輸垂直光束，從而檢測顯不 屏上的接觸和手勢。在一些實施例中，觸摸設備204可以是另外類型的觸摸設備，例如層疊 (layer)在顯示屏202之上的電容觸摸設備或層疊在顯示屏202之上的觸摸膜，或者層疊在 顯示屏202之上或之後的基於相機的觸摸設備。
[0070] 由觸摸設備204接收到的輸入可以被傳輸至計算設備208用於解釋以及響應動 作。接收設備被配置為解釋由觸摸設備接收的輸入。一些輸入和菜單界面應用於系統的範 圍（system wide),儘管一些輸入和菜單界面是依賴於應用或上下文的。
[0071] 計算設備208可以向視頻牆處理器206提供一個或多個視頻輸出，視頻牆處理器 206被配置為向顯示屏202的適當部分顯示一個或多個視頻輸出。例如，計算設備208可以 輸出遠程參與者的視頻，以及針對協同工作空間的顯示數據。遠程參與者的視頻可以被顯 示在顯示屏202的視頻部分，而協同工作空間可以被顯示在顯示屏202的協同部分。在僅 有視頻部分被輸出的實施例中，視頻牆處理器206可以向顯示屏202輸出整個視頻。
[0072] 在一些實施例中，對哪些面板被用於協同部分以及哪些面板被用於視頻部分的選 擇可以是可配置的。例如，視頻牆處理器206可以被配置為響應於從計算設備208接收命 令來變動顯示屏202的排布。
[0073] 此外，計算設備208可以被配置為與其它計算設備通信。例如，計算設備208可以 包括用於與個人計算設備209通信的接口。在一些實施例中，個人計算設備209可以通過 諸如藍牙之類的短場通信協議來連接到計算設備208。替代地，個人計算設備209可以通過 可用網絡來與計算設備208通信。儘管計算設備208僅被連接至個人計算設備209,這僅僅 是示意性而非限制性的。計算設備208可以被配置為與任意數量的個人計算設備通信。
[0074] 在一些實施例中，計算設備208可以被配置為記錄在計算設備208處接收的輸入。 輸入可以包括從任何被聯合計算設備204使用的各種可能的輸入設備接收的任何類型的 輸入。例如，輸入可以包括從觸摸設備204接收的任何輸入以及從未在圖6中不出的輸入 設備接收的任何輸入，例如從鍵盤、滑鼠、麥克風等接收的輸入。此外在一些實施例中，計算 設備208可以記錄從與計算設備208通信的任何其它計算設備（例如個人計算設備209) 接收的輸入。
[0075] 在一些實施例中，計算設備208可以被配置為記錄存儲在計算設備208上的存儲 器中的輸入日誌中的所接收輸入。替代地在一些實施例中，輸入可以被存儲在另外的與計 算設備208通信的計算設備處。
[0076] 在一些實施例中，輸入日誌可以包括描述由計算設備208接收的每個輸入的元數 據。這可以包括描述下列各項的元數據：輸入的類型、輸入被從其接收的輸入設備、輸入被 接收的時間、輸入被從其接收的位置、輸入被從其接收的計算設備等。
[0077] 圖7示出了示例性網絡系統實施例。網絡系統210示出了本地站點205和遠程站 點225,兩種站點都通過雲計算系統220通信。儘管本地站點205被示出為具有附加的細 節，在一些實施例中，本地站點205和遠程站點225都可以具有大體上相同的組件。例如， 本地站點205和遠程站點225都可以包括示出在圖6中的系統的特徵、組件以及外圍設備 中的一些或全部。
[0078] 如示出的，本地站點205可以包括被配置為從顯示屏203接收輸入並且向顯示屏 203輸出輸入的計算設備208。顯示屏203可以代表來自圖6的觸摸系統204和顯示屏202 兩者。顯示屏203可以與視頻牆處理器206進行電通信，如在圖6中一樣，視頻牆處理器 206被配置為向顯示屏203的適當部分顯示一個或多個視頻輸出。
[0079] 顯示屏203還可以與計算設備208電通信，從而與協同系統控制器214和遠程出 席（tel印resence)客戶端212通信。儘管協同系統控制器214和遠程出席客戶端212被 示出為由單個設備容宿，然而在一些實施例中，協同系統控制器214和遠程出席客戶端212 可由分離的計算設備容宿。
[0080] 計算設備208還可以與視頻牆處理器206電通信，由此遠程出席客戶端212和協 同系統控制器214可以通過視頻牆處理器206來輸出將被顯示在顯示屏203上的內容，視 頻牆處理器206被配置為向顯示屏203的適當部分顯示一個或多個視頻輸出。
[0081] 遠程出席客戶端212可以從顯示屏203 (或者更具體地，從被安裝在顯示屏203 上或周圍的攝像頭和麥克風）接收輸入，並且將該信息傳輸至雲220中的遠程出席伺服器 222。遠程出席伺服器222可以被配置為從遠程出席客戶端（例如遠程出席客戶端212)接 收輸入，並且將視頻和音頻流轉發至另外的遠程出席客戶端（例如遠程站點225處的遠程 出席客戶端）用於在遠程站點225的顯示屏上顯示。
[0082] 類似地，協同系統控制器214可以被配置為從顯示屏203接收輸入，處理這些交互 並且生成可以被傳輸至視頻牆處理器206用於在顯示屏上203顯示的結果輸出。協同系統 控制器214還可以被配置為將接收到的交互翻譯為用來與協同系統伺服器224通信的通信 協議。
[0083] 協同系統伺服器224可以被配置為從協同系統控制器214接收通信，並且基於接 收的通信來確定（例如遠程站點225處的）其它協同系統客戶端將採取的適當交互，並且 將這些指令發送至（一個或多個）遠程站點225,其中指令由協同系統控制器214解釋並且 這些交互被顯示。
[0084] 下面是協同系統控制器214和協同系統伺服器224之間的通信結構的一個示例：
[0085]
【權利要求】
1. 一種系統，包括： 顯示屏，所述顯示屏可W被分割為協同分區和視頻分區，所述協同分區和所述視頻分 區被W少於180度的角度偏移； 肩視圖攝像頭，所述肩視圖攝像頭的位置接近視頻屏幕的所述視頻分區，並且被配置 為捕獲接近所述視頻屏幕的所述協同分區的演示者區域並且捕獲會談參與者區域。
2. 如權利要求1所述的系統，還包括： 顯示屏處理器，所述顯示屏處理器被配置為在協同模式中將所述顯示屏分割為所述協 同分區和所述視頻分區。
3. 如權利要求2所述的系統，其中所述顯示屏處理器還被配置為向所述顯示屏的所述 協同分區輸出協同工作空間，並且向所述顯示屏的所述視頻分區輸出遠程出席視頻。
4. 如權利要求2所述的系統，其中所述顯示屏處理器被配置為將所述協同模式中的經 分割的顯示屏轉變為全景模式中的全屏全景視頻顯示屏。
5. 如權利要求1所述的系統，其中所述顯示屏還包括； 第一分區； 中也分區，所述中也分區的位置與所述第一分區和第H分區相鄰並且在所述第一分區 和第H分區之間；W及 所述第H分區，每個分區被從與它相鄰的分區偏移小於180度的角度。
6. 如權利要求5所述的系統，其中所述第一分區或所述第H分區為所述協同分區，並 且剩餘分區共同地為所述視頻分區。
7. 如權利要求4所述的系統，還包括： 全景攝像頭，所述全景攝像頭位於關於所述顯示屏的基本中也位置處，所述全景攝像 頭被配置為在所述全景模式中記錄全景視頻，並且所述肩視圖攝像頭被配置為在所述協同 模式中記錄視頻。
8. -種視頻會議系統，包括： 本地視頻會議顯示屏，包括： 第一分區； 中也分區，所述中也分區的位置與所述第一分區和第H分區相鄰並且在所述第一分區 和第H分區之間；W及 所述第H分區，每個分區被從與它相鄰的分區偏移小於180度的角度。
9. 如權利要求8所述的視頻會議系統，包括： 視頻處理器，所述視頻處理器被配置為將所述第一分區、所述中也分區和所述第H分 區中的每個分配給協同模式或視頻模式。
10. 如權利要求9所述的視頻會議系統，包括： 視頻會議客戶端，所述視頻會議客戶端被配置為在分配給所述視頻模式的顯示屏分區 上顯示來自遠程站點的視頻圖像；W及 協同系統控制器，所述協同系統控制器被配置為在分配給所述協同模式的顯示屏分區 上顯示來自遠程站點的協同工作空間。
11. 如權利要求9所述的視頻會議系統，包括： 肩視圖攝像頭，所述肩視圖攝像頭的位置與所述顯示屏的所述第一分區或所述第H分 區中被分配給視頻模式的分區接近，並且被配置為捕獲與所述顯示屏的所述第一分區或所 述第H分區中的被分配給所述協同模式的另一個分區接近的演示者區域； 視頻會議客戶端，所述視頻會議客戶端被配置為將由所述肩視圖攝像頭捕獲的視頻圖 像傳輸至視頻會議伺服器；W及 協同系統控制器，所述協同系統控制器被配置為將與所述協同工作空間的交互傳輸至 所述協同系統伺服器。
12. 如權利要求8所述的視頻會議系統，包括： 房間視圖攝像頭，所述房間視圖攝像頭的位置面對所述顯示屏並且被配置為捕獲與所 述顯示屏接近的演示者區域；W及 視頻會議客戶端，所述視頻會議客戶端被配置為將由所述房間視圖攝像頭捕獲的視頻 圖像傳輸至視頻會議伺服器。
13. -種視頻會議房間排布，包括： 協同視頻會議顯示屏排布，所述協同視頻會議顯示屏排布為基本上凹型的配置，所述 顯示屏被配置為同時地在所述顯示屏的視頻分區中顯示視頻內容W及在所述顯示屏的協 同分區中顯示協同工作空間； 演示者區域，所述演示者區域與所述顯示屏的所述協同分區相鄰；W及 肩視圖視頻攝像頭，所述肩視圖視頻攝像頭被配置為捕獲所述演示者區域。
14.如權利要求13所述的視頻會議房間排布，包括： 前景會談參與者區域，該前景會談參與者區域的位置相較所述演示者區域離所述顯示 屏的所述協同分區更遠。
15.如權利要求14所述的視頻會議房間排布，包括： 背景會談參與者區域，該背景會談參與者區域相較所述前景會談參與者區域離所述顯 示屏更遠，W使得所述前景會談參與者區域中的人或對象能夠從所述肩視圖攝像頭的視圖 中遮擋所述背景會談參與者區域中的人或對象；W及 通信接口，所述通信接口被配置為與所述背景會談參與者區域中的會談參與者電接口 連接。
16.如權利要求13所述的視頻會議房間排布，包括： 第一揚聲器和第二揚聲器，所述第一揚聲器位於所述顯示屏的所述協同分區後面，所 述第二揚聲器位於所述顯示屏的所述協同分區後面。
【文檔編號】H04N7/15GK104469256SQ201310431971
【公開日】2015年3月25日 申請日期:2013年9月22日 優先權日:2013年9月22日
【發明者】孫齊冰, 張志壽, 蘇西·魏, 陳鍇, 張亞軍, 尤毅 申請人:思科技術公司