具有協作姿態檢測的交互式顯示系統的製作方法

2023-05-13 22:15:06

專利名稱：具有協作姿態檢測的交互式顯示系統的製作方法
具有協作姿態檢測的交互式顯示系統
背景技術：
對於公共場所中的數字標牌來說，期望提供可以捕獲並且保持觀眾的注意力的令 人感興趣的並且有吸引力的顯示系統。通常，公共廣告以及顯示是「開環(open-looped)」 並且不提供關於它們在引起注意力方面的有效性的直接反饋。代替地，內容提供商以及廣 告商提供他們認為將吸引期望觀眾的顯示內容，但是通常僅可以間接地(例如通過銷售數 字(sales figures)、民意測驗、焦點群體等等)估量其成功。另外，公共顯示系統通常提供 很少的方式或者不提供方式來使觀眾成員與系統或者與其他觀眾成員進行交互。


根據下面結合附圖的詳細描述，本公開的各個特徵和方面將顯而易見，附圖作為 示例一起示出了本公開的特徵，以及附圖中圖1是具有協作姿態檢測的交互式顯示系統的一個實施例的半透視、半示意圖；圖2是具有協作姿態檢測的交互式顯示系統的另一個實施例的圖，其示出通常以 給定姿態協作的觀眾成員；圖3是具有協作姿態檢測的交互式顯示系統的另一個實施例的圖，其示出通常以 另一個姿態協作的觀眾成員；以及圖4是示出在交互式顯示系統中用於協作姿態檢測的方法的一個實施例中的步 驟的流程圖。
具體實施例方式現在將對附圖中示出的示例性實施例進行參考，並且將在本文中使用特定語言來 描述所述示例性實施例。然而，將要理解，不打算由此來限制本公開的範圍。相關領域的且 擁有本公開的技術人員能想到的本文所說明的特徵的變更和進一步修改、以及本文所說明 的原理的附加應用都被認為處於本公開的範圍內。對於公共地點中的數字標牌來說，重要的是創建可以反覆地抓住觀眾注意力的非 常吸引人的體驗。如上所指出的那樣，觀眾對顯示或廣告的響應的檢測和識別可以為內容 提供商提供關於內容的質量和內容對其觀眾的吸引力的有價值的反饋。這樣的反饋還可以 用來允許動態修改顯示內容。本公開給出了用於使用基於視覺的技術來檢測觀眾的協作姿態以實現數字標牌 和其他應用的交互性的系統和方法的實施例。在一個實施例中，本系統和方法檢測協作姿 態，而不是檢測一個單一的姿態或者兩個或更多個競爭性的或者甚至獨立的姿態，並且使 用這些來作為視聽顯示系統的反饋。圖1示出具有協作姿態檢測的交互式顯示系統10的一個實施例。該系統包括 指向觀眾14的至少一個成像設備12 (例如照相機)；以及視頻照相機計算機18，其互連到 所述成像設備並且被配置成運行姿態檢測和識別算法，所述觀眾14位於表示該成像設備 的至少一部分視場的觀眾區域16中。該視頻照相機計算機是一種視頻圖像分析計算設備，其被配置成分析由所述成像設備所拍攝的視覺圖像。該成像設備可以被配置成以任何期 望的幀率來拍攝視頻圖像(即一系列捕獲運動的連續視頻幀)，或者它可以拍攝靜止圖像。 術語「視頻照相機計算機」被用來指互連到該成像設備的計算設備，並且不打算將該成像 設備限制成照相機本身。可以使用各種類型的成像設備。還應該認識到，本文所使用的術 語「計算機」被寬泛地理解成指個人計算機、可攜式計算機、內容伺服器、網絡PC、個人數字 助理(PDA)、蜂窩電話或者能夠執行從與交互式顯示系統相關聯的各種設備接收輸入以及 /或者向所述各種設備提供控制或驅動輸出到所述各種設備所必需的功能的任何其他計算 設備。該成像設備12被定位在可變顯示設備20附近，可變顯示設備20諸如CRT、IXD 屏、等離子體顯示器、LED顯示器、投影式顯示器(正投影或背投影)或其他類型的顯示設 備。對於數字標牌應用來說，該顯示設備可以是大尺寸公共顯示器，並且可以是單個顯示器 或者多個單獨顯示器，所述多個單獨顯示器組合在一起以在拼接(tiled)顯示中提供單一 複合圖像。這可以包括一個或多個投影圖像，它們可以以各種方式疊加或組合或拼接在一 起從而創建顯示。諸如音頻揚聲器22之類的音頻廣播設備也可以被定位在顯示器附近以 連同在該顯示器上提供的視頻內容一起廣播音頻內容。在圖1中示出的系統還包括被互連以將期望的視頻和音頻輸出提供到顯示器20和音頻揚聲器22的顯示計算機24。如圖1所示，視頻照相機計算機18可以被互連到顯示 計算機24，從而允許該顯示計算機使用來自所述視頻照相機計算機的反饋和分析。該顯示 計算機還可以向視頻照相機計算機提供關於照相機設置的反饋，從而允許改變該照相機的 聚焦、縮放、視場以及物理定向(例如搖擺(pan)、傾斜、橫滾)，條件是這樣做的機構與照相 機相關聯。該照相機計算機18可以包括輸入/輸出設備25，其具有鍵盤、監視器以及其他 輸入和輸出設備(例如計算機滑鼠等等)以允許直接輸入數據到照相機計算機並且從該照 相機計算機直接輸出數據。類似地，顯示計算機24還可以包括允許直接控制顯示器20的 輸入/輸出設備27。要理解，單一的計算機可以被用來控制成像設備12和顯示器20 二者。這樣的配 置在圖3中示出，其中單一的計算機26互連到成像設備12和顯示設備20 二者。該單一的 計算機可以被編程為處理成像設備的控制和視頻圖像分析，以及控制到顯示器的輸出的所 有功能。與在圖1中所示的雙計算機控制器配置一樣，該單一的計算機控制器還可以包括 允許直接控制系統以及來自/去往該系統的反饋的輸入/輸出設備29。另外，計算機控制器可以是諸如區域網(LAN)的網絡或網絡的一部分，或者它可 以被互連到網絡。例如，如圖2所示，顯示計算機24可以被互連到網絡32，其提供到遠程計 算機系統34的互連。可替換地，圖3中示出的組合的控制計算機26還可以被互連到該網 絡以及由此互連到一個或多個遠程計算機系統34。該網絡32可以是區域網(LAN)，或者任 何其他類型的計算機網絡，包括互連的計算機和計算機網絡的全局網，例如網際網路。網絡連 接允許遠程計算機從交互式顯示系統的控制器接收輸入，並且還向它提供控制命令以及其 他輸出。控制器可以是包括處理單元、系統存儲器以及將該處理單元耦合到計算機的各個部件的系統總線的任何類型的工作站計算機、個人計算機、或者可攜式計算機。該處理單元 可以包括一個或多個處理器，其中每一個處理器的形式可以是各種商業上可獲得的處理器中的任何一種。一般來說，每個處理器從只讀存儲器以及/或者隨機存取存儲器接收指令和數據。控制器還可以包括通過相應的接口連接到系統總線的硬碟驅動器、軟盤驅動器和 CD ROM驅動器。該硬碟驅動器、軟盤驅動器和CD ROM驅動器包含提供數據、數據結構以及 計算機可執行指令的非易失性或永久存儲的相應計算機可讀介質盤。其他計算機可讀存儲 設備(例如磁帶驅動器、快閃記憶體設備以及數字多功能盤)還可以與控制器一起使用。成像設備12被定向成朝向由單獨的人28組成的觀眾14，他們聚集在由輪廓16指 定的觀眾區域中。儘管該觀眾區域被示出為具有特定形狀的明確輪廓，但是這僅打算表示 在成像設備12附近存在其中可以看到觀眾的某個區域。觀眾區域可以具有多種形狀，並且 可以包括成像設備的整個視場或者該視場的某個部分。例如，圖1中某些個體30可以在觀 眾區域附近以及可能甚至在該成像設備的視場中，但卻不在將由視覺識別系統分析的觀眾 區域中。在操作中，顯示器20(以及音頻揚聲器22)向觀眾提供視覺和/或視聽內容。該 內容可以是商業廣告、娛樂、政治廣告、調查問題或者任何其他類型的內容的形式。該內容 可以包括對於以某種姿態為形式的觀眾響應的建議、請求或其他類型的提示。這些請求或 提示針對群體響應。所請求的姿態可以是身體的某種運動，包括相對細微的運動(例如微 笑、臉部姿態或點頭)到更明顯的姿態(例如舉手或搖手或者以某種方式(例如舞蹈或鍛 煉運動)移動整個身體)。將顯而易見的是，存在可以被提示並且識別的許多類型的姿態。在圖2和圖3中描繪了系統可以識別的某些群體姿態的示例。在這些示例中，使 用對特定姿態的提示。然而，不需要使用提示，並且可以辨別所檢測的姿態或行為且採取適 當的反饋。作為一個示例，在圖2中，已提示群體14響應於由顯示系統所提供的某種詢問 而舉起手。每當系統提示群體響應時，若干結果是可能的。大多數參與者可能以被請求的 方式響應並且舉起一隻手，以28a指示這些群體成員。然而，一些參與者可能例如通過舉起 兩隻手而提供替換的但是潛在地符合要求的響應。以28b指示這樣的個體。其他觀眾成員可能用含糊的或者不適當的響應來進行響應，例如水平地伸出兩個 臂的個體28c。最後，某些觀眾成員可能根本不給出響應，例如個體28d。觀眾響應的視覺 圖像由成像設備12來拍攝，並且由圖像分析計算機18進行分析。已在過去的十年裡廣泛地研究了基於視覺的姿態檢測和識別。基於視覺的檢測經 由例如背景相減、輪廓線檢測等等的圖像處理技術來捕獲觀眾視圖，以便檢測並且分類特 定姿態。例如，位於成像設備附近的觀眾參與者可以響應於內容共同地(collectively)執 行某種類型的個體姿態(例如舉起手)，或者他們可以執行協作姿態，例如群體舞蹈運動。 可替換地，觀眾參與者可以以指定的方式排隊或者以某一其他方式一起工作。使用已經開發的群體姿態檢測技術，系統執行的圖像分析可以以至少兩種基本方 式運行。所述系統的一個操作模式是測量作為觀眾響應函數(例如尋找多數響應)的觀眾 興趣的等級。例如，可以檢測出觀眾中同時舉起許多手並且將其看作對所顯示的內容的高 度積極的反饋。例如，如果在圖2中提供給觀眾的提示涉及後續內容的可選方案之間的選 擇，並且該系統被編程為基於觀眾的多數投票表決來提供內容，則在圖2中示出的觀眾姿 態將意味著15個觀眾成員中的12個贊成那時正被提供的特定選項。然後可以基於該多數 投票表決來適配或修改所顯示的內容，以便提供由觀眾響應所指示的內容，並且希望進一 步吸引觀眾的注意力。
該系統可以執行的第二種方式是提示許多個體參與和顯示系統的交互以提升交 互性的等級。例如，可以提示觀眾同時效仿或模仿由所顯示的內容指示的特定姿態。在圖 3中示出了這種交互的示例。在該圖中，觀眾14可以表演群體舞蹈或者執行鍛鍊運動或一 套動作(routine)，模仿在顯示器20上同時示出的運動。如果該套動作要求每個觀眾成員 在圖中示出的那個時刻以一個特定的腿站立，則可以看出一些觀眾成員28e正確地執行該 動作，其他成員28f相反地執行基本運動，一些觀眾成員28g執行完全不同的動作，並且還 有其他成員28d根本不執行。儘管觀眾響應有可能存在一些變化，但是假設群體在某種程度上一起行動，從而 提供了對所顯示的內容的協作響應。術語「協作姿態」或「群體姿態」或「共同姿態」指的是 呈現出足夠等級的關係或相似性的多個個體的那些姿態，或者遵循由數字標牌系統提供的 某種類型的指示的那些姿態，或者落入預先定義的姿態候選種類的那些姿態。例如，觀眾可 以被告知或者可以提前知道將引發某一響應的(一個或多個)期望的協作姿態，或者系統 可以被配置成允許觀眾發現(一個或多個)這樣的姿態。要被檢測的協作姿態不限於人的手，而是可以包括人的頭、軀幹、腿、腳或其他身 體部分的移動，以及臉部表情。姿態還可以包括物理運動，或者身體定向的改變，例如向左 轉或向右轉，或者朝向或遠離顯示設備移動。本質上，協作姿態指的是觀眾作為群體行為而 不是個體行為呈現出的那些姿態。其他示例包括檢測複雜的身體移動，例如大量觀眾成員 執行跳躍運動或其他類似舞蹈的移動以觸發以及/或者控制某個或某些事件。這一概念的 一個示例是在足夠多的觀眾成員表現(例如隨著節拍跳舞)得足夠好的情況下獎勵每個觀 眾成員「獎品」的群體舞蹈比賽或太極競賽。另外，顯示的內容可以包括請求來自群體的至 少兩個子群體的公共群體姿態進行競爭(compete)的提示。例如，顯示系統可以提示第一 半群體執行某一舞蹈或鍛鍊運動，然後提示另一半群體執行相同的運動，並且然後相對於 彼此來對兩個表現進行評級。其他的變化也是可能的。協作姿態可以包括由一個或多個人執行的相同或相似移動，並且還可以包括協調 的並且互補的姿態。例如，可以提示觀眾指向公共的位置，而不是每個觀眾成員指向公共的 方向，這提供了在其中每個個體所指的視向因為角度差異而根據個體的位置變化的圖像。 作為協作但是變化的運動的另一個示例，可以提示觀眾執行像在體育運動事件中觀眾經常 做的升起和落下的「波浪」運動。協作姿態可以提供同時允許多用戶交互的機制。在該系統中，視覺分析系統檢測協作或共同姿態來收集來自一大群人的觀眾響 應，而不是識別個體的不同姿態，或者如對於視頻遊戲等等所檢測的僅僅競爭性的姿態。在 該系統中，鼓勵全體觀眾通過協作姿態彼此協調來形成與系統交互的群體，而不是採用來 自一個單個個體的響應並且留下剩餘觀眾(例如大多數觀眾)被消極地忽略。該系統被設 計成響應於群體行為，而不是每個不同的個體行為。以這種方式，觀眾中的許多個體可以同 時並且合作地與系統進行交互。該系統因此提供新的機制來使一群人與數字標牌或其他內 容遞送系統進行交互。群體交互的能力對數字標牌系統是有用的，使得觀眾可以變成積極 地參與，從而潛在地增加了廣告和商業機會並且創建了更大的觀眾吸引和口頭傳播興趣。在本文所公開的系統和方法中，因 為觀眾中存在許多個體，所以可以基於呈現出 所提示的協作姿態的若干個體來建立控制點。也就是說，代替設立許多控制點(每個控制 點每次基於單個個體)，基於單個共同控制點，更多的觀眾成員可以參與控制系統或為該系統提供反饋。例如，可以檢測手的姿態並且以與使用計算機滑鼠來控制光標的方式相類似 的方式來將其用於操控顯示器上的單個控制點。通過測量協作行為，該方法在不會引起衝 突的情況下允許多個用戶同時操控控制點，而不是每個個體操控一個控制點。該控制點可 以被多個個體的協作姿態觸發。在這種情況下，協作姿態可以是手的姿態，其可以並發地遵 循在觀眾中所檢測到的相似的運動模式。 圖4概述了包括在具有協作姿態檢測的交互式內容遞送系統的一個實施例中的 步驟。為了開始該過程，系統首先提供一些初始顯示輸出(步驟50)。如上所述，該內容可 以是商業廣告、娛樂、政治廣告、調查問題或者任何其他類型的內容的形式。該內容可以包 括對於以某種姿態為形式的觀眾響應的公開的(overt)建議、請求或其他類型的提示。另 一方面，該內容也可以包括對響應的隱藏的或下意識的提示或觸發。在第一種情況下，該內 容明確地指示或者請求觀眾做出特定姿態。在後一種情況下，該內容可以被構思成使得特 定姿態(例如微笑)是很可能的(例如通過呈現出幽默的內容)，但是該內容沒有明確地指 示觀眾做出該姿態。在其他示例中，該內容可以不包括明顯的或隱藏的提示，並且簡單地對 照姿態/行為的一個或多個預定模式來分類所檢測到的姿態。這對於對照實際反應來確認 期望的反應可能很有用。一旦提供某一顯示輸出，該系統就利用(一個或多個)成像設備來捕獲觀眾視圖 (audience view)(步驟52)。該步驟可以包括捕獲單個快照或一系列幀/視頻。它可以包 括捕獲整個照相機視場，或者僅一部分視場(例如區域、僅黑色/白色vs彩色等等)的視 圖。此外，要理解，多個成像設備可以被同時用來捕獲用於處理的視頻圖像。下一步驟是檢測群體姿態或行為(步驟54)。例如，這可以通過檢測多個個體姿態 來完成。這是圖像處理步驟的第一部分。該系統可以使用已經在上面討論的視覺識別系統 來檢測姿態/行為的一個或多個預定模式。所檢測的姿態或行為可以是臉部表情、運動或 某一其他類型的姿態。還應該注意，可能希望預先校準(一個或多個)成像設備來簡化圖 像處理步驟。例如，多照相機實施例可以結合在計算機視覺中公知的技術使用以解決各照 相機之間的對極(bipolar)幾何並且將運動估計向下降低到較簡單的一維搜索。還可以 執行其他類型的預先校準程序。可以順序地或者並行地執行各種計算機視覺和圖像處理技術以便分析所捕獲的 圖像數據。例如，可以首先形成低等級的檢測算法(例如前景/輪廓線提取以及背景相減) 以標識場景中的足夠大的且移動的鄰接區域。該算法然後前進以隨著時間跟蹤並且調整這 些區域，以與所捕獲的數據相一致。可以存在其他檢測算法來幫助標識一起形成更複雜的 姿態/行為的較簡單的姿態/行為。這些可能包括用於臉部、表情(例如微笑、皺眉)、身體 部分(頭、手、軀幹、臂、腿、腳等等)的檢測符(detector)。該系統然後可以基於這些較簡 單的檢測符中的一個或多個來檢測姿態或行為。例如，跳躍運動可以被分解成兩個臂和兩 個腿的一系列期望的運動以及上下移動的軀幹。可替換地，該系統可以被配置成根本不需要複雜的姿態識別算法。作為替換，基於 視覺的系統可以被配置成識別在已經存在於多個人之間的多個姿態之間是否存在相關性。 例如該協作姿態可以包括同時姿態或對稱姿態。外表的多樣性以及人體的非剛性影響姿態 識別的準確性和有效性。因此，通常在識別程序的簡單性以及其準確性之間存在折衷。接 近該折衷的一種方式是創建要從觀眾識別的預先定義的協作姿態集合，其中這些的視覺特性存儲在系統控制器的存儲器中，從而降低視覺識別系統的複雜性的等級。該方法的下一步驟是識別協作行為(步驟56)。該步驟可以包括聚集結果或者使其相關，或者檢測姿態的相似性，以識別協作姿態/行為。在該步驟中，該系統分析輸入數 據並且基於各種檢測符來計算得分，以便給一個或多個協作姿態/行為的出現的概率分等 級。存在這樣的協作姿態的許多示例。一種類型的協作姿態可以是觀眾中舉起手，並且使用 姿態識別技術來檢測該姿態。這可以包括舉起一隻手或兩隻手來遞送來自觀眾的關於所顯 示的內容的反饋，或者多個人同時執行的手指指向姿態。這個情形可能與「多數投票表決」 方法相似，其中對舉起的手的數目計數並且將其看作投票表決行為。要理解，舉起手僅僅是 可以考慮的許多協作姿態中的一個。例如，舉起手的檢測可以與臉部表情的檢測和運動檢 測一起考慮以獲得觀眾對所顯示的內容的響應的更精確的測量。此外，系統可以被配置成 不只是用表格列出(tabulate)簡單的多數投票表決。例如，系統可以被配置成計算得分或 評分(rating)，例如在0到10的尺度上的得分，以作為姿態的相對質量的評分或度量。例 如，得分可以指示來自觀眾的積極的(或消極的)反饋的強度。可替換地，得分可以是協作 行為自身的定性判斷，例如舞蹈或鍛鍊表現或某一其他競爭活動的評分。還可以聚集許多其他類型的姿態或使其相關。例如，臉部表情可以被檢測以集中 於例如觀眾中的笑臉。在某個特定瞬間系統可以集中於作為協作姿態的所有笑臉。可以使 用臉部視覺技術來檢測笑臉的數目、每個笑臉的持續時間以及微笑的程度，並且然後可以 聚集結果來做出判斷。這種類型的協作姿態可以被用來提供關於顯示器上的內容的反饋 (例如以評估觸發觀眾微笑的內容的質量)，或者它可以被用作控制機制以允許對內容修 改或適配，如將在下面更多討論的。對象檢測和跟蹤技術也可以被用來檢測和跟蹤人群中的每個個體的運動軌跡。在 已檢測到個體運動之後，分析可以集中於所有運動軌跡上運動的方向和速度。例如，協作姿 態可以指遵循公共或相似軌跡、方向和/或速度的運動。該系統還可以被配置成基於遵循 運動的特定速度、方向或軌跡的運動軌跡的數目來適配內容。基於所識別的行為，該系統可以採取若干動作中的任何動作。在一個實施例中，系 統可以基於共同行為來修改顯示器輸出(步驟58)。這可以包括基於所檢測的姿態來觸發 來自顯示計算機(圖1中的24)的一個或多個輸出。為了形成交互式系統，來自觀眾的輸 入通常轉換成某種類別的輸出。例如，通過協作姿態的檢測，數字顯示器可能被更新以及/ 或者被控制。如果所顯示的內容提供了觀眾易於重複和模仿的某種類型的指示，則觀眾中 的人群可能呈現出協作姿態。響應必須是由一群人而不是一個單個的不同個體實施的。有 利地，所顯示的內容可以以直觀的方式引導觀眾執行協作姿態。該系統可以對觀眾中任何 遵循所指定的姿態的個體的數目計數，並且可以由這樣的個體的數目適配內容。以這種以 及其他方式，協作姿態可以用作對可選內容的選擇動作。除了修改顯示內容之外或者作為對修改顯示內容的替換，協作行為可以被評估成 關於該顯示內容的有效性或該內容的反饋。這允許系統提供廣告、娛樂、政治消息等等的有 效性或效果的直接指示。再次，反饋可以是簡單的是/否指示的形式，或者它可以是有效性 的更相對度量，例如作為分布或百分比的效果得分(例如14%非常積極反應、20%積極反 應、23%消極反應、15%非常消極、28%沒有可辨別的反應)。這時候，可以重複該過程本身。修改的顯示內容可以包括就觀眾而言對協作動作的提示。在這種情況下，系統再次捕獲觀眾視圖(步驟52)，並且分析該視圖以確定隨後對 顯示內容做出什麼樣的改變。該過程可以根據需要重複多次直到不再存在要檢測的協作姿 態為止(步驟60)。然而，該過程可以隨時再次開始。因此本公開給出了結合數字標牌系統或其他內容遞送系統視覺地檢測群體姿態 的系統和方法的實施例，以實現群體交互。該系統可以收集來自觀眾的對所顯示的內容的 響應(例如多數響應、或多個同時協作姿態)，並且測量觀眾興趣的等級。所顯示的內容然 後可以被適配成進一步抓住觀眾的注意力。可替換地，許多個體可以與顯示系統交互以增 加交互性的等級，例如使觀眾同時模仿或效仿由所顯示的內容指示的特定姿態。控制點可 以由呈現出協作姿態的若干個體建立，而不是每次由單個個體來設立控制點。因此，更多觀 眾成員可以參與到控制系統或者提供反饋中。
本發明的實施例可以被用來激發觀眾的協調動作。例如，所述顯示可以指示並且 引導觀眾模仿某個動作。在該上下文中，協作姿態可以被看成一種類型的符號語言。該姿 態指示由觀眾激發的用以彼此協作的特殊事件。協作姿態包括兩個或更多人之間的有意協 作或者合作。例如，顯示內容可以包括要執行的指令或者某一移動的示範，並且觀眾可以簡 單地效仿已示範的內容或者做已被指示的內容。還會存在一些要創建的內容，其包括實施 已由該內容指定的任務的協作姿態。例如，可以提示觀眾以需要多於兩隻手來完成該任務 的方式來移動在顯示器上示出的虛擬對象。本發明的實施例還可以被用來提示、檢測並且 評估來自不同位置的多個觀眾的協作姿態。例如，具有協作姿態檢測的多個交互式顯示系 統可以在不同的地理位置處被提供，並且被互連成網絡。利用這種類型的系統，不同位置處 的觀眾的協作姿態或動作可以被組合在一起或被一起分析。本發明具有許多優點。它利用新穎的協作姿態檢測作為用於數字標牌應用的新交 互機制以為觀眾創建非常吸引人的體驗。所提議的交互機制被謹慎地設計成獲得來自協作 和/或協調的多個用戶的響應，並且獎勵多個用戶的參與。例如，在一個實施例中，系統檢 測來自多個個體的姿態而不管的他們的外形(例如高度、體重、體型、衣著等等)，並且標識 從不同個體給出的這些姿態之間的關係(例如相似性)。系統對呈現出協作姿態的用戶的 數目計數，並且然後基於用戶的數目來遞送適當的響應(例如作為許多個體的協調的結果 可以更新該內容)。最後，它試圖捕獲更多觀眾的注意力並且實現標牌系統和一大群用戶之 間的群體行為交互。此外，系統實施例可以比其他視覺識別或姿態檢測系統簡單，並且因此需要實施 不那麼複雜的硬體。典型的姿態識別是包括運動檢測、運動建模、運動分析、模式識別以及 機器學習的複雜任務，而協作姿態檢測可以是更易於實施的任務。協作姿態的檢測不需要 明確地識別人的姿態。相反，它僅需要檢測是否存在彼此相關的兩個或更多個姿態，因此簡 化了技術挑戰。儘管上述討論主要集中於數字標牌應用，但是協作姿態檢測的想法還可以擴展到 不需要大顯示器的其他應用中。例如，協作姿態檢測可以用來評估、測量或判斷協作活動或 行為表現，例如一套同步遊泳動作。還可以通過協作姿態的檢測來分析其他類型的群體姿 態、運動或活動。要理解，上面提及的裝置說明了本文所公開的原理的應用。對本領域普通技術人 員來說顯而易見的是，在不偏離如在權利要求中所陳述的本公開的原理和概念的情況下可以進行許多修改.
權利要求
一種交互式內容遞送系統(10)，包括顯示設備(20)，其適於將內容顯示給個體的群體(14)；共同姿態檢測設備(12)，其被配置成檢測並且分析所述群體(14)的共同姿態；以及控制系統(26)，其耦合到所述顯示設備(20)和群體姿態檢測設備(12)，並且被配置成響應於所述共同姿態來修改所述內容。
2.根據權利要求1所述的交互式內容遞送系統，其中所述顯示設備(20)是視頻顯示設備。
3.根據權利要求2所述的交互式內容遞送系統，還包括音頻廣播設備(22)，其與所述 視頻顯示設備(20)同步。
4.根據權利要求1所述的交互式內容遞送系統，其中所述共同姿態檢測設備(12)包 括成像設備(12)；以及圖像分析計算機系統(18)，其耦合到所述成像設備，並且被配置成分析共同姿態。
5.根據權利要求4所述的交互式內容遞送系統，其中所述圖像分析計算機系統(18)被 配置成計算指示所述共同姿態的相對質量的得分。
6.根據權利要求1所述的交互式內容遞送系統，其中所述控制系統(26)經由通信網 絡(32)互連到遠程計算機系統(34)，由此所述遠程計算機系統能夠提供輸入到所述控制 系統並從其接收反饋。
7.根據權利要求1所述的交互式內容遞送系統，其中所述顯示器(20)的內容包括對公 共群體姿態的提示。
8.根據權利要求7所述的交互式內容遞送系統，其中所述公共群體姿態包括對可選顯 示內容的選擇動作。
9.根據權利要求1所述的交互式內容遞送系統，其中所述顯示器(20)的內容包括請求 來自所述群體(14)的至少兩個子群體的公共群體姿態進行競爭的提示。
10.根據權利要求1所述的交互式內容遞送系統，其中所述修改的內容包括群體姿態 的表徵。
全文摘要
一種交互式內容遞送系統(10)，其包括用於將視覺內容顯示給個體的群體(14)的裝置(20)，用於檢測群體的共同姿態的裝置(12)；以及控制系統(26)，其耦合到用於顯示視覺內容的裝置(20)以及用於檢測共同姿態的裝置(12)。所述控制系統(26)被配置成響應於所述共同姿態來修改所述內容。
文檔編號G06T7/00GK101842810SQ200880113933
公開日2010年9月22日 申請日期2008年10月30日 優先權日2007年10月30日
發明者N·L·A·常, Y·劉 申請人:惠普開發有限公司