MethodforsynchronisingaRICHMEDIATMactionwithanaudiovisualchange...的製作方法

2024-02-27 14:48:15

專利名稱：Method for synchronising a RICH MEDIA TM action with an audiovisual change ...的製作方法
技術領域：
本發明的領域是「Rich Media」 技術的領域，且更具體地說，是「RichMedia」 呈 現的領域，包含用於在用戶終端上重放的圖形格式、文本、交互式特徵、動畫和媒體(圖像 和視聽流)。更具體地說，本發明涉及一種用於使此呈現的視聽部分中的變化與純 「RichMedia」 部分(即，此部分特別包含圖形格式及其處置以及交互式特徵，但不包含媒 體處置)中的變化同步的技術。
背景技術：
在含有對視頻流的參考的「Rich Media"⑧呈現中，在大多數情況下，純 「RichMedia」 部分由「Rich Media」 伺服器(也稱為呈現伺服器)提供和處置，且視聽 部分由視頻伺服器(也稱為流式傳輸伺服器)處置，並發送到終端。由於這兩個伺服器為單獨的，所以它們不具有相同的時間參考，且不能一起同步。 因此，兩個伺服器所供應的內容也不適合同步。因此，對用戶來說，難以使「Rich Media」 變化與視頻流廣播期間發生的事件完 全對準。舉例來說，考慮含有對視頻流的參考的「Rich Media」 呈現。用戶在用戶終端上 觀看視頻流(由流式傳輸伺服器供應)，連同某一「Rich Media」 信息，例如由呈現伺服器 供應的廣播視頻流的頻道的編號和/或標識。當用戶改變頻道以觀看另一則視頻內容時， 他/她期望還顯示關於頻道變化的「Rich Media」 信息，連同關於視頻改變已發生時的新 頻道的信息。然而，因為流式傳輸伺服器與呈現伺服器不同步，所以對於「Rich Media」 呈現 的創建者來說，難以知道何時基於視頻的變化而進行「Rich Media」 場景的變化。視頻的變化可以是語義變化(例如，從電影切換到廣告序列，或相反)或最佳頻道 變化。最佳頻道變化可如下進行流式傳輸伺服器用來自下一頻道的圖像代替現有視頻流 中的先前頻道的圖像，而不告知呈現伺服器。呈現伺服器因此不具有指示何時改變頻道編 號/標識的特定信息。第一種技術包括在將視頻流變化請求從呈現伺服器發送到流式傳輸伺服器時進 行此變化。此技術的一個缺點在於流式傳輸伺服器改變視頻流的反應時間未被考慮，且頻 道編號/標識相對於實際視頻流變化被過早地系統性地改變。因此，在短暫的時間內，用戶 具有不對應於在屏幕上所觀看到的視頻的頻道信息。第二種技術包括在將視頻流變化請求從呈現伺服器傳輸到流式傳輸伺服器後的 預定間隔之後改變頻道編號/標識。此間隔對應於流式傳輸伺服器反應時間的估計，但不 能考慮網絡傳輸條件，從而導致流式傳輸伺服器反應時間的變動。
因此，此解決方案對於用戶來說在視頻流與用戶的終端上所顯示的 「RichMedia」 信息之間的一致性方面同樣不是最佳的。如果發生不是由用戶動作觸發的視頻變化，例如從電影序列切換到廣告序列，那 麼以上兩種技術均不奏效，且適用的試探法更加不確定。一種技術可(例如)包括準備對 視頻輸入路徑的平均延遲計算和對場景信息中的平均延遲的類似計算，以及隨後使場景的 變化同步。然而，此技術包含視頻輸入、場景輸入以及視頻伺服器與場景伺服器之間的偏差 上的累積不確定性。

發明內容
本發明提出一種不涉及現有技術的所有缺點的新穎的解決方案，其呈使一則 「 R i c h M e d i a 」 內容中的動作與一則視聽內容中的變化同步的方法的形式，所述「 R i c h Media」 和視聽內容是「Rich Media」 呈現的一部分。根據本發明，此方法包括以下步驟獲得一則代表所述則視聽內容中的所述變化的信息，稱為變化信息；使所述則「Rich Media」 內容中的動作與所述變化同步，所述同步步驟包括以下 子步驟將所述變化信息轉換為「Rich Media" 事件；通過所述呈現的至少一個「Rich Media」 對象來檢測所述事件；基於所述檢測到的事件觸發所述呈現中的所述動作。本發明因此是基於用於在「Rich Media」 呈現中使「Rich Media」 動作與所述 "Rich Media」 呈現中所參考的且由單獨實體(例如，視聽廣播伺服器)發送的視聽流或 內容中的變化同步的新穎且具獨創性的方法。甚至，根據本發明的方法使得有可能以適合由呈現中的「Rich Media」 對象解譯 的方式指示視聽廣播伺服器所發送的視聽流中的變化，以便使「RichMedia」 動作與視聽 流中的此變化同步。所獲得的流中的變化信息首先由「Rich Media」 呈現中的視聽/ "RichMedia" 界面對象(也稱為「視頻」對象)處理，所述對象尤其適合在觀看所述呈現的用戶終端上解 碼和顯示來自「Rich Media」 呈現中的視聽流的圖像。此「視頻」對象在獲得此變化信息後觸發「Rich Media」 事件。此「RichMedia」 事件為特定類型，其特定用於使視聽流變化與「Rich Media」 動作同步。一個或多個「Rich Media" 對象(也稱為交互式對象)被編程在呈現中以監視 由「視頻」對象觸發的此類事件，且在檢測到此類事件後激活。以此方式，當此交互式對象檢測到由「視頻」對象觸發的事件時，激活交互式對象， 且實施與視聽流中的變化連結的「Rich Media」 動作。因此與由變化信息所指示的流中的變化同步地執行「Rich Media」 動作。根據本發明的一個實施例，經由所述則視聽內容來發送所述變化信息。"Rich Media」 呈現中的且(例如)由視聽廣播伺服器發送的所述則視聽內容參 考因此除針對視聽內容的特定數據和常規視聽流信令數據之外還包括代表討論中的流中 的變化的數據(稱為變化信息)。
舉例來說，此變化信息在與流中的變化(例如，內容的變化)之後的第一圖像相同 的時間發送。此變化信息可以是純粹的預定指示符，其僅指示流中存在變化；或較複雜的 指示符，其指定或給出關於流中的變化的類型的信息，或關於待相對於流中的此變化而實 施的動作的類型的信息。根據一個替代實施例，所述獲得步驟使用表示所述則視聽內容中所插入的所述變 化信息的指示符的讀取。視聽流因此可含有準許存取在流中其它地方發送的一則變化信息的指示符，例如 包括流中的可找到變化信息的讀取地址的指針。根據另一實施例，所述變化信息是基於與所述呈現相關聯的一則時戳信息與所述 則視聽內容的當前時戳的比較。根據此實施例，所述變化信息對應於通過比較兩則時戳信息得出的肯定結果，第 一則時戳信息從呈現中已知，且第二則時戳信息對應於視聽流的當前時戳。舉例來說，第一則時戳信息由視聽廣播伺服器發送，所述視聽廣播伺服器還將變 化所涉及的視聽流(例如)經由處置「Rich Media」 呈現的呈現伺服器發送到觀看所述 呈現的用戶的終端。此則時戳信息對應於流中的時間的時間標籤。如果流中的變化對應於例如用戶請 求之後的內容的變化，那麼所述時間標籤可對應於所述則新內容的第一圖像。第二則時戳信息對應於視聽流的當前時戳，例如在「Rich Media」 呈現中解碼並 顯示的當前圖像的時間標籤。在此實施例中，第一則時戳信息適合由「視頻」對象解譯，所述「視頻」對象還能夠 確定其在「Rich Media」 呈現中解碼並顯示的每一圖像的時間標籤。此「視頻」對象將第 一則時戳信息與當前時戳信息進行比較，以在兩個時間標籤重合時確定代表流中的變化的
一則信息。一旦確定此變化信息，根據同步方法的處理的其餘部分就與針對第一實施例的處 理相同，即由「視頻」對象觸發特定事件、由交互式對象檢測所述事件，以及實施對應的動 作。根據本發明的特定特徵，所述變化信息還包括至少一則代表所述則 「RichMedia」 內容中的所述動作的信息，稱為動作信息。所述變化信息因此不僅使得有可能指示流中的變化，而且使得有可能給出關於待 相對於流的所述變化而實施的動作的指示。明確地說，所述動作信息屬於包括以下各項的群組URN( 「統一資源名稱」)；URI ( 「統一資源識別符」)；URL ( 「統一資源定位符」)。當交互式對象被激活時，其因此解析動作信息(例如，URL)以實施所請求的動作。本發明的另一方面涉及一種用於使一則「Rich Media」 內容中的動作與一則視 聽內容中的變化同步的裝置，所述「Rich Media」 和視聽內容是「RichMedia」 呈現的一 部分。根據本發明，此裝置包括
用於獲得一則代表所述則視聽內容中的所述變化的信息的構件，所述信息稱為變 化信息；用於使所述則「Rich Media」 內容中的動作與所述變化同步的構件，所述同步構 件包括用於將所述變化信息轉換為「Rich Media" 事件的構件；用於通過所述呈現的至少一個「Rich Media」 對象檢測所述事件的構件；基於所述檢測到的事件觸發所述呈現中的所述動作。此傳輸裝置尤其適合實施上文所描述的同步方法。本發明還涉及一種計算機軟體產品，其可從通信網絡下載且/或保存在可由計算 機讀取且/或由處理器運行的媒體上，所述計算機軟體產品包括用於實施上文所描述的同 步方法的程序代碼指令。本發明的另一方面涉及一種創建包括至少一則視聽內容和至少一則 「RichMedia」 內容的 「Rich Media」 呈現的方法。根據本發明，所述創建方法包括以下步驟由至少一個視聽/ 「Rich Media」 界面對象觸發代表所述則視聽內容中的變化 的至少一個事件；創建適合檢測所述至少一個事件的至少一個「Rich Media」 對象；在檢測到所述至少一個事件後激活所述「Rich Media」 對象；使至少一個動作與所述「Rich Media」 對象的激活相關聯。所述根據本發明創建「Rich Media」 呈現的方法因此使得有可能相對於代表 "Rich Media」 呈現中所參考的視聽流中的變化的事件在呈現中實施一動作。此動作特定地在特定地經編程以監視此事件的對象的激活之後實施。本發明還涉及一種計算機軟體產品，其可從通信網絡下載且/或保存在可由計算 機讀取且/或由處理器運行的媒體上，所述計算機軟體產品包括用於實施上文所描述的創 建方法的程序代碼指令。


在閱讀對僅作為說明性而非限制性實例給出的特定實施例以及附圖的以下描述 後，本發明的進一步特徵和優點將更清楚地顯現，附圖中圖1展示根據本發明的一個實施例的方法的主要步驟；圖2說明圖1中的實施例的第一替代實施例的功能圖；圖3說明圖1中的實施例的第二替代實施例的功能圖；圖4a和圖4b展示根據圖2和圖3中所說明的本發明的兩個替代實施例的方法在 客戶端接收器端的應用的實例。
具體實施例方式1、一般原理本發明的一般原理是基於獲得一則代表視聽流中的變化的信息以及通過「Rich Media」 呈現的多個對象來處理此則信息以便使呈現中的動作與視聽流中的變化同步。
根據本發明的方法因此使得有可能補救視聽流與「Rich Media」 呈現之間 的時間參考的差異的問題，且因此使視聽流中的時間t處所作的變化與呈現中的「Rich Media」 動作同步。2、實施例的描述現將參看圖1描述根據本發明一實施例的同步方法的主要步驟。"Rich Media」 呈現中所參考的視聽流中的變化與呈現中的動作之間的同步包 括第一步驟10，其用於獲得一則代表視聽流中的變化的信息。此信息接著在同步步驟11期間被處理，所述同步步驟11包括下文所描述的子步
馬聚o首先在步驟110期間將此變化信息轉換為特定的「Rich Media」 事件。接著在步驟111期間通過RM對象(也稱為交互式對象)檢測此事件，從而導致在 呈現中激活此交互式對象。此激活對應於在步驟112期間相對於視聽流中的變化實施呈現中的動作。下文參照多個替代實施例和應用實例更詳細地描述此實施例。2. 1第一替代實施例根據圖2中所說明的上文所描述的實施例的第一替代形式，經由視聽流發送代表 視聽流中的變化的所述則信息。在討論中的系統中，呈現伺服器20處置「Rich Media」 呈現的「Rich Media」 部分，且視聽廣播伺服器21供應對應於所述呈現的視聽流。在終端或客戶端接收器22上 重放此「Rich Media」 呈現。根據此替代實施例，代表視聽流中的變化211的所述則信息由視聽廣播伺服器21 經由視聽流210發送。此信息211使終端22知道待在呈現中執行的動作應在所述信息被讀取時執行，以 便與變化同步。舉例來說，此信息211對應於特定值，所述特定值在由視聽/ "Rich Media」 界 面對象讀取時觸發特定事件，下文中稱為類型A事件。在「Rich Media」 呈現中，一個(或多個)「Rich Media」 對象(也稱為交互 式對象)經編程以監視類型A事件。當這些事件中的一者發生時，接著激活交互式對象，從而觸發對應於視聽流中的 變化的動作。2. 2第二替代實施例根據圖3中所說明的上文所描述的實施例的第二替代形式，代表視聽流中的變化 的所述則信息不經由視聽流發送，而是基於來自「Rich Media」 呈現的一則已知時戳信息 與視聽流的當前時戳之間的比較。舉例來說，視聽流的變化對應於源頻道的變化，或電視頻道的變化。實施頻道的此 變化(例如，在終端請求後)的視聽廣播伺服器21知道頻道的變化的時戳。此時戳對應於 (例如)新頻道的第一圖像的時間標籤30。廣播伺服器21向呈現伺服器20發送視聽流31中的變化的時間標籤30，且將視聽 流31發送到客戶端接收器22。
呈現伺服器20向客戶端接收器22發送時間標籤30，所述時間標籤30接著發送到 視聽/ "Rich Media」 界面對象。此界面對象負責將此時間標籤30與其解碼和顯示圖像所針對的視聽流的當前時 戳進行比較。當時間標籤30對應於當前時戳時，被解碼和顯示的圖像是新頻道的第一圖像。界面對象接著觸發特定事件，例如類型A，與第一替代實施例中一樣。經編程以監視類型A事件的交互式對象接著在接收到由界面對象產生的此事件 後激活，且對應於視聽流中的變化的動作被觸發。3、應用的實例的描述應用的另一實例涉及在視聽流(例如，電影)的廣播期間顯示廣告。視聽廣播伺服器作出電影與廣告之間以及廣告與電影之間的變化，這些變化對於 接收視聽流的呈現伺服器來說是「透明」的，不管內容(電影或廣告)如何。然而，含有對所述視聽流的參考的「Rich Media」 呈現應為用戶顯示特定信息， 尤其在廣告(例如，交互式在線購買信息，或與廣告的內容相關聯的個人化信息)的廣播期 間。根據本發明的方法因此使「Rich Media」 呈現能夠確定廣告開始時間以便顯示 其特定信息而不是電影信息，且確定廣告結束時間以便返回到對應於電影的廣播的顯示。圖4a和圖4b說明從客戶端端來看，根據上文所描述的第一和第二替代實施例的 本發明的應用的此實例。客戶端接收器隨著時間的過去而重放呈現40、41和42。這些呈現包括對視聽流 的參考，分別為電影(40)、廣告(41)和電影的其餘部分(42)；以及「Rich Media」 部分， 其例如用以顯示頻道日誌且針對與所廣播的廣告連結的交互式信息。根據第一替代實施例(圖4a)，廣播伺服器在與視聽流相同的時間發送一則代表 視聽流中的第一變化的信息。此信息(稱為變化信息1)對應於廣告的開始，且由呈現服 務器在與視聽廣告流相同的時間(時間Tl處)接收。此信息發送到呈現的視聽/ "Rich Media」 界面對象，所述界面對象又觸發特定事件(例如，「adVert_Start」事件)以激活 所述呈現的特定經編程以監視這些特定事件的交互式對象，如上文參看圖1所描述。交互式對象的激活在此情況下對應於「Rich Media」 類型1動作(稱為動作 RMl)，例如關於所廣播的廣告的信息(在線購買報價、價格、特殊報價信息等)的顯示。所述原則對於從廣告到電影(先前廣播的電影的其餘部分或另一電影)的切換是 相同的。視聽廣播伺服器發送第二則變化信息(稱為變化信息2)。此信息(其對應於廣告 的結束)由呈現伺服器在與視聽電影流相同的時間(時間T2處)接收。此信息發送到所 述呈現的視聽/ "Rich Media」 界面對象，所述界面對象又觸發特定事件(例如，「film_ start"事件)以激活所述呈現的特定經編程以監視這些特定事件的交互式對象，如上文參 看圖1所描述。交互式對象的激活在此情況下對應於「Rich Media」 類型2動作(稱為動作 冊2)，例如關於所廣播的電影的信息(獲得關於電影的信息的選項、電影中的演員、其它廣 播時間等)的顯示。根據第二替代實施例(圖4b)，廣播伺服器將分別代表所描述的兩個變化的兩則信息發送到呈現伺服器。這兩則信息可以包括兩則信息的單個數據項目或各包括一則變化 信息的兩個數據項目的形式發送。這些則變化信息對應於當視聽流中發生變化時的時間標籤。在我們的實例中，第 一時間標籤對應於廣告中的第一圖像(時間Tl)，且第二則變化信息對應於在廣告(時間 Tl)之後廣播的電影的第一圖像。這兩個時間標籤由呈現伺服器發送到呈現的視聽/ "Rich Media」 界面對象。當廣播視聽流時，此界面對象將這些時間標籤與當前經解碼和顯示的圖像的時間 標籤進行比較。在時間Tl處，界面對象將廣告的第一圖像的時間標籤與也對應於廣告的第一圖 像的時間標籤Tl進行比較。比較的結果因此是肯定的，且界面對象觸發特定事件(例如， 「advertjtart」事件)以激活所述呈現的特定經編程以監視這些特定事件的交互式對象， 如上文參看圖1所描述。接著，如上文在第一替代實施例中所描述，交互式對象的激活對應於 「1 化1^6(1^』 類型1動作(稱為動作RMl)，例如關於所廣播的廣告的信息(在線購買報 價、價格、特殊報價信息等)的顯示。類似地，在廣告的廣播期間，界面對象繼續將經解碼和顯示的每一圖像的時間標 籤與第二時間標籤(標籤2)進行比較。當在時間T2處界面對象將電影的第一圖像的時間標籤(廣告結束時)與也對應 於電影的第一圖像的時間標籤T2進行比較時，比較的結果是肯定的。界面對象接著觸發特 定事件(例如，「film_start」事件)以激活所述呈現的特定經編程以監視這些特定事件的 交互式對象，如上文參看圖1所描述。交互式對象的激活(如上文針對第一替代實施例所描述)對應於「RichMedia」 類型2動作(稱為動作RM2)，例如關於所廣播的電影的信息(獲得關於電影的信息的選項、 電影中的演員、其它廣播時間等)的顯示。這兩個動作RMl和RM2可在「Rich Media」 呈 現中編程，且因此為交互式對象所知，所述交互式對象在被激活時實施這些動作。舉例來 說，假定一對象經編程以當其在檢測到「advertjtart」類型事件之後被激活時顯示廣告信 息。另一對象可經編程以當其在檢測到「film_start」類型事件之後被激活時顯示關於電 影的信息。在應用的此實例的一個說明性實施例中，存在兩個交互式對象而不僅僅一個，每 一交互式對象負責兩個動作中的一者。這些特定信息顯示動作或與視聽流中的變化同步地在呈現中實施的任何其它類 型的動作可經由URN( 「統一資源名稱」)、URI ( 「統一資源識別符」)或URL( 「統一資源定 位符」)來配置。舉例來說，由視聽/ "Rich Media」 界面對象觸發的事件具有含有涉及待顯示的 (關於廣告或電影的)特定信息的URL的屬性。交互式對象當在檢測到事件後被激活時解 析URL，且因此在視聽流中作出變化時顯示所述特定信息。
權利要求
一種使一則「Rich Media」內容中的動作與一則視聽內容中的變化同步的方法，所述「Rich Media」和視聽內容是「Rich Media」呈現的一部分，其特徵在於，所述方法包括以下步驟獲得一則代表所述則視聽內容中的所述變化的信息，稱為變化信息；使所述則「Rich Media」內容中的動作與所述變化同步，所述同步步驟包括以下子步驟將所述變化信息轉換為「Rich Media」事件；通過所述呈現的至少一個「Rich Media」對象來檢測所述事件；基於所述檢測到的事件觸發所述呈現中的所述動作。FPA00001161076000011.tif,FPA00001161076000012.tif,FPA00001161076000013.tif,FPA00001161076000014.tif,FPA00001161076000015.tif,FPA00001161076000016.tif
2.根據權利要求1所述的同步方法，其特徵在於，經由所述則視聽內容發送所述變化信息。
3.根據權利要求1所述的同步方法，其特徵在於，所述變化信息是基於與所述呈現相 關聯的一則時戳信息與所述則視聽內容的當前時戳的比較。
4.根據權利要求1到3中任一權利要求所述的同步方法，其特徵在於，所述變化信息還 包括至少一則代表所述則「Rich Media」 內容中的所述動作的信息，稱為動作信息。
5.根據權利要求4所述的同步方法，其特徵在於，所述動作信息屬於包括以下各項的 群組URN ( 「統一資源名稱」)； URK 「統一資源識別符」)； URL ( 「統一資源定位符」)。
6.一種用於使一則「Rich Media」 內容中的動作與一則視聽內容中的變化同步的裝 置，所述「Rich Media」 和視聽內容是「Rich Media」 呈現的一部分，其特徵在於，所述裝置包括用於獲得一則代表所述則視聽內容中的所述變化的信息的構件，所述信息稱為變化信息；用於使所述則「Rich Media」 內容中的動作與所述變化同步的構件，所述同步構件包括用於將所述變化信息轉換為「Rich Media」 事件的構件； 用於通過所述呈現的至少一個「Rich Media」 對象來檢測所述事件的構件； 基於所述檢測到的事件觸發所述呈現中的所述動作。
7.一種計算機軟體產品，其特徵在於，其可從通信網絡下載且/或保存在可由計算機 讀取且/或由處理器運行的媒體上，所述計算機軟體產品包括用於實施根據權利要求1到 5中任一權利要求所述的同步方法的程序代碼指令。
8.一種創建包括至少一則視聽內容和至少一則「Rich Media」 內容的「RichMedia」 呈現以用於實施根據權利要求1到5中任一權利要求所述的同步方法的方法，其特徵在於， 所述方法包括以下步驟通過至少一個視聽/ "Rich Media」 界面對象觸發代表所述則視聽內容中的變化的 至少一個事件；創建適合檢測所述至少一個事件的至少一個「Rich Media」 對象；在檢測到所述至少一個事件後激活所述 「Rich Media」 對象； 使至少一個動作與所述「Rich Media」 對象的所述激活相關聯。
9. 一種計算機軟體產品，其特徵在於，其可從通信網絡下載且/或保存在可由計算機 讀取且/或由處理器運行的媒體上，所述計算機軟體產品包括用於實施根據權利要求8所 述的創建方法的程序代碼指令。
全文摘要
文檔編號H04L29/06GK101953135SQ200880121720
公開日2011年1月19日 申請日期2008年12月17日 優先權日2007年12月21日
發明者Gouesbert Pierre-Erwann, Bellanger Stephane, Dufourd Jean-Claude 申請人:Streamezzo