用於分割、分類視頻對象並拍賣交互式視頻對象的權利的自動過程的製作方法

2023-10-10 10:01:14

專利名稱：用於分割、分類視頻對象並拍賣交互式視頻對象的權利的自動過程的製作方法
技術領域：
本發明涉及一種用於將視頻中的視頻內容對象進行自動分割及分類、拍賣將廣告內容與所述視頻對象相關聯的權利、以及創建將廣告與選擇的視頻對象相關聯並且使視頻觀看者能夠與視頻中的視頻對象進行交互的覆蓋圖(overlay)的系統。
背景技術：
視頻是對表示運動場景的一系列靜止圖像進行電子捕捉、記錄、處理、存儲、傳送和重建的技術。視頻技術最早是為電視系統而開發的，但到已經逐漸開發出了許多格式以允許觀看者視頻記錄。電影中的動態圖片可轉換為視頻格式。視頻也可以通過網際網路在電腦顯示器上作為視頻片段或流媒體片段被觀看。動畫是快速顯示一系列藝術作品圖像或模型位置以創建運動的錯覺。它是一種由視覺暫留現象引起的視錯覺，且可以通過多種方式被創建和演示。儘管還存在其它的若干種呈現動畫的形式，但呈現動畫最普通的方法是作為動態圖片或視頻。視頻內容分割是指將動態圖片幀系統地分解成它的對象(元素)，如人、襯衫、樹、 葉子等。如果不進行分類的話，分割視頻內容將導致生成大量沒什麼價值的對象。分類是將一個幀的對象分配到另一幀的同一對象的同一類的過程。它使一個幀中的特定的紅色襯衫與另一幀中的紅色襯衫是相同的自動辨識成為可能。還有若干種方式可將視頻對象分配至它們所屬的類別，比如通過它在連續視頻幀中的外形輪廓。例如，這可通過將視頻對象輪廓的曲率特徵與包含有原型對象的預處理視圖的資料庫進行匹配來完成。 見名為MOCA工程對象辨識的附件1。對於在視頻幀中的對象的每個二維外形，計算其輪廓的曲率特徵。這些特徵與存儲在資料庫中的原型視頻對象的視圖的那些特徵匹配。通過使用情境法則(context rule) 如「房子在幀中可能有車，或在幀中可能有樹，但在幀中沒有電視」，可增加準確度。通過整合連續幀的匹配結果，可達到最終的對象分類。具有若干種用於視頻分割和分類的範型和算法。大多數是基於將視頻分割成若干層，如靜態背景層和動態前景層，以及使用多種線索，如空間位置、顏色、動作、輪廓和深度不連續性等。轉描機(rotoscoping)是這樣的動畫技術在其中動畫片繪製者逐幀描出直接從大自然或以真人表演攝製的影片的運動，以供用於動畫影片。通過利用同步的攝像機從若干個透視(perspective)拍攝視頻，視頻分割算法可用來自動重建運動物體的3D線框。在本發明的一個實施方式中，將轉描機技術應用於由多個攝像機角度拍攝的視頻以重建3D對象、以及把它們的線框存進視頻對象資料庫。當觀看者選擇可得到3D信息的對象時，觀看者就被提供了控制3D對象物體的動畫的方式，如旋轉、運動、縮放等。本發明的一個目的是為提供自動化的系統，用於分割原始視頻以創建可以被用於使視頻交互的視頻對象的目錄，以及將這些視頻對象拍賣給廣告商，本發明不限於分割或分類視頻內容對象的任何特定方法。在本發明的一個實施方式中，包含關於可能出現在視頻中的對象的描述信息和/ 或元數據的對象信息庫被用來將元數據，如產品信息、特有的產品識別信息或庫存單位，與分割視頻對象關聯。本發明另一個目標是創建可藉以把對視頻對象的的目錄的權利自動拍賣給第三方(如廣告商)的廣告市場交易平臺。

發明內容
公開了一種用於將視頻內容自動地分割及分類成對象並拍賣該些對象的系統，包括視頻分割及分類伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、 只讀存儲器、及大容量存儲器的計算機；所述視頻分割及分類伺服器包括存儲在視頻資料庫中的一個或多個視頻文件；存儲在所述隨機存取存儲器、只讀存儲器、及大容量存儲器其中之一的對象信息庫，所述對象信息庫包含用於識別視頻文件內的對象的對象信息和用於描述所述對象的描述信息和語義信息中的至少一個；對象目錄資料庫，其包含描述至少一個視頻對象在視頻文件其中之一中的位置信息；以及在所述處理器上執行的視頻內容分析應用，所述視頻內容分析應用對視頻文件進行分割以識別視頻對象的位置、將視頻對象進行分類以匹配給定視頻對象的出現、通過將分類的視頻對象的出現與在所述對象信息庫中的視頻對象進行匹配來重新獲取描述所述視頻對象的信息、和將描述在所述視頻中的所述視頻對象的動態位置的信息以及描述所述視頻對象的信息儲存到所述對象目錄資料庫中。根據本發明的一種實施方式，該系統進一步包括至少一個廣告伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；在所述廣告伺服器上執行的自動競標應用；以及在所述視頻分割及分類伺服器上執行的自動拍賣應用，所述拍賣應用傳輸拍賣信息至所述的至少一個廣告伺服器，所述拍賣信息包括描述選定的視頻對象的信息，所述自動拍賣應用從所述至少一個廣告伺服器接收來自於所述自動競標應用的競標信息，並授予關聯廣告內容的權利給所述至少一個廣告伺服器中選定的一個。在上述系統中，所述自動拍賣應用可以將與所述給定視頻對象相關聯的用戶行為信息和市場細分信息中的至少一個傳送至所述廣告商競標應用。系統的上述任意實施方式，可以進一步包括在資料庫中的廣告內容；以及覆蓋圖生成應用，其用於創建將所述廣告內容與給定的所述視頻對象連結的視頻覆蓋圖，並創建可選擇的超連結，該超連結的位置跟蹤在視頻中的所述視頻對象的動態位置。上述系統的實施方式可以進一步包括視頻廣播伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；視頻用戶伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；所述視頻廣播伺服器從所述視頻分割及分類伺服器接收所述視頻覆蓋圖，並將該視頻覆蓋圖傳送給所述視頻用戶伺服器，其中所述視頻覆蓋圖響應於與所述給定的視頻對象的交互而選擇性地引起與給定的所述視頻對象連結的內容信息的顯示。在上述系統的任意實施方式中，所述視頻分割及分類伺服器保存已被拍賣的對象的資料庫。在上述系統的任意實施方式中，每個所述資料庫條目包括指示已被拍賣的對象的權利何時期滿的信息。在上述系統的任意實施方式中，所述至少一個廣告伺服器將指定所期望的人口統計受眾的信息傳送給所述視頻分割及分類伺服器，並且所述拍賣伺服器傳送被限制於所述所期望的人口統計受眾的對象拍賣信息。在上述系統的任意實施方式中，所述拍賣信息包括指定人口統計信息和用戶行為歷史信息中的至少一個的信息。在上述系統的任意實施方式中，所述視頻用戶伺服器進一步包括內容顯示應用， 用於顯示視頻並且當給定的視頻對象是利用指示設備所選擇和滾動的之一時，與所述視頻覆蓋圖交互並顯示廣告內容。在上述系統的任意實施方式中，視頻對象的選擇使得內容顯示應用暫停或者放慢視頻的顯示。在上述系統的任意實施方式中，所述視頻用戶伺服器包括指示設備；所述內容顯示應用顯示與出現在視頻中的對象相關聯的第一內容，並且當流視頻中所選擇的所述視頻對象是利用所述指示設備所選擇和滾動的之一時顯示第二內容。在上述系統的任意實施方式中，所述廣告內容包括可選擇的連結，其中該連結的選擇提供電子商務選項。還揭露了一種在視頻中自動創建可選擇的超連結的系統，包括將視頻文件分割成視頻對象，多個視頻對象，將所述的多個視頻對象進行分類以識別給定的所述視頻對象的重複出現；將每個視頻對象的幀和子幀信息存儲到資料庫中；以及利用將所述資料庫中的至少一個視頻對象與所述視頻文件連結的視頻覆蓋圖在視頻文件中創建可選擇的超連結。在上述系統的任意實施方式中，所述可選擇的超連結與廣告相連結，當用戶利用指示設備滾動或者選擇所述超連結時廣告被顯示。還揭露了一種視頻對象的市場交易平臺，包括視頻分割及分類應用，其用於自動地將視頻分割成多個對象，將所述對象分類成類似對象的群，利用描述信息對所述對象進行標記，將識別在所述視頻內的所述視頻對象的動態位置的信息存儲在資料庫中；以及覆蓋圖生成器，其用於自動地創建將至少一個視頻對象群與所述視頻進行連結的視頻覆蓋圖。在上述視頻對象市場交易平臺的任意實施方式中，每個被連結的視頻對象是可選擇的超連結，所述超連結的位置跟蹤在所述視頻中的視頻對象的動態位置。揭露了一種為視頻觀看者應用提供交互層活動區域的方法，包括訪問定義示出了多個視頻對象的多個幀的視頻數據，每個視頻對象在一系列視頻幀中被示出；以及生成定義多個區域的區域定義數據，每個區域對應所述多個視頻對象中的一個，其中由所述區域定義數據定義的每個區域的輪廓匹配由在所述一系列幀中示出的對應視頻對象的輪廓。 在上述用於提供活動區域的方法的實施方式中，所述每個區域的輪廓在所述一系列幀中動態地變化以匹配在透視和大小及視角中的至少一個的變化，其中以該透視和大小及視角在所述一系列幀中示出的對應視頻對象。在上述用於提供活動區域的方法的任意實施方式中，使用所述區域定義數據定義多個活動區域用於交互式視頻觀看。在上述用於提供活動區域的方法的任意實施方式中，其中所述幀作為視頻在顯示器上向用戶示出，並且其中所述區域定義數據被用於判定被引向這些幀中的至少一個幀的位置的用戶動作是否定址所述活動區域中的一個。在上述用於提供活動區域的方法的任意實施方式中，響應於用戶動作定址特定活動區域的判定，向用戶呈現廣告，所述廣告與對應所述特定活動區域的視頻對象相關。在上述用於提供活動區域的方法的任意實施方式中，用於至少一個區域的所述區域定義數據包括對應所述區域的所述視頻對象的三維線框表示。在上述用於提供活動區域的方法的任意實施方式中，用於所述區域的區域定義數據還包括對於在其中示出所述對應的視頻對象的所述一系列幀中的至少一個幀，定義所述三維線框表示的透視圖的數據，其中所述三維線框表示的透視圖的輪廓定義所述幀的區域的輪廓。在上述用於提供活動區域的方法的任意實施方式中，所述區域的區域定義數據還包括對於在其中示出所述對應視頻對象的所述一系列幀中的至少一對幀，定義所述一對幀的幀之間的所述三維線框表示的變化的數據。在上述用於提供活動區域的方法的任意實施方式中，所述三維線框表示包括多個節點，其中定義所述變化的數據包括定義至少一個節點相對於至少另一節點的位置的位移的數據。在上述用於提供活動區域的方法的任意實施方式，所述定義所述變化的數據包括定義所述三維線框表示的大小與空間定向中的至少一個的變化的數據。


圖1是根據本發明的視頻對象市場交易過程的流程圖；圖2是根據本發明的視頻對象市場交易系統的框圖；圖3是在其上執行視頻內容分析應用的計算機的方框圖；圖4是根據本發明關於廣告商怎樣與視頻對象市場交易系統進行交互的流程圖；圖5和圖6是示出根據本發明觀看者與視頻對象市場交易平臺進行交互的流程圖；圖7是對象目錄資料庫的示範圖；以及圖8A-8E是視頻對象的透視圖以及從中創建的線框模型。
具體實施例方式本發明是系統100，用於將視頻自動分割成視頻對象、分類視頻對象、組建分類的視頻對象的資料庫、定義表示每個視頻對象在互動層上的區域定義數據、拍賣將廣告與表示市場交易平臺(下文稱「V0ME」) 300上的視頻對象的區域相關聯的權利、以及創建帶有把廣告內容連結到視頻內容對象從而創建交互式視頻的區域定義數據的視頻覆蓋圖。該區域是視頻幀的與底層(underlying)視頻對象相一致的部分。區域定義數據定義了視頻幀的這樣的部分。本發明的系統100由若干個不同然而相聯繫的元素構成。本發明一個方面涉及視頻對象目錄與對應的區域定義數據的創建。視頻對象目錄 114是包含以指向視頻或者動畫文件中的對象的指針或參考的形式的區域定義數據的資料庫。重要的是，通過提供把附加信息與視頻中的特定視頻對象連接的能力，區域定義數據用來使視頻為交互的。例如，視頻觀看者可選擇在視頻中顯示的車，並且學習車的製作和建模和其它附加信息。本發明將附加信息關聯至視頻對象，從而使對象成為可選擇的超連結。在本發明的一個實施方式中，被辨識的視頻對象由3D矢量圖形數據表示，如圖8D 中的線框模型。該表示法是這樣創建的通過計算對象上的透視圖8A-8C之間的差別然後指定物理對象上兩個數學上連續平滑面相交的每個邊緣、或者通過用直線或曲線連接對象的構成頂點。如果不能得到所有視圖，那麼只能創建部分的3D模型，但一旦缺失的視圖在另外的視頻中是可得到的，則完成該3D模型。這些3D線框模型可用來改善視頻對象的辨識，也可用於把視頻對象表示為三維線框透視圖(圖8E)的輪廓。這種實施方式可能具有計算上的好處。根據一種實施方式，視頻對象與元數據和/或對象描述相關聯，對象描述使得使用者(如廣告商)可搜索所有「汽車」的實例，搜索結果將也包含「轎車」。對象描述可以是語義網絡的一部分，其使得拍賣競標者能夠指定他們想競標的對象和視頻情境。這對於在不適合廣告商品牌的情境下防止品牌的暴露來說可能是有用的。用在這個說明書中的術語 「視頻對象」指的是視頻幀元素，如出現在視頻或動畫中的轎車、跑步者或狗。在本發明的一個實施方式中，資料庫中的視頻對象的運動屬性，比如快、慢、上、下等，將被編入索引，這使得拍賣競標者能夠用運動屬性指定他們的競標物。在另外的實施方式中，對象的狀態將被編入索引，如通過本技術領域中已知的面部表情算法，該算法可以提取視頻中的人的狀態，比如高興或悲傷。下文中提及的視頻應理解為包括2D視頻、3D視頻和動畫片，除非做出明確區別。 視頻對象資料庫包含識別視頻文件中的視頻對象的位置、形狀和運動的詳細信息。視頻對象目錄可能包含在視頻內容中的特定對象的詳細描述，如製作者、製作和模型。正如下面將要進一步詳細解釋到的，此詳細信息可用來連結例如廣告內容之類的信息至視頻對象。正如將在下文解釋到的，根據本發明的各種實施方式，視頻對象可手動地、半自動地或自動地被識別，且與相應信息關聯。本發明的進一步的方面涉及視頻對象市場交易平臺(VOME)的創建，其中競標者 (廣告商)為將他們的廣告內容關聯到給定視頻對象的權利而進行競標。應當注意，本發明也能夠使視頻內容的擁有者只拍賣視頻對象目錄中的某一部分，並且可以不通過公開競標過程而將剩餘部分直接銷售給目錄買家。視頻內容的激活本發明的進一步的方面涉及視頻覆蓋圖的創建，該覆蓋圖把「被動」視頻轉化為交互視頻，其中該「被動」視頻例如為你「被動地」觀看而不能與之交互的視頻，而在交互視頻中，觀看者可與視頻的區域交互，通過選擇或者滾動視頻中的區域因此觸發與該對象相關聯的廣告內容的顯示。在靜態媒體(比如網站)中使用超連結是眾所周知的。在視頻遊戲和動畫中，點擊對象是很普遍的。那就是使得它為互動的。豐富的(rich)媒體或者交互媒體指的是促進受眾的主動參與即交互性的通信媒體。傳統的信息理論將交互媒體描述成構建雙向通信的媒體。視頻內容的標識與編輯本發明將視頻和動畫內容分割成它的對象並且存儲諸如為形狀、χ、y和時間坐標的區域定義數據，或者，在涉及測定體積的(volumetric)視頻或測定體積的動畫情況下， 本發明存儲形狀、x、y、z以及時間坐標。術語「時間坐標」指的是時間、視頻幀或者類似物。 另外，「視頻幀」旨在於傳送視頻或動畫在特定時間(視頻流中的位置)的一個瞬間(靜止) 圖像幀。所有這些坐標對於指定在時間上的給定時刻的幀內的視頻對象是必不可少的。本發明的一個目的是利用常規的視頻內容分析技術，比如目前用於識別人群中的某個人，或者識別/檢查傳送帶上的小器件，並將該技術應用到營銷通信、廣告和商務交易領域。更具體地而言，本發明的一個目的是識別在視頻和動畫中的感興趣的視頻對象。被識別的視頻對象或內容對象可以被用來添加(populate)可用在廣告市場交易平臺中的視頻內容目錄114。此外，利用把視頻對象與廣告內容相連結的區域定義數據可激活視頻或者使視頻具有交互性。應當理解到，本發明的方法包含電影和基於對象的動畫兩者。以下提到的視頻應當被理解為包括電影和基於對象的動畫兩者。圖1是本發明第一實施方式的方法的高級流程圖。在步驟700和710中，利用自動分割及分類應用分割及分類視頻，以產生對象列表或表格。分割過程700產生貫穿視頻的視頻對象的列表(包括每個對象的區域定義數據和時間坐標)，並且分類過程710將同一對象在視頻的不同幀中的出現匹配出來因此減少重複/冗餘，應當注意到視頻對象的位置、大小和形狀在整個視頻中可能且通常是改變的。對象的大小根據隨著它在整個視頻的移動而變化的它的接近性(proximity)進行變化。類似地，對象的形狀可根據觀看它的透視或有利點變化，例如，前視圖VS側視圖。此外，本發明的系統能夠對移動的對象進行分割和分類。因此，視頻對象的位置隨著底層對象移動而動態地改變，這在區域定義數據中予以表示。在步驟720中，所述視頻對象與對象庫中的對象進行比較，對象庫裡可以是表示視頻中的對象的3D線框數據。根據3D線框模型生成的透視圖對於自動對象識別過程有禾U。這個步驟是可選的。當檢測到匹配時，則該對象與對象庫中的產品描述和/或元數據相關聯。不匹配的視頻對象會被拋棄，或者受到第二處理應用的處理和/或分析師手動識別/成形該對象的邊界(步驟730)，然後該對象會受到另一分類步驟(710)和/或與對象庫中的對象的另一比較(720)。在步驟740中，視頻對象向市場交易平臺公開並由 自動拍賣過程進行處理。在步驟745，創建連結視頻對象與廣告商提供的內容的視頻覆蓋圖。在步驟750， 帶有區域定義數據的視頻覆蓋圖被傳送到視頻播送設備120。在步驟760，視頻觀看者通過滾動或選擇視頻區域與視頻覆蓋圖交互因而觸發顯示與視頻對象關聯的廣告內容。應該理解，相較於選擇對象時所顯示的廣告內容，滾動可能不允許顯示不同的廣告內容。例如，相較於使用指示設備簡單地滾動對象而顯示的信息，選擇對象可觸發更多細節信息。在步驟770 (可選的)，VOME 300記錄觀看者與視頻對象的交互，並更新觀看者的行為概況(profile)。應當注意，視頻觀看者與視頻覆蓋圖(和視頻對象)的交互通常會觸發來自於VOME 300的廣告內容的顯示。這使得與視頻對象相關聯的內容能夠即時更新而無需改變視頻覆蓋圖。視頻覆蓋圖通過使視頻區域成為可選擇的超連結來而使視頻具有交互性，但是實際內容直接來源於VOME 300。在步驟780中(可選)，VOME 100完成了由觀看者與表示視頻對象的視頻區域的交互發起的銷售交易。正如以下將要更詳細地予以解釋的，VOME 300可以使得觀看者完成銷售交易。以下將更加詳細地描述這些步驟中的每一步驟。應當了解，步驟的相對順序能夠頻繁的變化而不影響本系統，例如步驟770和780 可以調換而不影響結果。以特定順序羅列步驟不應理解為具體順序的限制，除非從上下文中可以清楚地看出需要特定順序。到目前，已經通過參考視頻對象來描述本發明的方法，然而，本發明也涉及視頻內的事件的識別，其中，事件被定義為對象正在在空間上移動。例如，人正在走路或者車正在行駛。即使沒有定義該對象，事件仍然具有例如高速這樣的特徵，這對於廣告商來說可能是有價值的。在基於對象的動畫中，每個對象通過其矢量圖類來確定。因此，分析師不教導本系統辨識對象，而是描述感興趣的對象。對於每個被描述的對象，系統存儲用於識別動畫數據中該對象的每一出現有用的對象信息。基於對象的動畫例如Adobe Flash或者Java保存有對象和事件信息。其它動畫技術在渲染期間丟失對象和事件的參考。一旦參考丟失，我們不得不像在基於像素的普通視頻中一樣應用對象和事件辨識技術。在動態圖片媒體中，視頻內容分析技術被用於基於大小、形狀、顏色、色彩密度等來識別對象。本發明不局限於任何用於識別視頻中的內容對象的特定方法，以下將詳細討論的若干不同方法。分析師可以手動訓練分割應用106以辨識對象例如通過追蹤對象的輪廓，或者本系統可以呈現它通過統計模式辨識找到的內容對象的模式。下文中將予以詳細解釋的視頻內容分析或者視頻分析應用106自動檢測視頻中的識別出的對象的另外出現。視頻內容分析應用106可提供有包含3D框線模型或用於識別來自一個或多個不同透視的一個或多個預定義對象的特徵的對象信息庫112，或者，視頻內容分析應用106可提供有用於識別對象的啟發法(heuristic)。對於對象的每個識別出的出現來說，VOME 300存儲用於識別在其中出現對象的幀(時間坐標)和區域定義數據(幀中的位置，例如X、Y和Z坐標)的信息。使用區域定義數據，VOME 300能夠動態跟蹤對象。 應當注意到，可選擇的區域(超連結)的大小、形狀和位置與底層對象的大小、形狀和位置相對應。根據本發明的一個改進，當觀看者訪問或請求訪問視頻內容時將自動觸發拍賣。根據本發明的另一改進，當廣告商將廣告連結到給定視頻對象的權利到期時，可觸發拍賣。每次視頻對象被添加到視頻對象目錄中或以一定周期(例如每小時、每天或每周)可進一步觸發拍賣。根據本發明的另一實施方式，廣告商可以搜索視頻對象的資料庫114(對象目錄資料庫)併購買將內容連結到對象的權利從而越過拍賣過程，或者通過提交公開競標發送對參與拍賣感興趣的信號。此外，廣告商可以對VOME 300建議針對特定的市場細分、人口屬性、用戶行為概況或者其它的它有興趣競標的類似因素。就如名稱為 「Method and system for providing targetedadvertisements，，的第6718551號美國專利所教導的(在此通過引用方式將該專利併入本文)，廣告商122可提供有關於觸發拍賣的視頻觀看者124的觀看者概況信息。應當注意的是，因為視頻觀看者 124通過請求訪問視頻來觸發拍賣，因此觀看者概況信息是可得到的。 所述觀看者概況可以是識別觀看者的點擊歷史、購買習慣、社交網絡、地理位置歷史、瀏覽和搜索習慣、以及/或者附加的人口屬性，其中包括多元化(multifaceted)觀看者概況。可以根據存儲在觀看者電腦中的cookies，或者根據觀看者的第三方信息，還有其它方法，編譯所述多元化觀看者概況。所述多元化觀看者概況可用於判定特定觀看者對於特定競標者(廣告商)的相對價值。除了提供給競標者上述的觀看者概況信息之外，VOME 300還提供在視頻或視頻組中所包含的對象的列表。根據本發明的一個實施方式，VOME 300以單個的基礎投標將廣告內容連結到包含在觀看者訪問的視頻中的視頻對象中的一個或多個視頻對象的權利。因此，不同的廣告商可擁有在特定視頻中的不同視頻對象的臨時權利。應當注意到，正在被拍賣的廣告權利是不同於傳統的「被推」給視頻觀看者的橫幅廣告。推式廣告是顯示在觀看者顯示屏的頂部(橫幅)或者側邊上的廣告。推式廣告是被推送給觀看者的，即是說，觀看者沒有明確地請求這些廣告。如接下來將要詳細解釋的，根據一種實施方式，觀看者通過與表示視頻內的視頻對象的特定區域進行交互來拉出廣告內容。例如，觀看者可以指向視頻幀，這將使得視頻變慢，選擇或滾動視頻中的視頻對象從而觸發VOME 300將與該對象連結或關聯的情境信息作為彈出窗口、覆蓋圖或在緊接視頻播放器的區域中被顯示。然而，VOME 300可以結合傳統的推式廣告與拉式廣告。例如，當對象在視頻中出現時，VOME 300可推出與該些對象相關的廣告內容，或者VOME 300可以推出與觀看者已經與之交互的對象類型(比如觀看者已經滾動或選擇的對象)相關的廣告。正如上面提到的，VOME 300可以在競標之前實時提供實際視頻觀看者的概況給第三方(比如廣告商122)。可替換地，VOME 100可以為多個市場細分中的每一個簡單地拍賣視頻內容對象的權利。例如，VOME 100可以通過年齡、性別、收入、區域或者消費習慣等的組合來細分市場。如果拍賣發生在視頻觀看者124訪問之前，將不可能提供實際視頻觀看者的概況信息給廣告商(競標者)，VOME 100將根據市場細分來拍賣這些權利。應當理解的是，文中所用術語「自動」指的是不受人為幹預而發生的行為。換句話說，簡單地通過將只是通過將新內容添加到目錄114或者之前拍賣的權利已到期等由VOME 300發起拍賣。VOME 300將視頻文件自動分割並對視頻對象自動分類。廣告商伺服器可包括自動將競標提交給VOME 300的自動競標應用。下面還將解釋到，處理視頻以創建激活的視頻對象以及將這些視頻對象添加到目錄可以由自身來發出無需人為幹涉。因此，根據一些實施方式，VOME 300可以是完全自動的系統。該系統完全自動運行的唯一要求就是具有不同視角或帶有對象描述的對象的3D線框模型的的對象圖像預先處理的資料庫112。圖2是本發明的系統100的第一種實施方式的框圖。系統100包括該資料庫的權利由播送設備120或類似物所擁有的視頻內容的資料庫102。「播送設備」簡單地是指擁有視頻內容的權利並通過交互電視或流網站的使這種權利對於觀看者1 變得可用的方。資料庫102位於播送設備伺服器200上(圖幻，該伺服器可以通過比如為英特網的分布式網絡104來進行訪問。伺服器200包括處理器202，該處理器經總線204連接至大容量存儲設備206、只讀存儲器(ROM) 208、隨機存取存儲器(RAM) 210 (其可以是易失的或非易失的)。資料庫102可以被存儲在RAM210、R0M208、或者大容量存儲設備206中。附屬設備比如鍵盤212、可用作鍵盤和顯示屏二者的觸控螢幕214、顯示設備216和指示設備(滑鼠)218可以可選地連接至所述伺服器200。資料庫102包含未經處理的或者原始的視頻內容，這些視頻內容可以由視頻內容分割和分類引擎106(在此之後稱為內容分析應用)來訪問。「原始的視頻內容」指的是沒有被處理以識別對象的視頻。在圖2中，顯示了資料庫102被複製到資料庫108 ；然而，資料庫102的複製是可選的。資料庫108存在於視頻分割及分類伺服器300中(圖幻，該伺服器可以通過分布式網絡104例如網際網路來訪問。此後提到訪問資料庫102時應被理解為等同於訪問資料庫 108，反之亦然。伺服器300包括處理器202，該處理器202通過總線204連接至大容量存儲設備 206、只讀存儲器(ROM) 208、隨機存取存儲器(RAM) 210 (其可以其可以是易失的或非易失的)。視頻文件資料庫108可以存儲在RAM210、R0M208或者大容量存儲設備206中。附屬設備比如鍵盤212、可用作鍵盤和顯示屏二者的觸控螢幕214、顯示設備216和指示設備(滑鼠)218可以可選地連接至所述伺服器300。通過對來自資料庫108 (或10 的原始視頻內容進行分割及分類而匯集視頻對象的目錄104以識別其中的視頻對象。更確切地說，視頻內容分析應用106對原始視頻內容進行分割以產生特定視頻中所有視頻對象的列表。然後，視頻內容分析應用106將該視頻對象列表進行分類以解析整個視頻中相同視頻對象的出現。VOME 300可被提供有分別執行分割和分類的獨立軟體應用，或者具有既可執行分割又可執行分類的單個軟體應用。本文揭露了為視頻應用提供交互層的活動區域的方法，該方法包括訪問定義示出了多個視頻對象的多個幀的視頻數據，每個視頻對象在一系列視頻幀中示出；通過使用包括視頻對象分割和分類的視頻對象辨識算法生成區域定義數據。這些區域定義數據定義了多個區域，每個區域對應多個視頻對象中的一個，其中由區域定義數據定義的每個區域的輪廓與在一系列視頻幀所示出的對應的視頻對象的輪廓相匹配。根據本發明的一個改良方案，每個區域的輪廓在該一系列幀中動態地變化，以匹配在透視和大小以及視角方面中至少一個上的變化，其中以透視和大小以及視角方面在該一系列幀中示出對應的視頻對象。根據本發明的一個改良方案，使用區域定義數據定義多個活動區域用於交互式視頻觀看。
根據本發明的一個改良方案，幀作為視頻在顯示器上向用戶顯示，區域定義數據被用於判定指向這些幀中至少一個幀的位置的用戶行為是否定址於所述活動區域中的一個。
根據本發明的一個改良方案，響應於用戶行為定址於某一活動區域的判定，向用戶呈現附加信息，該附加信息與對應於該某一活動區域的視頻對象相關。根據本發明的一個改良方案，至少一個區域的區域定義數據包括對應所述區域的視頻對象的三維線框表示。根據本發明的一個改良方案，對於在其中示出所述對應視頻對象的所述一系列幀中的至少一幀，所述區域的區域定義數據還包括定義三維線框表示的透視圖的數據，所述三維線框表示的透視圖的輪廓定義該幀的區域的輪廓。根據本發明的一個改良方案，對於在其中示出所述對應視頻對象的所述一系列幀中的至少一對幀，所述區域的區域定義數據還包括定義了在幀對的幀之間的三維線框表示的變化的數據。根據本發明的一個改良方案，所述三維線框表示包括多個節點，和定義變化的數據，該數據包括定義至少一個節點相對至少另一個節點的位置的位移的數據。根據本發明的一個改良方案，定義變化的數據包括定義所述三維線框表示的大小與空間定向中的至少一個的變化的數據。視頻內容分析應用106可以訪問對象信息庫112，該對象信息庫112存儲在伺服器300中或者可以通過伺服器300來訪問。例如，對象信息庫112可以存儲在用於存儲視頻內容分析應用106的程序指令的存儲設備中，例如存儲設備206和/或RAM 210中。該庫112存儲了來自不同的視角或者對象的3D模型的對象的圖像。這些圖像信息可以用作為將描述信息連結至視頻對象的索引或者關鍵要素。該庫112還包括可用於向潛在競標者描述視頻內容對象的對象識別符、標籤、和/或視頻對象的元數據描述中的一個或多個。可替換地，內容分析應用106可以利用邏輯運算來識別視頻內容對象而不需要藉助於對象信息庫112.申請人:在此通過引用方式將名稱為「Video segmentation usingstatistical pixel modeling"的第6625310號美國專利併入本文，該專利公開了利用像素的統計建模將視頻數據分割成前景和背景部分的許多種方法中的一種。為每個像素構建背景的統計模型，並且將到來的視頻幀中的每個像素與用於那個像素的背景統計模型做比較。基於比較將像素確定為前景或者背景。申請人:在此通過引用方式將名稱為"Method and apparatus forauthoring and linking video documents」的第6462754號美國專利併入本文，該專利公開了一種視頻文檔的創建方法，該方法涉及基於所關注對象邊界創建可錨定信息單元文件，這樣所關注對象可以用來識別視頻數據的部分。申請人:在此通過引用方式將名稱為「Linking to videoinformation」的第 7325245號美國專利併入本文，該專利公開了一種系統，可使能包括電視廣播、網頁以及存儲在磁或光媒體上的視頻顯示的各種視頻格式之間的動態連結。視頻信息的每一幀與該幀內的多個位置一起被識別。然後用戶所選擇的位置，例如使用指示設備，被用來訪問或者在系統本身內或者在外部系統上的相關信息。。
申請人在此通過弓I用方式將名稱為「Method，apparatus, system, medium, and signals for producing interactive video content」的第20080294694號美國公開專利申請併入本文，該專利申請公開了一種用於在內容發布計算機上產生交互式視頻內容的方法。該方法涉及將標記與視頻內容中的至少一個圖像部分進行關聯，該標記可操作地被配置為當在視頻內容中圖像部分的顯示位置發生變化時，跟隨所述至少一個圖像部分。此方法也涉及到將圖像部分識別符與標記相關聯，以及將連結屬性與標記相關聯，該連結屬性可操作地響應於交互式視頻內容的觀看者的標記的選擇引起內容位置請求到註冊伺服器的傳輸。該內容位置請求包括圖像部分標識符。如果是手動或半自動的過程，可以在人類分析師110的協助和/或審閱下由內容分析應用應用106創建目錄114。該分析師110可以手動識別視頻對象的給定實例，例如， 通過觀看視頻的靜止圖像和追蹤視頻對象(手動過程)，然後利用內容分析應用106(半自動過程)以識別視頻對象在視頻中的其它出現。附加地或者可替換地，分析師110可以對不匹配的視頻對象的邊界進行審閱和改善，然後使該對象受到第二輪的分類和/或第二輪的將對象與對象庫中的對象匹配。可替換地，分析師110可以審閱和編輯由內容分析應用106自動識別的對象。至此，我們已經描述了從原始視頻中創建視頻對象目錄114的過程。視頻對象目錄114被存儲在存儲設備之內，該存儲設備可以通過分布式網絡104(網際網路)訪問，或者資料庫114的拷貝可通過網絡訪問。重要地，注意視頻對象被用於創建可選擇的區域(超連結)，其可以動態跟蹤對象在整個視頻中的移動、大小和位置。根據本發明的一種實施方式，VOME 300將存儲在目錄資料庫114的視頻內容對象的廣告權拍賣給廣告商122。該拍賣由VOME伺服器300中的自動拍賣應用1 執行，該自動拍賣應用126與廣告商伺服器500中的自動競標應用通信。更確切的說，拍賣應用1 是在處理器202上執行的並且存儲在大容量存儲設備206、R0M 208和RAM 210中的其中一個中的軟體應用。拍賣應用126拍賣將內容關聯到視頻對象的權利。被拍賣的權利可以是有時間限制的，即，在預定時間期滿之後期滿的權利。拍賣應用126可以包括用於自動計費和/或競標轉讓的邏輯。拍賣應用1 存儲有拍賣信息，此拍賣信息可用於識別將內容與拍賣相關聯的權利的擁有者、該權利的持續時間、與對象相關聯的內容、以及計費信息。參見圖7，這些拍賣信息被存儲在伺服器300上的拍賣信息資料庫中。更確切地說，拍賣信息資料庫被存儲在大容量存儲設備206、ROM 208和RAM 210中的一個之內。VOME伺服器300包括對象關聯應用，其創建視頻覆蓋圖用於將接收自廣告商400 的廣告內容與視頻對象關聯。此覆蓋圖由VOME伺服器300提供給播送設備120，並且依次與底層視頻一起從播送設備120到達觀看者124。廣告商122使用計算機或者伺服器500(圖2，；3)競標將內容與視頻對象關聯的權利。計算機500包括處理器202，該處理器202通過總線204連接至大容量存儲設備206、 ROM 208,RAM 210 (其可以其可以是易失的或非易失的)。自動競標應用在處理器202上執行，並且可以存儲在ROM 208, RAM 210和大容量存儲設備206中的一個或者多個之上。自動競標應用傳送拍賣競標至VOME 300上的自動拍賣應用。自動競標應用對來自於VOME 300的描述正在被拍賣的一個或多個視頻對象的信息進行響應。視頻內容對象的使用將原始視頻轉換成交互式視頻內容。觀看者124使用計算機400 (圖3)訪問通過播送設備120在網站上可得到的視頻內容，或者通過分布式網絡例如網際網路可進行訪問的類似物。計算機400包括處理器202， 該處理器202通過總線204連接至大容量存儲設備206、只讀存儲器(ROM) 208、隨機存取存儲器(RAM)210(其可以其可以是易失的或非易失的)。web瀏覽器在處理器 上運行可用於訪問網際網路上的網站。觀看者24通過使用傳統指示設備218、和/或比如本領域熟知的觸摸感應屏幕214來選擇或滾動表示視頻對象的區域，從而與視頻覆蓋圖進行交互。視頻觀看者124所進行的交互觸發附加內容(比如廣告)的顯示。廣告商122正在競標提供廣告內容的權利。廣告權的拍賣可以是自動的。例如，VOME 300可以請求最小的初始競標並指定競標增值，並且每個廣告商122可以為匹配指定標準的觀看者提供自動投標直至預定的最大競標值。根據之前實施方式的變形，當視頻觀看者124訪問播放設備的網站和/或請求訪問視頻內容(可通過所述網站進行訪問)時，視頻(包括其中的所有視頻對象)的廣告權的拍賣或者各自的視頻內容對象的廣告權的拍賣將被觸發。根據這個實施方式，播放設備 120能夠向廣告商122提供視頻觀看者124的觀看者概況信息。觀看者概況信息可以包括， 例如，關於觀看者124之前訪問的網站的信息和/或關於觀看者124購買習慣的信息。不管初始點(對象的手動或自動識別)是什麼，最終產品都是列有給定媒介呈現中(影片剪輯)的每個識別對象的坐標(幀和子幀)和語義模型的資料庫(視頻內容目錄)114。該目錄114可以在廣告市場交易平臺(VOME)上提供以供廣告商競標。廣告商將基於情景信息和正在觀看視頻內容的觀看者的多元化觀看者概況競標目錄和視頻的目錄描述。當具有某一多元化用戶概況的用戶觀看視頻對象時，廣告商可決定在該視頻對象上推送覆蓋圖消息內容。觀看者與視頻對象的交互可以被用來改良被推送給觀看者的消息，如同搜索某些東西時，檢索詞當時可被用來完善給用戶的信息所用的方法一樣。圖4是廣告商怎樣與VOME 300進行交互的流程圖。在步驟800，廣告商基於目錄描述符部署對視頻內容目錄114的檢索，或者可以提交這些產品的圖片這些產品為他想要購買到其的目錄權利的產品。相對於更加初步的關鍵詞檢索，語義檢索的使用是優選的， 因為語義檢索能夠應付描述符信息內的變形。在步驟802，VOME 300返回匹配廣告商的搜索的對象列表和對象分類，廣告商將檢索結果與廣告商的媒體策略和預算調整。在步驟804A，廣告商簡單地選擇購買步驟802 中識別的目錄。可替換地，在步驟804B中，廣告商向VOME 100指定廣告商在實時拍賣期間感興趣競標的項。而且，廣告商可以指定初始競標值和/或最大的競標值。可替選地，VOME 100可以指定初始競標值和競標過程中的增額，而廣告商只指定最大競標值。圖5和圖6是示出觀看者與VOME 300進行交互的流程圖。在步驟600中，觀看者搜索或瀏覽視頻內容，在步驟602中，關於在步驟600中使用的關鍵詞的廣告內容(情境廣告)和視頻內容搜索結果的列表一起被顯示。在步驟604，觀看者選擇視頻進行觀看，在步驟606，相對於被選擇的視頻情境廣告被完善。
在步驟608A和608B，觀看者正在觀看選擇的內容(圖6中的1700)並遇到感興趣的視頻對象。根據一種實施方式，指向該幀，例如通過將指示設備218的指針1701帶到視頻幀1703上，將使得視頻變慢，這允許觀看者選擇對象。在交互電視或者三維(3D)視頻的情況下，觀看者能夠使用各種指示裝置，包括但不限於由任天堂的Wii 推廣使用的虛擬指針類型，其利用手套或者別的帶有能夠確定X、Y和Z坐標的感應器的類似物。在步驟608Α 中，觀看者只對感興趣的對象進行標記以供稍後重新觀看(圖6中的1702和1704)，因此在步驟610中，情境廣告又一次被完善(這次與感興趣的對象相關)，並且觀看者的行為概況被更新。在視頻觀看期間可以重複步驟608Α和610任意次數。在步驟612中，觀看者從步驟608Α重新觀看被標記的項的列表，然後或跳回至該項出現的場景(圖6中步驟614Α和 1704)或了解被選擇的項的更多信息，例如價格、特徵等(步驟614Β)。在步驟616中，觀看者選擇購買一個或多個對象(產品)(根據被標記的或識別的對象中)，在步驟618中，觀看者完成所述交易(圖6中的1708).步驟608Β是步驟608Α的替換，其向觀看者呈現選擇直接跳至614並且了解關於對象的更多信息的選項。與視頻對象關聯的信息可以作為覆蓋圖彈出窗口或者在視頻播放器附近的區域被顯示。每次觀看者與視頻對象進行交互，他/她的概況信息會在資料庫中得到更新。雖然本發明已經參考其具體實施方式
予以詳細地描述，應該理解到本領域技術人員基於對前文的理解，能夠輕易構思出這些實施方式的修改，變形和等同。因此，本發明的保護範圍應當由本文的權利要求書和其任何等同來確定。
權利要求
1.一種用於將視頻內容自動地分割及分類成對象並拍賣該些對象的系統，包括 視頻分割及分類伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；所述視頻分割及分類伺服器包括存儲在視頻資料庫中的一個或多個視頻文件； 存儲在所述隨機存取存儲器、只讀存儲器、及大容量存儲器其中之一的對象信息庫，所述對象信息庫包含用於識別視頻文件內的對象的對象信息和用於描述所述對象的描述信息和語義信息中的至少一個；對象目錄資料庫，其包含描述至少一個視頻對象在視頻文件其中之一中的位置信息；以及在所述處理器上執行的視頻內容分析應用，所述視頻內容分析應用對視頻文件進行分割以識別視頻對象的位置、將視頻對象進行分類以匹配給定視頻對象的出現、通過將分類的視頻對象的出現與在所述對象信息庫中的視頻對象進行匹配來重新獲取描述所述視頻對象的信息、和將描述在所述視頻中的所述視頻對象的動態位置的信息以及描述所述視頻對象的信息儲存到所述對象目錄資料庫中。
2.根據權利要求1所述的系統，進一步包括至少一個廣告伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；在所述廣告伺服器上執行的自動競標應用；以及在所述視頻分割及分類伺服器上執行的自動拍賣應用，所述拍賣應用傳輸拍賣信息至所述的至少一個廣告伺服器，所述拍賣信息包括描述選定的視頻對象的信息，所述自動拍賣應用從所述至少一個廣告伺服器接收來自於所述自動競標應用的競標信息，並授予關聯廣告內容的權利給所述至少一個廣告伺服器中選定的一個。
3.根據權利要求2所述的系統，其中所述自動拍賣應用將與所述給定視頻對象相關聯的用戶行為信息和市場細分信息中的至少一個傳送至所述廣告商競標應用。
4.根據權利要求1所述的系統，進一步包括 在資料庫中的廣告內容；覆蓋圖生成應用，其用於創建將所述廣告內容與給定的所述視頻對象連結的視頻覆蓋圖，並創建可選擇的超連結，該超連結的位置跟蹤在視頻中的所述視頻對象的動態位置。
5.根據權利要求4所述的系統，進一步包括視頻廣播伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；視頻用戶伺服器，其包括可連接到分布式網絡且具有處理器、隨機存取存儲器、只讀存儲器、及大容量存儲器的計算機；所述視頻廣播伺服器從所述視頻分割及分類伺服器接收所述視頻覆蓋圖，並將該視頻覆蓋圖傳送給所述視頻用戶伺服器，其中所述視頻覆蓋圖響應於與所述給定的視頻對象的交互而選擇性地引起與給定的所述視頻對象連結的內容信息的顯示。
6.根據權利要求2所述的系統，其中所述視頻分割及分類伺服器保存已被拍賣的對象的資料庫。
7.根據權利要求6所述的系統，其中每個所述資料庫條目包括指示已被拍賣的對象的權利何時期滿的信息。
8.根據權利要求2所述的系統，其中所述至少一個廣告伺服器將指定所期望的人口統計受眾的信息傳送給所述視頻分割及分類伺服器，並且所述拍賣伺服器傳送被限制於所述所期望的人口統計受眾的對象拍賣信息。
9.根據權利要求2所述的系統，其中所述拍賣信息包括指定人口統計信息和用戶行為歷史信息中的至少一個的信息。
10.根據權利要求5所述的系統，其中所述視頻用戶伺服器進一步包括內容顯示應用， 用於顯示視頻並且當給定的視頻對象是利用指示設備所選擇和滾動的之一時，與所述視頻覆蓋圖交互並顯示廣告內容。
11.根據權利要求10所述的系統，其中視頻對象的選擇使得內容顯示應用暫停或者放慢視頻的顯示。
12.根據權利要求10所述的系統，其中所述視頻用戶伺服器包括指示設備；所述內容顯示應用顯示與出現在視頻中的對象相關聯的第一內容，並且當流視頻中所選擇的所述視頻對象是利用所述指示設備所選擇和滾動的之一時顯示第二內容。
13.根據權利要求10所述的系統，其中所述廣告內容包括可選擇的連結，其中該連結的選擇提供電子商務選項。
14.一種在視頻中自動創建可選擇的超連結的系統，包括將視頻文件分割成視頻對象，多個視頻對象，將所述的多個視頻對象進行分類以識別給定的所述視頻對象的重複出現；將每個視頻對象的幀和子幀信息存儲到資料庫中；以及利用將所述資料庫中的至少一個視頻對象與所述視頻文件連結的視頻覆蓋圖在視頻文件中創建可選擇的超連結。
15.根據權利要求14所述的系統，其中所述可選擇的超連結與廣告相連結，當用戶利用指示設備滾動或者選擇所述超連結時廣告被顯示。
16.一種視頻對象的市場交易平臺，包括視頻分割及分類應用，其用於自動地將視頻分割成多個對象，將所述對象分類成類似對象的群，利用描述信息對所述對象進行標記，將識別在所述視頻內的所述視頻對象的動態位置的信息存儲在資料庫中；以及覆蓋圖生成器，其用於自動地創建將至少一個視頻對象群與所述視頻進行連結的視頻覆蓋圖。
17.根據權利要求16所述的視頻市場交易平臺，其中，每個被連結的視頻對象是可選擇的超連結，所述超連結的位置跟蹤在所述視頻中的視頻對象的動態位置。
18.一種為視頻觀看者應用提供交互層活動區域的方法，包括訪問定義示出了多個視頻對象的多個幀的視頻數據，每個視頻對象在一系列視頻幀中被示出；以及生成定義多個區域的區域定義數據，每個區域對應所述多個視頻對象中的一個，其中由所述區域定義數據定義的每個區域的輪廓匹配由在所述一系列幀中示出的對應視頻對象的輪廓。
19.根據權利要求18所述的方法，其中所述每個區域的輪廓在所述一系列幀中動態地變化以匹配在透視和大小及視角中的至少一個的變化，其中以該透視和大小及視角在所述一系列幀中示出的對應視頻對象。
20.根據權利要求18所述的方法，進一步包括使用所述區域定義數據定義多個活動區域用於交互式視頻觀看。
21.根據權利要求20所述的方法，其中所述幀作為視頻在顯示器上向用戶示出，並且其中所述區域定義數據被用於判定被引向這些幀中的至少一個幀的位置的用戶動作是否定址所述活動區域中的一個。
22.根據權利要求21所述的方法，其中，響應於用戶動作定址特定活動區域的判定，向用戶呈現廣告，所述廣告與對應所述特定活動區域的視頻對象相關。
23.根據權利要求18所述的方法，其中用於至少一個區域的所述區域定義數據包括對應所述區域的所述視頻對象的三維線框表示。
24.根據權利要求23所述的方法，其中用於所述區域的區域定義數據還包括對於在其中示出所述對應的視頻對象的所述一系列幀中的至少一個幀，定義所述三維線框表示的透視圖的數據，其中所述三維線框表示的透視圖的輪廓定義所述幀的區域的輪廓。
25.根據權利要求M所述的方法，其中所述區域的區域定義數據還包括對於在其中示出所述對應視頻對象的所述一系列幀中的至少一對幀，定義所述一對幀的幀之間的所述三維線框表示的變化的數據。
26.根據權利要求25所述的方法，其中所述三維線框表示包括多個節點，其中定義所述變化的數據包括定義至少一個節點相對於至少另一節點的位置的位移的數據。
27.根據權利要求25所述的方法，其中所述定義所述變化的數據包括定義所述三維線框表示的大小與空間定向中的至少一個的變化的數據。
全文摘要
本文公開了一種用於將視頻內容自動分割和分類成對象的方法及系統。所述對象可用於在視頻中創建可選擇的超連結，所述超連結可以動態跟蹤視頻中的對象的位置。本文還公開了一種方法和系統，用於將視頻中的視頻內容對象、動畫和可視數據流與情境相關信息進行關聯，以及用於將這些視頻內容對象連接至廣告市場交易平臺和多元化觀看者概況中去並使這些對象具有交互性以進行推式和拉式觀看者交互。
文檔編號G06T7/20GK102160084SQ200980117626
公開日2011年8月17日 申請日期2009年3月6日 優先權日2008年3月6日
發明者阿明·梅爾勒 申請人:阿明·梅爾勒