一種嵌入於視頻的搜索方法及其系統的製作方法
2023-09-20 21:58:00 5
專利名稱：一種嵌入於視頻的搜索方法及其系統的製作方法
技術領域：
本發明屬於圖像通信領域，涉及一種嵌入於視頻的搜索方法及其 系統。
背景技術：
隨著網際網路技術的迅速發展和寬帶上網的日益普及，人們可以用 功能強大的基於網際網路的搜尋引擎査詢各種各樣的信息。近年來出現
的互動電視系統，特別是基於網際網路的電視系統(IPTV),不僅可以讓 觀眾觀看節目，還可以讓他們與節目互動。比如觀眾可以通過遙控器 購買節目中出現的商品，或者查看某體育運動員的資料。但是如果觀 眾想搜索更多的關於節目中出現的物體或事件的信息時，現在還沒有 一種技術可以讓他們在無需中斷節目觀看的條件下快速便捷地用基 於網際網路的搜尋引擎查詢所需信息。目前觀眾需要中斷節目或在節目 結束後，開啟電腦使用網際網路搜索。更關鍵的是，在很多情況下觀眾 不能確切地描述他們在節目中看到的令他們感興趣的物體或事件，所 以也無法用恰當的關鍵詞用搜尋引擎進行搜索。
現有電視系統的另一個不足是目前的電視廣告的效果都不是很 好。無論是傳統的插播廣告，疊加在屏幕上的圖片廣告，還是新興的 互動式廣告都不能有效地吸引觀眾的注意力，而且頻繁的廣告會引起 觀眾的反感。
發明內容
本發明的目的是針對現有技術的不足，提供一種使視頻和網絡更 好結合的嵌入於視頻的搜索方法及其系統。當觀眾對電視節目中的某 個物體或事件感興趣並想搜索其有關信息時，他們只需用點擊畫面或 用語音方式選擇搜索目標並觸發搜索請求，本發明的嵌入於視頻的搜 索系統會用恰當的搜索關鍵詞査詢搜尋引擎，顯示搜索結果和針對搜 索目標及搜索關鍵詞的廣告。本發明的嵌入於視頻的搜索方法，包括如下步驟
(1) 對要播放的視頻進行預處理，
(2) 搜索目標選擇觀眾在觀看節目的過程中選擇搜索目標， 觸發搜索請求，
(3) 搜索目標確認系統確定觀眾選擇的搜索目標，並在必要 時區分多個搜索目標，
(4) 系統用恰當的搜索關鍵詞査詢搜尋引擎，顯示搜索結果和 針對搜索目標及搜索關鍵詞的廣告。
如上所述的嵌入於視頻的搜索方法，其中，步驟(1)對要播放 的視頻進行預處理中包括
(1.1) 定義搜索目標，
(1.2) 為搜索目標定義搜索關鍵詞。 如上所述的嵌入於視頻的搜索方法，其中，步驟(1.1)定義搜
索目標採用基於搜索目標出現在屏幕上的位置的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(1.1)定義搜 索目標採用基於搜索目標在視頻節目中出現的時段的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(1.1)定義搜 索目標採用基於在屏幕上顯示搜索目標快照的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(1.1)定義搜 索目標採用基於語音識別的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(2)搜索目標 選擇和步驟(3)搜索目標確認採用基於搜索目標出現在屏幕上的位 置的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(2)搜索目標 選擇和步驟(3)搜索目標確認採用基於搜索目標在視頻節目中出現
的時段的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(2)搜索目標 選擇和步驟(3)搜索目標確認採用基於在屏幕上顯示搜索目標快照 的方式進行。如上所述的嵌入於視頻的搜索方法，其中，步驟(2)搜索目標 選擇和步驟(3)搜索目標確認採用基於語音識別的方式進行。
如上所述的嵌入於視頻的搜索方法，其中，步驟(3)搜索目標 確認採用在屏幕上顯示菜單的方式在必要時對多個搜索目標加以區 分。
本發明的嵌入於視頻的搜索系統，包括顯示設備，輸入設備和互 動視頻伺服器。互動視頻伺服器中包括視頻處理模塊，資料庫模塊， 輸入處理模塊和搜索伺服器模塊；其中視頻處理模塊用於視頻編碼/ 解碼和圖形的形成，形成的圖像信息通過顯示設備顯示；資料庫模塊 用於儲存搜索目標的信息；輸入處理模塊用於處理輸入設備的輸入信 息；搜索伺服器模塊用於向搜尋引擎發送搜索請求並處理返回的搜索 結果。
如上所述的嵌入於視頻的搜索系統，其中，輸入處理模塊中還包 括用於處理語音輸入和語音識別的部分。
如上所述的嵌入於視頻的搜索系統，其中，互動視頻伺服器通過 網絡與搜尋引擎連接。
如上所述的嵌入於視頻的搜索系統，其中，互動視頻伺服器通過 網絡與廣告伺服器連接。
使用本發明的效果是搜索功能被融入視頻和電視節目中，允許 觀眾在觀看電視時用搜尋引擎搜索節目中的物體或事件的信息，使觀 眾可以更好的與節目互動，也可以讓觀眾更方便的進行點播或搜索。
圖1是本發明提供的嵌入於視頻的搜索系統的結構示意圖2是本發明提供的嵌入於視頻的搜索方法的流程示意圖3是一個電視節目中帶有某人物的畫面；
圖4是對圖3中人物進行搜索後帶有顯示結果的畫面；
圖5是一個帶有搜索結果的電視節目畫面；
圖6是一個在左下角帶有可搜索物體快照的電視節目畫面；
圖7是一個電視節目中某人物穿著服飾的畫面；圖8是對圖7中出現的服飾進行搜索後帶有顯示結果的畫面； 圖9是一個帶有多個可搜索物體的電視節目畫面；
圖io是一個帶有搜索欄和虛擬鍵盤的電視節目畫面。
圖中l.顯示設備、2.輸入設備、3.互動視頻伺服器、4.搜尋引擎、5. 廣告伺服器、6.視頻處理模塊、7.資料庫模塊、8.輸入處理模塊、9.
搜索伺服器模塊
具體實施例方式
下面結合附圖對實施本發明作進一步詳細描述。 如附圖1所示的含有嵌入式搜尋引擎的互動視頻系統，包括一個 顯示設備l， 一個或多個輸入設備2和一個互動視頻伺服器3。其中 顯示設備l可以是一個電視機、電腦顯示器、觸控螢幕、或其他任何顯 示監控系統，輸入設備2可以是一個滑鼠、遙控器、普通鍵盤或屏幕 上的虛擬鍵盤，與語音識別系統相連接可以接受觀眾語音的話筒，或 是觸控螢幕等一體化顯示/輸入設備，互動視頻伺服器3可以是一個電 腦、數字機頂盒、數碼錄像機(DVR)、或其它任何可以處理互動電 視信號的設備。互動視頻伺服器3通過一個有線或無線網絡連接到一 個搜尋引擎4和一個廣告伺服器5。搜尋引擎4可以選擇普通搜索引 擎，例如谷歌(Google)或百度(Baidu)，也可以選擇用於搜索零售 商庫存或發行商目錄等資料庫的特殊搜尋引擎。廣告伺服器5的作用 是在搜索到的信息中添加廣告內容。廣告伺服器5用於產生需要顯示 在顯示設備l上的廣告內容，它並非本發明中的一個必需的設備，因 為像谷歌這樣的大型搜尋引擎已經具有與高效的廣告伺服器類似的 功能，它能動態地生成針對搜索關鍵詞的廣告。當使用谷歌或與其類 似的搜尋引擎時，可以直接將它們生成的廣告與搜索結果一起顯示在 屏幕上，在這種情況下無需專門建立一個廣告伺服器。上述部件可以 組合成一個或多個設備；比如顯示設備l，輸入設備2和互動視頻服 務器3可以組合成一個設備，例如多媒體電腦，行動電話或新一代數 字電視。
如上所述的互動視頻伺服器3至少包括視頻處理模塊6，資料庫模塊7，輸入處理模塊8和搜索伺服器模塊9;其中視頻處理模塊6 用於視頻編碼/解碼和圖形的形成；資料庫模塊7用於儲存可搜索物 體或事件的信息(本文將可搜索物體或事件統稱為搜索目標)，包括 它們在屏幕上出現的位置，時間，它們對應的搜索關鍵詞和用於語音 識別的同義詞組，以及它們的快照；輸入處理模塊8用於處理觀眾的 輸入信息，當輸入設備中有語音輸入設備時輸入處理模塊8還可以包 括用於識別觀眾語音輸入的部分；搜索伺服器模塊9用於向搜尋引擎 4發送搜索請求並處理返回的搜索結果。視頻處理模塊6是普通電腦， 機頂盒，或數碼錄像機中的標準部件。資料庫模塊7由多個圖像數據 庫和文本資料庫組成。文本資料庫可以是SQL資料庫，也可以是純文 本表格。輸入處理模塊8中識別觀眾語音輸入的部分可以使用商業語 音識別軟體，或者公開原始碼軟體。
如上所述，資料庫模塊7用於儲存搜索目標的相關信息。其中， 圖像資料庫存儲搜索目標在屏幕上出現的位置和它們的快照。文本數 據庫存儲搜索目標對應的搜索關鍵詞和用於語音識別的同義詞組，以 及搜索目標在屏幕上出現的時間。當觀眾通過某種輸入設備發出選擇 搜索目標的命令後，系統會用觀眾的輸入信息査詢資料庫模塊7中的 相關資料庫，進而確定觀眾選擇的搜索目標。例如，在基於搜索目標 出現在屏幕上的位置的方法中，當觀眾點擊屏幕後，系統首先確定觀 眾點擊了哪一幀畫面中的哪一個像素，然後查詢存儲搜索目標在屏幕 上位置的資料庫，從而確定觀眾選擇的搜索目標；在基於搜索目標在 視頻節目中出現的時段的方法中，當觀眾點擊屏幕後，系統首先確定 觀眾點擊了哪一幀畫面(既點擊發生的時間)，然後查詢存儲搜索目 標在屏幕上出現的時間的資料庫，從而確定觀眾選擇的搜索目標；在 基於顯示搜索目標快照的方法中，當觀眾點擊了屏幕上的快照後，系 統會査詢存儲搜索目標快照的資料庫，從而確定觀眾選擇的搜索目 標；在基於語音識別的方法中，系統首先識別觀眾的語音輸入，然後 査詢存儲用於語音識別的同義詞組的資料庫，確定觀眾選擇的搜索目 標。 一旦觀眾選擇的搜索目標被確定，系統會從存儲搜索關鍵詞的資料庫中提取與被選擇目標對應的搜索關鍵詞，進而査詢搜尋引擎。
當該系統工作時，會在顯示設備1上播放視頻內容，如圖3所示。 當觀眾想獲得關於節目中出現的物體或事件的更多信息時，可以用輸
入設備2選擇該物體或事件觸發搜索要求，例如可以用滑鼠點擊該物
體，由此觸發一連串系統反應首先，互動視頻伺服器3中的輸入處
理模塊8處理觀眾的輸入，在資料庫模塊7中辨認被點擊物體，並從 資料庫模塊7中取出與該物體相對應的默認搜索關鍵詞；然後互動視
頻伺服器3通過搜索伺服器模塊9向搜尋引擎提交該關鍵詞進行搜 索；最後，互動視頻伺服器3將搜索結果以及針對被點擊物體和搜索 關鍵詞的廣告以疊加方式顯示在當前視頻窗口中或顯示在另一個窗 口中。觀眾可以選擇立即瀏覽搜索結果或暫時保存搜索結果以便日後 瀏覽。例如圖3中的人物預先被定義為一個可搜索物體，當觀眾點擊 該人物時，互動視頻伺服器3會使用預先設定的搜索關鍵詞向搜索引 擎提交搜索請求。圖4顯示了疊加於當前視頻窗口的搜索結果和廣 告。(本圖和下文圖中顯示的都是從Google網站獲得的英文搜索結果 和以"Sponsored Links"形式出現的廣告。圖中電視畫面僅為示意目 的。所有電視畫面的版權，署名權以及畫面中出現的商標，品牌均屬 於其相應的所有者。)
如圖2所示的一種嵌入於視頻的搜索方法，包括如下步驟
(1)對所有要播放的視頻進行預處理，本步驟又包括
(1.1)定義搜索目標
為了讓觀眾可以在觀看電視時選擇搜索目標進行搜索，在視頻節 目播放前需要事先對搜索目標進行定義。這種定義可以是由專業人員 完成，也可以由觀眾自己完成，或者先由專業人員製作然後由觀眾補 充，也可以通過某些軟體或程序完成。至於何種目標可被搜索並無任 何限制。搜索目標可以是一個實物，比如某演員或產品；或者是一個 非實物，比如事件，菜譜或地理位置；也可以是電視屏幕上並未出現 但在節目中被提及的事物。可搜索事件的實例包括自然事件(比如暴 風雪)，體育賽事(比如美式足球超級盃)，或政治事件(比如總統競選)。
定義一個搜索目標的過程包括從視頻節目中提取該目標的一些
相關信息，然後把這些信息儲存到圖1中的資料庫模塊7中。定義搜 索目標的方法又可以分為如下所述的不同種類。
(l丄O基於搜索目標出現在屏幕上的位置。 一個搜索目標在整 個節目裡的每一幀畫面中出現的位置都需要被記錄下來。具體做法 是每一幀畫面中所有與該搜索目標對應的像素被劃歸為一個區域， 並被儲存到一個圖像資料庫中。在處理完畢後，此圖像資料庫記錄著 每一個搜索目標在每一幀中對應的區域(像素)。當觀眾點擊某個區域 中的任何像素時，與其對應的搜索目標會被確認為觀眾選擇的目標。
(l丄2)基於搜索目標在視頻節目中出現的時段。將每一個搜索 目標在節目中出現的時段記錄下來，並將此信息以該目標在哪些幀中 出現的形式存入一個資料庫中。比如一個搜索目標在節目開始的60 秒鐘內一直出現在屏幕上，那末該目標就在第1幀至第1800幀中出 現(假設電視節目每秒有30幀)。此方法適用於搜索目標數量有限， 同一畫面中出現兩個以上搜索目標的可能性較小的節目。由於此方法 無需記錄搜索目標在屏幕上的位置，觀眾可以搜索在節目中被提及但 並未出現在屏幕上的搜索目標的信息，也可以搜索許多其它類型的信 息。比如觀眾可以搜索新聞節目中與某條新聞有關的背景資料，或搜 索烹飪節目中被介紹的某菜譜的更多信息，或搜索旅遊節目中被提及 的某景點的更多信息。圖5顯示了一個此類搜索的實例。它是從一個 報導2004年亞洲海嘯的新聞節目中截取的畫面，該海嘯被定義為一 個搜索目標。圖中顯示了用"Tsunami"(海嘯的名字)做關鍵詞得到 的搜索結果和廣告。
(l丄3)基於搜索目標的快照。當電視節目中的搜索目標很小或 在屏幕上移動得很快，或者屏幕變化很快時，觀眾很難用點擊方式來 跟蹤和點擊搜索目標。 一旦搜索目標從屏幕上消失，觀眾就不能再點 擊。為解決這些問題，本步驟用顯示搜索目標的快照的方式讓觀眾在 觀看視頻節目過程中的任何時間選擇搜索目標。在視頻節目製作過程中，搜索目標的快照(快照可以是從節目中截取的有代表性的一幀畫 面)被集中儲存在一個圖像資料庫中。在節目播放過程中，搜索目標 的快照以及一組與之對應的搜索關鍵詞被顯示在屏幕底部一個小瀏 覽窗口中。觀眾可以用遙控器或滑鼠很快地瀏覽所有快照，然後點擊
快照或某個與之對應的搜索關鍵詞搜索相應目標。例如圖6是從某電 視劇中截取的一個畫面，圖中的男演員被定義為一個搜索目標。屏幕 左下角的瀏覽窗口顯示了該男演員的快照和與他對應的搜索關鍵詞
"Tony Soprano"(男演員在電視劇中的名字)和"James Gandolfmi"
(扮演"Tony Soprano"的演員的名字)。
(l丄4)基於識別觀眾的語音輸入。本發明還將語音識別技術融 入互動電視系統中，讓觀眾用語音命令選擇搜索目標。在節目製作過 程中，每個搜索目標與一組近義單詞或詞組對應起來，儲存在一個數 據庫中。比如圖4中的搜索目標"Tony Soprano"(男演員在電視劇中 的名字)對應於四個近義詞"Tony S叩rano", "Tony", "S叩rano"，和 "James Gandolfini"(扮演"Tony Soprano"的演員的名字)。當觀眾說 出任何一個單詞或詞組時，如果語音識別引擎可以確認觀眾的語音輸 入是與某個搜索目標對應的近義詞，該搜索目標會被確定為觀眾選擇 的目標。
(1.2)為搜索目標定義搜索關鍵詞
當步驟(1.1)定義搜索目標完成後，還要為每一個搜索目標定 義一組搜索關鍵詞，並儲存在資料庫模塊7中的一個資料庫中。不同 觀眾可能想査詢一個搜索目標的不同方面的信息，因此需要為一個搜 索目標定義幾個不同的搜索關鍵詞，並將其中的一個定義為默認關鍵 詞。例如在圖7中的搜索目標，前景中的男演員穿的一套西服就有 多個搜索關鍵詞，包括"男式西服"，"義大利西服"，"訂製的西服"， "黑色西服"，和默認關鍵詞"Armani西服"。當觀眾選擇該目標後， 系統會用它的默認關鍵詞"Armani西服"開始搜索。其它搜索關鍵 詞會以菜單的形式顯示在屏幕上，以便觀眾進行進一步搜索，這種顯 示可以自動地進行，也可以是在觀眾要求下進行的。觀眾也可以在屏幕上的搜索欄中輸入自己的搜索關鍵詞。互動視頻伺服器3會跟蹤記
錄觀眾選擇的目標、使用的關鍵詞、以及觀眾輸入的新搜索關鍵詞。 觀眾輸入的關鍵詞會被加入到資料庫中補充電視節目預處理時定義 的初始關鍵詞庫，使用頻率最高的關鍵詞會取代初始的默認關鍵詞。 在基於語音識別的方法中用到的同義詞也可以被加到關鍵詞資料庫 中。
(2)搜索目標選擇
觀眾可以通過某種輸入發出選擇搜索目標的命令，所述的輸入可 以通過點擊輸入設備進行，如滑鼠，遙控器，或觸控螢幕(使用附加設 備和軟體還可以讓觀眾用雷射棒發出的光點來選擇搜索目標)；也可 以通過語音輸入設備進行，如話筒。與前類似搜索目標的選擇也有多 個途徑
(2.1) 基於物體出現在屏幕上的位置。觀眾用滑鼠或遙控器點 擊可搜索物體，或直接用手指點擊播放節目的觸控螢幕。圖1中的互動 視頻伺服器3會確定哪一幀畫面和畫面中的哪一區域(像素)被點擊， 由此確定被選中的可搜索物體。在本發明的實際運用中，當觀眾將鼠 標的光標移到一個可搜索物體上時，系統可將此物體用特殊顏色突出 顯示，並將它的搜索關鍵詞列於屏幕上。觀眾可點擊該物體或它的任 何一個搜索關鍵詞觸發搜索。
(2.2) 基於搜索目標在節目中出現的時段。觀眾可直接點擊屏 幕來選擇搜索目標。互動視頻伺服器3會確定哪一幀畫面被點擊(也 就是點擊發生的時段)，進而確定被選中的搜索目標。
(2.3) 用顯示搜索目標的快照的方式讓觀眾選擇搜索目標。觀 眾無需等到搜索目標出現在屏幕上，而可在節目播放過程中的任何時 間進行選擇。觀眾可用滑鼠或遙控器快速瀏覽搜索目標的快照，然後 點擊相應快照選擇搜索目標。互動視頻伺服器3會確認該目標。在本 發明的實際運用中，可將此方法與步驟(2.2)基於搜索目標在節目 中出現的時段相結合，在快照瀏覽器窗口顯示當前屏中出現的搜索目 標的快照。這樣，觀眾可以知道當前屏幕上的物體或事件是可搜索目標。
(2.4)基於語音識別。觀眾可在節目播放過程中的任何時間選
擇搜索目標，而且不需要滑鼠或遙控器等點擊設備。觀眾可說出搜索 目標的名稱或同義詞來啟動搜索。話筒會捕捉觀眾的語音並將語音信
號輸入圖1中的輸入處理模塊8中的語音識別部分。若輸入的語音信
號被識別為某搜索目標的同義詞，該目標即被確認為觀眾做出的選
擇。在本發明的實際運用中，可將此方法與(2.3)用顯示搜索目標 的快照的方式讓觀眾選擇搜索目標相結合，在圖片瀏覽器窗口中緩慢 地循環顯示搜索目標的快照以及它們的搜索關鍵詞。當觀眾看到感興 趣的搜索目標的快照時，可用語音命令觸發搜索。
(3) 搜索目標確認，並在必要時區分多個搜索目標 觀眾選擇了搜索目標後，系統需要確認觀眾選擇的目標，這個過
程已在步驟(2)搜索目標選擇中被詳細描述。在上述基於搜索目標 在節目中出現的時段的方法下，如果觀眾點擊的畫面中包括兩個或兩 個以上的搜索目標，互動視頻伺服器3無法判斷觀眾選擇的是哪一個 目標。為解決這一問題，互動視頻伺服器3可以顯示所有可能目標的 名稱並提示觀眾點擊所選目標。比如圖9顯示了某電視劇中的一幅畫 面，其中包括了兩個可搜索物體劇中的兩個人物"TonyS叩rano" 和"ChristopherMoltisanti"。當觀眾點擊該畫面時，互動視頻伺服器3 無法判斷觀眾選擇的是哪一個人物，所以在屏幕上同時列出了兩個名 字。觀眾可以點擊其中之一來觸發搜索。類似的，在基於語音識別的 方法下，當觀眾說出的單詞是兩個或兩個以上搜索目標的同義詞時， 互動視頻伺服器3可以顯示所有可能目標的名稱並提示觀眾讀出所 選目標。另外，互動視頻伺服器3還可以顯示所有可能目標的快照， 方便觀眾指定所選目標。
(4) 查詢搜尋引擎和顯示搜索結果 一旦觀眾選擇的搜索目標被確認，圖1中的搜索伺服器模塊9就
會使用默認搜索關鍵詞向一個或多個搜尋引擎，如谷歌(Google)和 百度(Baidu)，提交搜索請求。默認搜索關鍵詞會顯示在屏幕上的一個狀態欄中，表明系統正在進行搜索。搜索結果和針對搜索目標和搜 索關鍵詞的廣告可以以多種方式顯示，比如顯示在一個新窗口中，或 顯示在當前視頻窗口裡的一個小窗口中，或已半透明方式疊加在當前 視頻窗口中。觀眾可以選擇立即瀏覽搜索結果和廣告，或保存搜索結 果和廣告供以後瀏覽。由於觀眾選擇的搜索目標和所用的搜索關鍵詞 揭示了他們的興趣或意向，因此基於這些搜索目標和關鍵詞的廣告非 常有針對性，非常有效。而且，此類廣告只在觀眾進行搜索時與搜索 結果一起顯示，因此它們一般不會引起觀眾的反感。如果被選擇的搜 索目標還有除默認關鍵詞以外的其它搜索關鍵詞，這些關鍵詞可被自 動或經觀眾請求後顯示在屏幕上作為搜索建議。觀眾可點擊列出的任 意一個搜索建議進行進一步搜索。系統還可以包括一個搜索欄允許觀
眾使用普通鍵盤或屏幕虛擬鍵盤輸入搜索關鍵詞，如圖io所示。圖
7顯示了某電視劇中的一幅畫面。畫面中的可搜索物體是前景中角色 所穿的西服。當觀眾點擊該西服時，互動視頻伺服器3會使用默認搜 索關鍵詞"Armani西服"進行搜索，該關鍵詞被顯示在屏幕下方的一 個狀態欄中。相應的搜索結果和廣告以及相關的搜索建議被顯示在屏 幕上的一個疊加窗口中，如圖8所示。
一個像谷歌(Google)這樣的大型搜尋引擎可以搜索包括普通互 聯網頁，圖像，視頻，新聞，地圖，或產品等多種內容。在本發明的 一種實際運用中，搜索伺服器9可自動搜索多種內容並將各種內容中 的最佳搜索結果加以組合(例如，搜索伺服器9可以將每種內容中第 一個搜索結果返回並組合起來作為總的搜索結果)。在另一種實際運 用中，在步驟(1)視頻預處理中，所定義的可搜索物體和事件可被 劃分成不同的類型，比如新聞類，位置類，產品類等。搜索伺服器9 會根據被選擇的物體或事件的類型在谷歌(Google)中搜索相應的內 容。比如觀眾想搜索與新聞節目中某條新聞相關的報導，搜索就會指 向谷歌(Google)新聞。再如觀眾想搜索某節目中提及的餐廳的位置， 搜索就會指向谷歌(Google)地圖。搜索伺服器9也可以根據被選擇 的可搜索物體的類型向特殊搜索弓I擎提交査詢。比如觀眾選擇了節目中提及的某本書籍，搜索伺服器9就可向網上書籍零售商的庫存査詢
系統提交搜索請求'
權利要求
1.一種嵌入於視頻的搜索方法，包括如下步驟(1)對要播放的視頻進行預處理，(2)搜索目標選擇觀眾在觀看節目的過程中選擇搜索目標，觸發搜索請求，(3)搜索目標確認系統確定觀眾選擇的搜索目標，並在必要時區分多個搜索目標，(4)系統用恰當的搜索關鍵詞查詢搜尋引擎，顯示搜索結果和針對搜索目標及搜索關鍵詞的廣告。
2. 如權利要求1所述的一種嵌入於視頻的搜索方法，其特徵在於 步驟(1)對要播放的視頻進行預處理中包括(1.1) 定義搜索目標，(1.2) 為搜索目標定義搜索關鍵詞。
3. 如權利要求2所述的一種嵌入於視頻的搜索方法，其特徵在於 步驟(1.1)定義搜索目標採用基於搜索目標出現在屏幕上的位置的 方式進行。
4. 如權利要求2所述的一種嵌入於視頻的搜索方法，其特徵在於 步驟(1.1)定義搜索目標採用基於搜索目標在視頻節目中出現的時 段的方式進行。
5. 如權利要求2所述的一種嵌入於視頻的搜索方法，其特徵在於 步驟(1.1)定義搜索目標採用基於在屏幕上顯示搜索目標快照的方 式進行。
6. 如權利要求2所述的一種嵌入於視頻的搜索方法，其特徵在於:步驟(1.1)定義搜索目標採用基於語音識別的方式進行。
7. 如權利要求1或3所述的一種嵌入於視頻的搜索方法，其特徵在於步驟(2)搜索目標選擇和步驟(3)搜索目標確認採用基於搜索目標出現在屏幕上的位置的方式進行。
8. 如權利要求1或4所述的一種嵌入於視頻的搜索方法，其特徵 在於步驟(2)搜索目標選擇和步驟(3)搜索目標確認採用基於搜 索目標在視頻節目中出現的時段的方式進行。
9. 如權利要求1或5所述的一種嵌入於視頻的搜索方法，其特徵 在於步驟(2)搜索目標選擇和步驟(3)搜索目標確認採用基於在 屏幕上顯示搜索目標快照的方式進行。
10. 如權利要求1或6所述的一種嵌入於視頻的搜索方法，其特 徵在於步驟(2)搜索目標選擇和步驟(3)搜索目標確認採用基於 語音識別的方式進行。
11. 如權利要求1~10中任意一項權利要求所述的嵌入於視頻的搜索方法，其特徵在於步驟(3)搜索目標確認採用在屏幕上顯示菜單的方式在必要時對多個搜索目標加以區分。
12. 如權利要求1所述的嵌入於視頻的搜索方法，其特徵在於 步驟(4)中還包括生成針對搜索目標及搜索關鍵詞的廣告的步驟。
13. 如權利要求12所述的嵌入於視頻的搜索方法，其特徵在於所述的廣告是文字廣告或圖片廣告或動畫廣告或音頻廣告或視頻廣告
14. 一種嵌入於視頻的搜索系統，包括顯示設備(1)，輸入設備(2)，其特徵在於該系統還包括互動視頻伺服器(3)。互動視頻伺服器(3)中包括視頻處理模塊(6),資料庫模塊(7)，輸入處理模 塊(8)和搜索伺服器模塊(9);其中視頻處理模塊(6)用於視頻編 碼/解碼和圖形的形成，形成的圖像信息通過顯示設備(1)顯示；數 據庫模塊(7)用於儲存搜索目標的信息；輸入處理模塊(8)用於處 理輸入設備(2)的輸入信息；搜索伺服器模塊(9)用於向搜尋引擎 (4)發送搜索請求並處理返回的搜索結果。
15. 如權利要求14所述的一種嵌入於視頻的搜索系統，其特徵在 於輸入處理模塊(8)中還包括用於處理語音輸入和語音識別的部 分。
16. 如權利要求14或15所述的一種嵌入於視頻的搜索系統，其特徵在於互動視頻伺服器(3)通過網絡與搜尋引擎(4)連接。
17.如權利要求16所述的一種嵌入於視頻的搜索系統，其特徵在於互動視頻伺服器(3)通過網絡與廣告伺服器(5)連接。
全文摘要
本發明屬於圖像通信領域，涉及一種嵌入於視頻的搜索方法及其系統。本發明將搜索功能融入視頻和電視節目中，允許觀眾在觀看電視時用搜尋引擎搜索節目中的物體或事件的信息。當觀眾對電視節目中的某個物體或事件感興趣並想搜索其有關信息時，他們只需用點擊畫面或用語音方式選擇搜索目標並觸發搜索請求，本發明的嵌入於視頻的搜索系統會用恰當的搜索關鍵詞查詢搜尋引擎，顯示搜索結果和針對搜索目標及搜索關鍵詞的廣告。
文檔編號H04N7/173GK101566990SQ200810094288
公開日2009年10月28日 申請日期2008年4月25日 優先權日2008年4月25日
發明者奕 李 申請人:奕 李