基於視頻內容的視頻播放的快進快退方法與設備的製作方法
2023-09-15 00:36:25
專利名稱：基於視頻內容的視頻播放的快進快退方法與設備的製作方法
技術領域：
本發明是一種根據視頻內容對視頻進行定位，實現視頻快進快退播放的一種方法和視頻播放設備。
背景技術：
在視頻播放過程中，人們常常需要從其所關心的某個特定視頻場景處開始觀看，通過視頻的快進或快退方式，可以幫助人們迅速找到這個特定的場景。常用的快進快退方法是，依正常播放速度的倍數，實現視頻播放的快進快退，其原理是將解碼以後的視頻按事先確定的幀間隔，採取隔幾幀在屏幕上顯示一幀圖像(該圖像可定義為顯示關鍵幀)，減少視頻顯示時間，實現視頻的快速進退。這種方法的最大特點是實現起來簡單，但在視頻快進快退的綜合快速性上表現不夠，且很難實現通過一次的快進或快退，準確定位在某個特定場景中。
原始的視頻數據是非結構化的，一段視頻可以劃分為幾個場景，每個場景包含一個或多個鏡頭，每個鏡頭又由一系列連續記錄的圖像幀組成。一般而言，同一鏡頭內各幀圖像的差異從連續的角度來看，差異較小，反映的內容有極大的冗餘性，而不同鏡頭的幀之間差異較大，所以，兩個不同的鏡頭反映的內容一般而言是不一樣的。關鍵幀是對鏡頭的一種綜合描述，它通常反映一個鏡頭的主要內容，一般而言，關鍵幀可以是一個，也可以是多個幀的集合。
常規方法，由於採取的是2倍數、4倍數到32倍數等有限個模式來實現快進快退，在倍數較小時，速度較慢，定位較準確；倍數較大時，一次快進快退速度快，但準確定位可能需若干次的前後進退，綜合定位速度不快。
採取基於內容提取的關鍵幀來實現視頻的快進快退，完全是依照視頻中的關鍵內容實現的，該方法在快速進退播放中，以視頻的主要內容為間隔進行，在這一過程中，可通過不斷的顯示視頻的關鍵幀，提示使用者當前的搜索位置。該方法在快速進退過程中，視頻關鍵幀顯示的冗餘性小，因而能比常規方法更快速更準確的搜索視頻的特定場景。
發明內容
本發明的目的是為視頻的快速進退播放提供一種機制，為視頻的快速檢索提供了一種新的方法和視頻播放設備。
本發明包括以下幾個方面的內容(a)從關鍵幀所對應的時間點，定義快進快退步長，並形成快播列表；(b)以關鍵幀作為顯示幀，為使用者提供直觀的搜索結果；(c)快進快退機制。
內容(a)包括(a1)確定關鍵幀的時間點；(a2)快速進退步長確定；(a3)快速播放列表；(a4)關鍵幀圖集的形成。
內容(b)的關鍵幀顯示可以通過下述兩個方面提供的圖像進行顯示(b1)從解碼視頻中顯示關鍵幀圖像；(b2)從(a4)關鍵幀圖像集中提取圖像進行顯示。
內容(c)包括(c1)依據事先確定的關鍵幀時間點，在視頻解碼的基礎上，在屏幕上逐一顯示關鍵幀，實現逐內容關鍵幀圖像描述的快速進退；(c2)逐一顯示(a4)中的關鍵幀圖像集，搜索到某個特定場景後，按該場景或鏡頭關鍵幀所對應的時間點開始正常播出；(c3)在視頻解碼的基礎上，通過關鍵幀的自動提取的快速方法，提取關鍵幀，並顯示關鍵幀，實現視頻的快速進退。
圖1是視頻序列的層次2是視頻快進快退方式一圖3是視頻快進快退方式二圖4是視頻快進快退方式三具體實施方式
本發明的主要特點就是利用視頻主要內容的描述----關鍵幀，降低快速進退中圖像顯示的冗餘度，提高視頻內容搜索的速度與精度。
關鍵幀是對視頻內容進行描述的一種表現形式，關鍵幀可以是通過相似性分析，從一個鏡頭中自動提取出來的一個或幾個具代表性的圖像；可以是利用鏡頭切換檢測方法自動提取出來的鏡頭邊界幀；也可以是人工挑選出來的關鍵幀。總而言之，視頻內容的描述通過關鍵幀來表述，更直觀，更準確，比文字描述更為豐富。
方式一從解碼視頻中依關鍵幀時間點在屏幕中顯示該關鍵幀的快速進退方式通過各關鍵幀對應的時間點，確定快速進退的時間間隔，該間隔為關鍵幀時間點的函數，並由此可形成一個快速進退的顯示步長表，依此表，逐一在解碼視頻中找到關鍵幀，並在屏幕中顯示該關鍵幀，實現視頻播放的快速進退。
方式二從事先存儲關鍵幀圖像集中逐一顯示關鍵幀的快速進退方式利用事先存儲好的關鍵幀圖像集及快速進退的時間間隔表，逐一在屏幕中顯示該關鍵幀圖像集，當使用者找到其所需要的關鍵鏡頭或關鍵場景時，可依據關鍵幀提供的時間點，按正常的播放速度從該關鍵幀處開始，欣賞或編輯視頻內容。
方式三利用實時關鍵幀提取方法提取關鍵幀並實現視頻快速進退的方式該方式利用了關鍵的超實時提取方法，提取基於視頻內容的關鍵幀，超實時提取方法中，逐幀比較的計算開銷要小於視頻正常播放時逐幀顯示的間隔時間，因而能在減少顯示冗餘度的同時，能以比正常播放速度更快的方式自動提取關鍵幀，從而實現視頻的快速進退。該方法無需事先確定視頻的關鍵幀時間點或關鍵幀圖像集，具備更好的實用性。
權利要求
1.一種基於視頻內容的視頻播放快進快退方法與設備，包括根據視頻各關鍵幀所對應的時間點形成的視頻快速進退時間步長表，並可由此產生一個關鍵幀圖像集；按照視頻快速進退時間步長表實現的視頻快速進退方法與設備。
2.根據權力要求1的基於內容的視頻播放快速進退方法與設備，其特徵在於關鍵幀是基於視頻內容提取的。
3.根據權力要求1的基於內容的視頻播放快速進退方法與設備，視頻的快速進退為非等步長的方式進行。
4.根據權力要求1的基於內容的視頻播放快速進退方法與設備，其特徵在於所述關鍵幀在視頻的快速進退過程中被顯示在屏幕上，以提示使用者搜索結果。
5.根據權力要求1的基於內容的視頻播放快速進退方法與設備，其特徵在於視頻的快速進退是以視頻內容為基本單位進行的。
6.根據權力要求1的基於內容的視頻播放快速進退方法與設備，其特徵在於通過關鍵幀時間點產生了視頻快速進退非等步長的快速進退步長表。
7.根據權力要求2的基於內容的視頻播放快速進退方法與設備，其特徵在於所述關鍵幀圖像可以是根據關鍵幀時間點從解碼視頻中提取出來的圖像，可以是從已被存儲的關鍵幀圖像集中根據關鍵幀時間點提取出來的圖像。
8.根據權力要求4的基於內容的視頻播放快速進退方法與設備，其特徵在於所述關鍵幀的顯示可以是逐幀顯示的一幀大圖像，也可以是同時以前後若干關鍵幀排列的若干圖像顯示。
9.根據權力要求6的基於內容的視頻播放快速進退方法與設備，其特徵在於視頻播放的快速進退步長表，可以是在視頻播放前形成的，也可以是通過超實時提取關鍵幀方法現場形成的。
全文摘要
依據視頻結構的層次結構，提出了一種基於內容的視頻快速進退與視頻快速瀏覽機制，通過視頻關鍵幀所對應的時間點，給出每一步視頻跨越的時間間隔，減少了屏幕顯示的冗餘性，從而實現視頻的快速進退。與傳統的視頻快進快退方式相比，這種快進快退機制，能使使用者更快速、更方便、更準確地定位到所關心的視頻時段上。同時，由此形成的關鍵幀圖片集，可為使用者提供一個快速了解視頻內容的途徑。
文檔編號H04N5/915GK101025987SQ20061003372
公開日2007年8月29日 申請日期2006年2月21日 優先權日2006年2月21日
發明者高健, 陳寶輝, 阮根印 申請人:廣州市紐帝亞資訊科技有限公司