一種基於時域視頻融合的存儲方法及其系統的製作方法

2023-08-07 01:51:51 1

專利名稱：一種基於時域視頻融合的存儲方法及其系統的製作方法
技術領域：
本發明涉及安防領域，具體而言，涉及一種基於時域視頻融合的存儲方法及其系統。
背景技術：
視頻監控作為安防監控的重要手段，其在工作過程中需要採集大量的視頻數據，由此便對中心伺服器的存儲能力提出了嚴峻的挑戰。一幅真彩Dl圖像，其需要的存儲大小為1.2M左右，假設幀率為25幀/秒，那麼一段30秒的Dl真彩視頻數據在不壓縮的情況下需要的空間為900MB。如果採用H.264標準進行壓縮，需要2.2M左右的空間。雖然壓縮後，視頻的存儲空間大大縮小了，但是在監控領域，網絡攝像機是24小時工作的，因此對於中心伺服器來說，有24小時的視頻匯聚至此，即有6.3GB的視頻數據。對 於10個網絡攝像機來說，其一天傳輸至伺服器的數據量為63GB，如果攝像機的數目再多些，監控時間再長些，那麼數據量將會成倍的增加，因此如何存儲如此龐大的數據是非常現實的問題。申請號為CN200780050610.0的中國專利文獻提出了一種消除時間軸的視頻融合方法，該專利運用這種方法生成視頻的摘要用於查詢事件。該方法基礎是:如果不強制按照時間發生順序，可以在更短的視頻中顯示出更多的動作。視頻概要消除了時間軸，將感興趣的信息融合為一段任意長度的視頻用於索引。但是，這種融合破壞了圖像信息中的聯繫，呈現出來的視頻是混亂的，沒有聯繫的，因此不能替代源視頻用於查看和考證。申請號為CN200810066660.4的中國專利文獻提出了一種智能視頻監控事件檢索方法和系統。該方法提取感興趣的信息流，然後對信息流進行檢測，判斷是否滿足某一事件規則，並保存到相應的事件中用於檢索。但在該專利中，保存的數據是一個事件對象的信息流，一般情況下是源視頻中的某一塊區域數據，與源視頻數據相差太多，因此不能代替源視頻數據。

發明內容
本發明實施例的目的在於提供一種基於時域視頻融合的存儲方法及其系統，其能夠增加伺服器的系統容量，增加存儲空間的利用率。為了達到本發明的目的，本發明採用以下技術方案實現:一種基於時域視頻融合的存儲方法，包括:獲取源視頻並檢測；檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器；伺服器依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。優選地，檢測源視頻中感興趣信息的方法為:
依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配。優選地，在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為:依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息；依據所述標準外接矩形角點信息提取感興趣區域的像素信息。優選地，在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器。優選地，依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括:依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中。優選地，所述將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括:獲取視頻融合起始位置；依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。一種基於時域視頻融合的存儲系統，包括前端裝置以及伺服器，其中，前端裝置，用於獲取源視頻並檢測；以及進一步用於在檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器；伺服器，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。優選地，前端裝置檢測源視頻中感興趣信息的方法為:依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配；以及，前端裝置在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為:依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息；依據所述標準外接矩形角點信息提取感興趣區域的像素信息；以及，前端裝置在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器。優選地，所述前端裝置包括:圖像採集模塊，用於獲取源視頻；數據提取模塊，用於檢測源視頻，並在檢測到感興趣信息時，提取感興趣區域的像素信息；數據發送模塊，用於發送所述感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器；以及，所述伺服器包括:信息流合成模塊，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理；視頻融合模塊，用於將合成的信息流融合至相應的背景視頻幀中，形成處理視頻； 存儲模塊，用於存儲所述處理視頻。優選地，所述信息流合成模塊依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括:依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中；以及，所述視頻融合模塊將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括:獲取視頻融合起始位置；依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。通過上述本發明的技術方案可以看出，本發明的有益效果是:(I)本發明可以將經時域視頻融合生成的混亂視頻流通過信息流合成模塊將混亂的數據聯繫起來，保證了視頻數據中的重要聯繫，在一些應用中完全可以代替源視頻存儲起來用於以後的查看和考證。(2)本發明生成的處理視頻較源視頻小得多，因此需要的存儲空間比源視頻小得多。(3)採用本發明，減少了轉發的數據量，減少了網絡帶寬。


圖1是本發明一實施例提供的基於時域視頻融合的存儲方法流程示意圖；圖2是本發明一實施例提供的基於時域視頻融合的存儲系統結構示意圖；圖3是本發明一實施例提供的運動目標提取方法流程圖；圖4是本發明一實施例提供的區域生長方法流程圖。本發明目的的實現、功能特點及優異效果，下面將結合具體實施例以及附圖做進一步的說明。
具體實施例方式下面結合附圖和具體實施例對本發明所述技術方案作進一步的詳細描述，以使本領域的技術人員可以更好的理解本發明並能予以實施，但所舉實施例不作為對本發明的限定。如圖1所示，本發明實施例提供了一種基於時域視頻融合的存儲方法，其包括如下步驟:S101、獲取源視頻並檢測；S102、檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器；S103、伺服器依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。在所述步驟SlOl中，所述源視頻來源於監控探頭(例如安防監控攝像機)，所述檢測是指通過預先初始化的感興趣信息參考模型檢測源視頻中是否有感興趣信息，例如人、車或其他動物，一般而言，所述感興趣信息是運動目標，所述感興趣信息參考模型可以通過訓練得到，這裡對其不做過多贅述。在所述步驟S102中，檢測源視頻中感興趣信息的方法為:依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配。當匹配成功時，即認定為此時有運動目標進入監控場景，此時，開始對源視頻進行感興趣信息的提取步驟，如下:在該步驟中，在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為:S1021、依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息；S1022、依據所述標準外接矩形角點信息提取感興趣區域的像素信息。優選實施方式下，在檢測到感興趣信息時並提取感興趣區域的像素信息之後，在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器。在所述步驟S103中，依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括:依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中。除此之外，在該步驟中，所述將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括:S1031、獲取視頻融合起始位置；S1032、依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。
值得注意的，所述處理視頻包含有背景視頻幀，所述背景視頻幀通過預先設置的規則從前端獲取，例如固定時間周期進行背景視頻幀的更新等。如圖2所示，本發明實施例還提供了一種基於時域視頻融合的存儲系統，包括前端裝置10以及伺服器20，其中，前端裝置10，用於獲取源視頻並檢測；以及進一步用於在檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器20 ；伺服器20，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。其中，優選實施方式下，前端裝置10檢測源視頻中感興趣信息的方法為:(I)依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配；以及，前端裝置10在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為:(I)依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息；(2)依據所述標準外接矩形角點信息提取感興趣區域的像素信息；以及，前端裝置10在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器20的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器20。具體實施時，繼續參照圖2，所述前端裝置10包括:圖像採集模塊101，用於獲取源視頻；數據提取模塊102，用於檢測源視頻，並在檢測到感興趣信息時，提取感興趣區域的像素信息；數據發送模塊103，用於發送所述感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器20 ；以及，所述伺服器20包括:信息流合成模塊201，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理；視頻融合模塊202，用於將合成的信息流融合至相應的背景視頻幀中，形成處理視頻；存儲模塊203，用於存儲所述處理視頻。其中，所述信息流合成模塊201依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括:(I)依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中；以及，(I)所述視頻融合模塊202將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括:(2)獲取視頻融合起始位置；(3)依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。下面，將詳細的介紹所述圖像採集模塊101、數據提取模塊102、數據發送模塊103、信息流合成模塊201、視頻融合模塊202，以及存儲模塊203的具體功能，如下:圖像採集模塊101，負責傳回源視頻流數據，具體實施時，圖像採集模塊101在傳輸視頻數據時需要完成數據的轉換工作。如果數據壓縮需要將數據解壓，傳回的數據如果為YUV，則圖像採集模塊101需要將數據轉換為RGB格式數據。數據提取模塊102，負責檢測並提取感興趣信息。通過初始化設置的檢測算法對輸入的源視頻進行實時的檢測，當檢測到感興趣信息時，返回一幅二值結果圖像，結果圖像中用白點表示感興趣信息像素點，黑點表示不感興趣像素點。提取算法根據二值結果圖像計算感興趣區域的標準外接矩形角點，然後根據所述角點提取感興趣區域像素信息並保存，與感興趣區域圖像一起保存的還有感興趣信息的選擇標準(即感興趣信息參考模型)信息，感興趣信息的像素坐標信息，提取的時間信息，以及地點信息信息。數據發送模塊103，其利用網絡將數據提取模塊102提取的數據發送到伺服器20。信息流合成模塊201，其中，該信息流合成模塊201包含有一信息流資料庫，其中臨時存儲有歷史信息流。該模塊的信息流資料庫中包括兩部分數據，一部分是已經合成的數據，一部分是剛剛接收的提取數據。該模塊負責將新收到的提取數據與原來的合成數據合併為信息流。而合併的依據就是信息間是否存在聯繫，其中，所述聯繫通過接收到的感興趣區域坐標信息與提取時間信息進行判斷，當新接收到的提取數據與歷史數據的感興趣區域坐標信息與提取時間信息具有相關性時，即認定兩者存在聯繫，此時即將該新接收到的提取數據合併至歷史信息流之中。如果在此過程中，沒有從信息流資料庫中檢測到可以合併的信息流，則新建一個信息流存儲該提取數據。信息流合成模塊201還需要判斷一個信息流是否允許進行融合，融合是對一個信息流而言的。計算信息流中各幀數據的軌跡是否接近視頻邊緣，該信息流是否在一段時間內都沒有增加來判斷信息流是否結束，如果沒有增加，則認為結束，可以進行融合，將該信息流傳給融合模塊，並刪除該信息流在此模塊的記錄。視頻融合模塊202，該模塊負責將接收到信息流融合到背景視頻上。在融合前需要確定融合開始的位置並生成背景視頻。這兩個部分具體實現如下。針對背景視頻，需要維護一張數據表，該表每一個表項表示背景視頻上的一幀，當一個信息流融合到背景視頻上時，就會有N幅背景視頻幀將改變數據(假設信息流長度為N幀)，在該表對應的N個表項上記錄信息流的數據信息，表明在該幀背景上某些區域不可用。當新的信息流到來時，從設置好的融合起始位置進行比較，判斷融合起始位置開始的M幀背景視頻幀中是否可以存放新的信息流(假設新信息流長M幀)，即新信息流的角點區域是否與對應背景幀上不可用角點區域重合，如果有重合，則不可以存儲新信息流。重新設定融合起始位置(設定的方法在背景視頻生成中說明)，重新進行比較，直到找到可以存儲的背景視頻段，保存信息流的數據信息到融合模塊的數據表中。當融合起始位置確定後，需要生成背景視頻。通過得到的背景視頻幀進行複製形成視頻流得到背景視頻，而背景視頻幀主要來自背景視頻幀更新算法。在提取模塊中對源視頻檢測時，如果圖像中沒有感興趣信息時，可以認為該幀為背景，同時如果該幀的時間與上次背景幀提取時間的間隔滿足閾值時(閾值通過初始化模塊設置)，可以保存該幀圖像作為背景視頻幀，保存時同時保存該背景的提取時間。另外，根據提取感興趣信息的不同，需要保存當時背景時，也可以自行保存背景視頻幀。因為背景視頻幀都有對應的時間，因此設定融合起始位置時可以根據時間信息來進行設定，當有新的信息流需要融合時，根據新信息流的提取時間在數據表中尋找時間最接近的背景幀為融合起始位置，如果不能融合，則尋找比較接近的。如果在在融合的時間限制內(該參數在初始化模塊中設定，意思是信息流的提取時間與背景幀的提取時間相差的最長時間，一天24小時，按照小時，分鐘計算)都沒有找到可以融合的背景幀，則在數據表的末尾新增M個表項(新信息流長為M幀)，保存信息流的數據信息。背景視頻幀為最新更新的背景視頻幀。當確定融合起始幀，信息流的數據信息也保存到數據表中後，可以融合背景視頻和信息流。在融合前需要判斷是否滿足設定的長度要求時(該參數在初始化模塊中設定，表示當融合模塊中數據表所表示視頻的長度，當數據表所表示視頻的長度大於閾值時才允許保存)，才進行融合，並將融合後的視頻和數據表傳給數據存儲模塊203，最後清空數據表。以及存儲模塊203，在收到視頻融合模塊202的輸出結果後，分別對融合後視頻和相應的數據表進行保存，並提供索引用於以後查看。存儲模塊203提供在一段時間內按運動目標提取的時間組織運動目標的方法。具體方法是先設定需要查看的時間段，然後算法將根據時間段查找所有處於該時間的信息流，並獲得該時間段的背景視頻幀從而生成背景視頻流，最後將信息流按照時間順序複製到背景視頻流上。本發明實施例提供的給予時域視頻融合的存儲方法及其系統，通過提取視頻中運動物體的信息，存儲監視區域中的運動目標，其可用於人員進出統計以及防偷盜。對於庫房，山區中的基站等人流量比較少但是重要的監視區域，本方法能有效實現監視目標區域的監控，同時減少存儲空間。本發明提供的方法，首先確定初始化感興趣的信息的選擇標準，感興趣信息提取算法和信息流合併算法，其中，感興趣的信息的選擇標準為視頻中的物體是否運動；提取的算法選擇多高斯運動目標跟蹤算法和區域生長算法，算法的詳細說明在本章最後部分給出；信息流合併主要依據運動目標間是否有聯繫，在本發明實施例中主要考慮是否為同一運動目標，運動目標間是否存在可能的聯繫。判斷是否為同一目標依據目標的提取區域，因為提取的信息都有其角點，在融合時可以根據信息流中最後一個節點的角點坐標區域是否與新提取信息角點區域重合面積較大(一般為90%以上)，如果較大，則認為是同一運動目標，將提取信息合併到這個信息流中。但是在選擇信息流是需要考慮時間，即信息流的最後一個節點的提取時間與新提取數據的提取時間相差不應大於2秒。如果遍歷所有信息流仍沒有找到滿足要求的信息流，則認為新提取的目標為新的運動目標，新建一個信息流保存這個提取信息。判斷運動目標是否存在聯繫依據運動目標的運動軌跡和提取時間。如果再在相同時間兩個運動目標的運動軌跡存在交點，則認為兩個運動目標有聯繫，將兩個運動目標合併為一個信息流。具體步驟如下:a)初始化參數；b)圖像採集模塊101獲取監控視頻數據；c)數據提取模塊102獲取一幀圖像；d)採用多高斯運動目標跟蹤算法檢測該幀圖像，返回二值檢測結果圖像；e)採用區域生長方法計算二值結果圖像中運動目標的外接矩形，返回矩形角點坐標；f)如果有運動目標，轉g，否則轉η;g)將提取的數據轉發到伺服器20 ；h)根據提取時間和角點區域判斷提取的運動目標角點所屬信息流，如果找到多個信息流，則認為這些信息流存在聯繫，將這些信息流合併為一個信息流；i)判斷是否可以進行融合，如果可以，轉j，否則轉η;j)根據信息流提取時間和背景幀提取時間確定融合起始幀；k)判斷起始幀所在的一段視頻能否進行融合，如果可以，轉1，否則轉j ；I)生成背景視頻並將信息流的圖像信息融合到背景視頻上，同時保存數據信息；m)將融合視頻與數據信息保存到硬碟；η)判斷是否需要繼續融合，是，轉c ;否則，結束。在需要查看存儲於伺服器20之上的視頻時，有兩種方法:一、直接查看保存的濃縮視頻，該視頻保證了運動目標間的聯繫，一般情況下，在人員統計，防偷盜應用中完全有效。但是考慮實際情況比較複雜，還提供了另外一種查看方法。二、先設定需要查看的時間段，存儲模塊203將會提取相應時間段內的所有背景視頻幀和信息流，然後將背景視頻幀擴展為視頻流，再將信息流融合到視頻流上形成新的視頻流播放出來。參照圖3，數據提取模塊102中用到的多高斯運動目標檢測部分的具體步驟如下:I)初始化參數。初始圖像認為是背景，每一個像素點用N個高斯分布描述其灰度分布。其中一個高斯分布均值為對應點像素值，方差任意設(為保證數據範圍較大，此值不能太小)，權值為I。其它的N-1個高斯分布的均值，方差和權值都為零。2)循環提取幀圖像的每一個像點，轉3 ;循環完畢，轉6。3)查找新像點的N個高斯，判斷新像點屬於哪一個高斯分布。如果找到，則轉4，沒有找到，轉5。4)根據新像點所屬高斯分布的權值判斷新像點屬於背景還是運動目標，在結果圖像中保存結果。運動目標灰度設為255，背景灰度設為O。然後增加這個高斯分布的權值，轉2。5)找到權值最小的高斯分布，這個高斯分布的均值改為新像點的灰度，方差任意設(不能太小)，結果圖像中設置該點值為0，轉2。
6)輸出運動目標結果圖像。參照圖4，其用以說明區域生長部分的具體步驟，如下:I)接受運動目標結果圖像，並遍歷圖像。2)是否在結果圖像中找到值為255的點，即白色點，如果沒有找到，則結束，如果找到，轉3。3)建立一個鍊表存儲找到的白點坐標。4)循環取出鍊表的節點，並記錄坐標的最大和最小值。5)搜索節點的8鄰域，當檢測到白點時，存儲到鍊表中，並修改它們為黑點。6)鍊表是否遍歷完成，如果完成，轉7，如果沒有完成，轉4。7)根據記錄的最小最大坐標分割目標區域圖像，並保存角點，時間和地點等信息。8)檢測結果圖像是否遍歷完成，如果完成，轉9，如果沒有完成，轉2。9)輸出保存的所有運動目標的相關數據。以上所述僅為本發明的優選實施例，並非因此限制本發明的專利範圍，凡是利用本發明說明書及附圖內容所作的等效結構或等效流程變換，或直接或間接運用在其他相關的技術領域，均同理包括在本發明的專利保護範圍內。
權利要求
1.一種基於時域視頻融合的存儲方法，其特徵在於，包括: 獲取源視頻並檢測； 檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器； 伺服器依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。
2.如權利要求1所述的基於時域視頻融合的存儲方法，其特徵在於，檢測源視頻中感興趣信息的方法為: 依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配。
3.如權利要求2所述的基於時域視頻融合的存儲方法，其特徵在於，在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為: 依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息； 依據所述標準外接矩形角點信息提取感興趣區域的像素信息。
4.如權利要求3所述的基於時域視頻融合的存儲方法，其特徵在於，在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器。
5.如權利要求1所述的基於時域視頻融合的存儲方法，其特徵在於，依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括: 依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中。
6.如權利要求1所述的基於時域視頻融合的存儲方法，其特徵在於，所述將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括: 獲取視頻融合起始位置； 依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。
7.一種基於時域視頻融合的存儲系統，其特徵在於，包括前端裝置以及伺服器，其中， 前端裝置，用於獲取源視頻並檢測；以及進一步用於在檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器； 伺服器，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。
8.如權利要求7所述的基於時域視頻融合的存儲系統，其特徵在於，前端裝置檢測源視頻中感興趣信息的方法為: 依據初始化設置的感興趣信息參考模型對獲取的源視頻進行匹配；以及， 前端裝置在檢測到感興趣信息時，提取感興趣區域的像素信息的方法為: 依據預先設置的感興趣區域的圖像信息的提取算法獲取感興趣區域的標準外接矩形角點信息； 依據所述標準外接矩形角點信息提取感興趣區域的像素信息； 以及， 前端裝置在發送感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器的同時，還發送感興趣信息參考模型信息以及像素提取地點信息至伺服器。
9.如權利要求8所述的基於時域視頻融合的存儲系統，其特徵在於，所述前端裝置包括: 圖像採集模塊，用於獲取源視頻； 數據提取模塊，用於檢測源視頻，並在檢測到感興趣信息時，提取感興趣區域的像素信息； 數據發送模塊，用於發送所述感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器； 以及，所述伺服器包括: 信息流合成模塊，用於依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理； 視頻融合模塊，用於將合成的信息流融合至相應的背景視頻幀中，形成處理視頻； 存儲模塊，用於存儲所述處理視頻。
10.如權利要求9所述的基於時域視頻融合的存儲系統，其特徵在於，所述信息流合成模塊依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理的方法包括: 依據所述感興趣區域坐標信息以及提取時間信息查找歷史信息流，當有對應的信息流存在時，將所述像素信息與歷史信息流進行合成；當沒有對應的信息流存在時，則新建一信息流，並對所述感興趣區域的像素信息合成至該信息流之中； 以及， 所述視頻融合模塊將合成的信息流融合至相應的背景視頻幀中以形成處理視頻的方法包括: 獲取視頻融合起始位置； 依據信息流中包括的標準外接矩形角點軌跡信息查找信息流處理記錄表，當所述標準外接矩形角點軌跡信息與信息流處理記錄表中的標準外接矩形角點信息不重合時，則將所述信息流融合至歷史處理視頻中以所述視頻融合起始位置為起始位置的部分，其中，所述信息流處理記錄表記錄了經融合處理的歷史處理視頻中每幀圖像的標準外接矩形角點信息。
全文摘要
本發明公開了一種基於時域視頻融合的存儲方法及其系統，所述方法包括獲取源視頻並檢測；檢測到感興趣信息時，提取感興趣區域的像素信息，並發送該感興趣區域的像素信息以及感興趣區域坐標信息與提取時間信息至伺服器；伺服器依據所述感興趣區域坐標信息以及提取時間信息對所述像素信息進行合成處理，並將合成的信息流融合至相應的背景視頻幀中，形成處理視頻並存儲。採用本發明，其能夠增加伺服器的系統容量，增加存儲空間的利用率。
文檔編號G11B27/031GK103187083SQ20111045119
公開日2013年7月3日 申請日期2011年12月29日 優先權日2011年12月29日
發明者朱豪, 吳貽剛, 鄧海波 申請人:深圳中興力維技術有限公司