一種基於視頻摘要和視頻檢索的視頻偵查流程的製作方法
2023-05-24 14:29:51
一種基於視頻摘要和視頻檢索的視頻偵查流程的製作方法
【專利摘要】本發明公開了一種基於視頻摘要和視頻檢索的視頻偵查流程，首先系統從視頻監控平臺或者本地獲取與案件相關的原始視頻，在添加案件基本信息，進行編目處理後儲存到存儲伺服器，然後系統對視頻進行分析，先對視頻進行濃縮，去掉沒有活動目標的幀，保留具有活動目標的幀，得到濃縮視頻以及所有活動目標的全快照根據濃縮視頻和目標快照，結合人工甄別，採用視頻比對等方式，確定嫌疑目標，獲取嫌疑目標的視頻片段以及嫌疑目標快照。本發明能從海量的原始視頻中去獲取嫌疑目標的視頻片段和快照作為線索，提高公安視頻偵查的效率。
【專利說明】一種基於視頻摘要和視頻檢索的視頻偵查流程
【技術領域】
[0001]本發明涉及一種計算機視覺領域，具體涉及一種基於視頻摘要和視頻檢索的視頻偵查流程。
【背景技術】
[0002]隨著「平安城市」與「天網工程」的推進，利用監控視頻作為破案線索的視頻偵查已成為公安刑偵偵查的重要手段，極大程度地打擊了違法份子的犯罪行為。但之前通過人工觀看海量視頻進行視頻刑偵的方式效率低下，且容易遺漏目標。
[0003]視頻偵查時一般只關注活動目標，通過目擊證人或者前期偵查還能得到嫌疑目標的一些特徵。通過視頻濃縮摘要以及視頻檢索技術，可以略去無活動目標的畫面，並且在運動目標裡根據目標特徵檢索嫌疑目標，大大提高視頻偵查的效率。
【發明內容】
[0004]本發明的目的在於克服現有技術存在的以上問題，提供一種基於視頻摘要和視頻檢索的視頻偵查流程，本發明能從海量的原始視頻中去獲取嫌疑目標的視頻片段和快照作為線索，提高公安視頻偵查的效率。
[0005]為實現上述技術目的，達到上述技術效果，本發明通過以下技術方案實現:
一種基於視頻摘要和視頻檢索的視頻偵查流程，包括以下步驟:
步驟I)從監控平臺或本地拷貝視頻，將視頻按案件管理需要進行編目後存儲到存儲伺服器；
步驟2)在客戶端上根據配置分析參數，從存儲伺服器選擇視頻，根據需要確定需要濃縮還是檢索；
步驟3)系統自動雲計算，進行負荷分擔，選擇負荷小的濃縮和檢索伺服器進行分析；步驟4)濃縮伺服器進行視頻濃縮，得到包括所有運動目標的濃縮視頻和所有活動目標全快照；
步驟5)根據需要，檢索伺服器根據目標特徵進行視頻檢索，得到根據相似度排列的目標快照；
步驟6)觀看濃縮視頻或瀏覽目標快照，確定嫌疑目標的目標快照，標註後存到案件管理伺服器；
步驟7)根據嫌疑目標的目標快照，得到嫌疑目標的原始視頻片段，標註後存到案件管理伺服器；
步驟8)將嫌疑目標各原始視頻片段結合電子地圖，拼接成嫌疑目標運動軌跡；
步驟9)將嫌疑目標的快照與運動軌跡歸檔成案件線索，生成案件報告，供進一步偵查與展示。
[0006]進一步的，所述步驟2)中沒有選擇檢索，則跳過步驟5)。
[0007]本發明的有益效果是: 1、減小人工查看海量視頻的壓力，方便從海量視頻中查找嫌疑目標；
2、完善的權限控制功能保障信息安全，但客戶端點播以及標註等功能又讓有權限的辦案人員能夠實現信息共享，提高破案效率；
3、系統結合刑偵實際來實現，案件管理簡單有序；視頻拼接生成的嫌疑目標運動軌跡結合輸出的案件報告，讓結果展示方便快捷。
[0008]上述說明僅是本發明技術方案的概述，為了能夠更清楚了解本發明的技術手段，並可依照說明書的內容予以實施，以下以本發明的較佳實施例並配合附圖詳細說明如後。本發明的【具體實施方式】由以下實施例及其附圖詳細給出。
【專利附圖】
【附圖說明】
[0009]此處所說明的附圖用來提供對本發明的進一步理解，構成本申請的一部分，本發明的示意性實施例及其說明用於解釋本發明，並不構成對本發明的不當限定。在附圖中:
圖1是本發明的流程示意圖；
圖2是本發明的拓撲圖。
【具體實施方式】
[0010]下面將參考附圖並結合實施例，來詳細說明本發明。
[0011]參照圖1所示，一種基於視頻摘要和視頻檢索的視頻偵查流程，包括以下步驟: 步驟I)從監控平臺獲取或從本地拷貝原始視頻，將視頻按照案件管理需要，進行編目、
添加案件和視頻基本信息後存儲到存儲伺服器；
步驟2)根據需要，在濃縮和檢索客戶端上配置分析參數；如果視頻偵查前不知道嫌疑目標的特徵，則只進行濃縮操作；如果偵查前或隨著偵查的進行，已經知道嫌疑目標的某些特徵，就可以根據特徵還進行視頻檢索；從存儲伺服器上選擇所需要的視頻提交分析。提交時可以批量提交多個視頻，可配置的參數包括代表白天黑夜等不同場景的靈敏度，所關注的感興趣區域和不感興趣區域，以及目標對象的顏色，如果目標對象是人，還可以區分上下半身顏色；
步驟3)系統自動採用雲計算技術，進行負荷分擔，選擇伺服器組中負荷小的濃縮伺服器或檢索伺服器進行分析；如果所有伺服器都已滿負荷運轉，則這些提交的任務進入隊列中排隊等候；在任務分配時，還涉及優先級調度，優先級高的任務將被插到隊列的最前面；步驟4)濃縮伺服器中進行視頻濃縮摘要，得到包括所有活動目標的濃縮視頻和所有活動目標全快照；採用的是動態紋理建模算法，先提取視頻背景，然後將各運動目標提取出來，分析其特徵並將信息存到資料庫；最後通過圖像拼接技術，將各運動目標鑲嵌回背景中，不同時間點的活動目標可以出現在濃縮視頻的同一畫面，這樣得到的濃縮比高且包括所有活動目標，點擊濃縮視頻中的目標或者活動目標的快照，通過之前分析時建立的快照與原始視頻的映射關係，可以快速跳轉原始視頻，查看目標在原始視頻中的狀態；
步驟5 )檢索伺服器根據步驟2 )中配置的參數，在資料庫中根據特徵進行視頻檢索，得到根據目標特徵相似度排列的目標快照；點擊該目標快照，可以快速跳轉原始視頻，查看目標在原始視頻中的狀態；如果前面步驟2)中沒有選擇檢索，則跳過這一步；
步驟6)通過觀看濃縮視頻或檢索的目標快照，找到嫌疑目標的目標快照，添加標註，例如「嫌疑人A」後存到案件管理伺服器上；
步驟7)在嫌疑目標快照的基礎上，找到嫌疑目標各原始視頻片段。在確定嫌疑片段時，可以進行視頻對比播放；確定嫌疑視頻片段後，添加必要的標註後存到案件管理伺服器上；
步驟8)在上一步的基礎上，將嫌疑目標的各原始視頻片段結合電子地圖，採用視頻拼接技術，拼接成嫌疑目標運動軌跡，並保存到案件管理伺服器；
步驟9)將嫌疑目標的目標快照與目標運動軌跡歸檔形成案件線索，生成視頻偵查案件報告，供進一步偵查或展示；具有相關權限的辦案人員，可以在客戶端點播相關視頻，查看快照；根據預定格式生成的案件報告，是案件展示最直觀的方式。
[0012]本實施例的工作原理如下:
例如某貴重物品店發生搶劫案，為了得到犯罪嫌疑人的照片以及視頻片段以確定身份和逃竄線路，需要查看各卡口 100個攝像頭，踩點及案發前後共5天的視頻。如果依靠人力查看，視頻總時長為I萬2千小時。50個人晝夜不休也需要觀看10天，影響辦案效率的同時因為人的生理限制還很容易遺漏目標。使用視頻摘要、視頻檢索的視頻偵查系統後，其具體實例如下:
I:案發後，從監控平臺或本地拷貝視頻。將視頻按案件管理需要進行編目後存儲到存儲伺服器，添加的信息包括案件基本信息，所獲取的視頻來自哪個攝像頭等；
2:因為只需關注運動目標，在開始還不知道嫌疑人的特徵。初次分析時在客戶端上選擇輸出濃縮視頻和全快照。如果隨著偵查的進行，後續可以對這些視頻進行再次進行檢索分析。從存儲伺服器選擇視頻提交分析，並設定這些視頻的優先級，與案件強相關例如現場附近一公裡的優先級設為高；
3:系統自動雲計算，進行負荷分擔，選擇負荷小的某一臺或者某幾臺濃縮檢索伺服器進行分析；
4:濃縮伺服器進行視頻濃縮，得到包括所有運動目標的濃縮視頻。通過觀看這個濃縮視頻，相比觀看原始視頻，大大節省了時間。如果找到一些感興趣的視頻片段，以及嫌疑目標的一些特徵照片，則可以根據特徵進行檢索了。
[0013]5:檢索伺服器根據特徵進行檢索，得到的目標快照中符合特徵的排在最前面，為了避免因光照條件差異等引起目標遺漏，其他相似度更低的目標也列在後面；
6:對檢索出來的目標快照進行人工偵查，找到嫌疑人的目標快照，標註如「嫌疑人A」後，添加案件信息後存到案件管理伺服器
7:根據嫌疑人的各目標快照，得到嫌疑目標的各原始視頻片段，標註後存到案件管理伺服器
8:將嫌疑人的各原始視頻片段結合電子地圖，拼接成運動軌跡。根據這個運動軌跡，就可以確定嫌疑目標的運動狀態甚至是身份；
9:將嫌疑目標的快照與運動軌跡歸檔成案件線索，生成案件報告，供進一步偵查與展
/Jn o
[0014]以上所述僅為本發明的優選實施例而已，並不用於限制本發明，對於本領域的技術人員來說，本發明可以有各種更改和變化。凡在本發明的精神和原則之內，所作的任何修改、等同替換、改進等，均應包含在本發明的保護範圍之內。
【權利要求】
1.一種基於視頻摘要和視頻檢索的視頻偵查流程，其特徵在於:包括以下步驟: 步驟I)從監控平臺或本地拷貝視頻，將視頻按案件管理需要進行編目後存儲到存儲伺服器； 步驟2)在客戶端上根據配置分析參數，從存儲伺服器選擇視頻，根據需要確定需要濃縮還是檢索； 步驟3)系統自動雲計算，進行負荷分擔，選擇負荷小的濃縮和檢索伺服器進行分析；步驟4)濃縮伺服器進行視頻濃縮，得到包括所有運動目標的濃縮視頻和所有活動目標全快照； 步驟5)根據需要，檢索伺服器根據目標特徵進行視頻檢索，得到根據相似度排列的目標快照； 步驟6)觀看濃縮視頻或瀏覽目標快照，確定嫌疑目標的目標快照，標註後存到案件管理伺服器； 步驟7)根據嫌疑目標的目標快照，得到嫌疑目標的原始視頻片段，標註後存到案件管理伺服器； 步驟8)將嫌疑目標各原始視頻片段結合電子地圖，拼接成嫌疑目標運動軌跡； 步驟9)將嫌疑目標的快照與運動軌跡歸檔成案件線索，生成案件報告，供進一步偵查與展示。
2.根據權利要求1所述的一種基於視頻摘要和視頻檢索的視頻偵查流程，其特徵在於:所述步驟2)中沒有選擇檢索，則跳過步驟5)。
【文檔編號】G06F17/30GK103778159SQ201210414091
【公開日】2014年5月7日 申請日期:2012年10月26日 優先權日:2012年10月26日
【發明者】姚領眾 申請人:蘇州千視通信科技有限公司