利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法

2023-04-23 04:49:21 1

專利名稱：利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法
技術領域：
本發明屬於圖像處理和應用技術，具體涉及一種利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，
背景技術：
隨著數字多媒體數據的爆炸式增長，網絡上的視頻數量與日俱增，用什麼樣的特徵來表示視頻變的越來越重要，目前較流行的是提取視頻的顏色、紋理和形狀等方面的特徵，這些特徵統稱為底層視覺特徵。然而，這些傳統的視頻特徵難以精準地描述視頻，從而給後續的視頻處理帶來困難，相比之下，人類卻可以瞥一眼正在播放的視頻就知道其具體內容，這一現象給了科學家很大的啟發，目前，有些學者已經從測試者觀看視頻時採集的大腦信號中提取相關特徵來作為視頻的特徵，並將這些特徵用於視頻分類中，這些從大腦信號中提取的特徵稱之為高層特徵，其中利用功能磁共振成像技術採集大腦信號並從這些信號中提取的特徵稱之為腦功能成像空間特徵，與之相關的研究只關注如何提取腦功能成像空間特徵，並利用該特徵進行視頻分類和檢索，這些研究目前還處於探索階段。如何更好地提取大腦信號中的腦功能成像空間特徵，並且將腦功能成像空間特徵與底層視覺特徵相結合，來提高視頻聚類的準確率在國內外還屬於空白領域，因此，找到更好的腦功能成像空間特徵提取方法，並將其與底層視覺特徵結合起來提高視頻聚類的準確率是一個非常有價值的研究課題，對於視頻聚類研究具有非常重要的意義。

發明內容
要解決的技術問題為了避免現有技術的不足之處，本發明提出一種利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，將人腦認知信息中的腦功能成像空間特徵與視頻底層視覺特徵結合起來用於視頻聚類中，提高視頻聚類技術的準確性。技術方案一種利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在於步驟如下步驟I提取腦功能成像空間特徵，具體步驟如下步驟al:利用公式
權利要求
1.ー種利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在於步驟如下 步驟I提取腦功能成像空間特徵，具體步驟如下 步驟al:利用公式只
2.根據權利要求I所述利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在於所述個數聚類G e [20，10000]。
3.根據權利要求I所述利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在幹所述常數a e [10_2，102]。
4.根據權利要求I所述利用腦成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在於所述步驟4的步驟h採用歸一化互信息匪I方法或者精度Purity方法計算聚類準確率。
全文摘要
本發明涉及一種利用腦功能成像空間特徵和底層視覺特徵進行視頻聚類的方法，其特徵在於提取功能磁共振圖像序列中的大腦信號向量，計算信號向量的皮爾森相關係數矩陣，利用單因素方差分析和相關特徵選擇方法從皮爾森相關係數矩陣中提取腦功能成像空間特徵，利用部分視頻的底層視覺特徵和對應的腦功能成像空間特徵建立高斯過程回歸模型，將剩餘視頻的底層視覺特徵映射到腦功能成像空間特徵上，將所有視頻的腦功能成像空間特徵和底層視覺特徵進行多模態譜聚類。利用本發明方法，可以實現腦功能成像空間特徵和底層視覺特徵的融合聚類，與基於底層視覺特徵如顏色、形狀等視頻聚類方法及單獨使用腦功能特徵空間聚類相比，大大提高了聚類準確性。
文檔編號G06F17/50GK102855352SQ20121029317
公開日2013年1月2日 申請日期2012年8月17日 優先權日2012年8月17日
發明者韓軍偉, 吉祥, 郭雷, 胡新韜 申請人:西北工業大學