內容再現控制系統及其方法和程序的製作方法
2023-06-10 08:57:26
專利名稱:內容再現控制系統及其方法和程序的製作方法
技術領域:
本發明涉及內容再現控制系統及其方法和程序。
背景技術:
本發明的對象是以大量內容為對象來再現並閱覽內容的系統和裝置。在此,所謂 內容是指包括CGM(Consumer Generated Media 消費者自主媒體)內容、家庭錄像、電視節 目、電影等由視頻音頻信號構成的動態圖像內容、以及音樂等由音頻信號構成的音頻內容 等、具有時間軸的內容。作為以大量內容為對象來再現並閱覽內容的系統,例如有網際網路上的動態圖像共 享服務(動態圖像投稿網站)。動態圖像共享服務(動態圖像投稿網站)一般是用戶將動 態圖像內容上傳到伺服器上,多數用戶能夠再現並閱覽所上傳的動態圖像內容的網站。另外,也有能橫跨多個不同的動態圖像共享服務(動態圖像投稿網站)的動態圖 像內容進行檢索並再現閱覽這些動態圖像內容的服務(網站)。另外,也有能夠以網際網路 上的所有動態圖像內容為對象來檢索動態圖像內容並進行再現閱覽的動態圖像檢索服務 (動態圖像檢索網站)。利用這些服務(網站),用戶能夠再現閱覽動態圖像內容,而不用考 慮動態圖像內容所在的物理位置(實際上也可能分散在多個不同的伺服器上)。這樣的網際網路上的動態圖像共享服務(動態圖像投稿網站)的特徵在於,存在許 多內容相同的內容、或一部分區間相同的內容。這是由於具有話題性的動態圖像被不同用 戶上傳,或上傳到不同動態圖像共享服務(動態圖像投稿網站)。此時,即使是內容相同的 內容,因轉換成不同的動態圖像形式、數據大小(位速率)而存在不同品質的內容。另外, 因抽出一部分區間進行編輯而僅一部分區間存在相同的內容。這樣的網際網路上的內容共享服務(內容投稿網站)不限於動態圖像內容,也有以 音樂內容(音頻內容)為對象的內容共享服務。另外,除了這樣的基於伺服器的Web網站 的方式的內容共享服務外,還有基於P2P(peer to peer 點對點)通信的動態圖像共享服務。
發明內容
但是,網際網路上的動態圖像共享服務(動態圖像投稿網站)等以大量內容為對象 再現閱覽內容的系統存在如下問題,即由於再現品質差的內容多,因此用戶會視聽到再現 品質差的內容。不能確保再現品質,因此用戶必須忍受再現品質差的內容的視聽。在此,再現品質差的內容是指畫質、音質等被再現的信號品質差的內容,或再現發 生延遲(再現的開始晚(延遲)、再現被中斷等)的內容等。這些再現品質差的內容,是對 於用戶來說難以進行視聽的內容。作為這些問題的原因,有內容本身導致的,也有從內容存在位置到用戶的再現環 境之間存在的網絡的品質(網絡品質)導致的。作為內容本身導致的情況,例如,數據大小較小的內容、位速率低的內容是畫質、音質等信號品質差的內容(例如塊失真嚴重的內容)。另外,使用編碼效率差的壓縮方式 的內容也是畫質、音質等信號品質差的內容。網際網路上的動態圖像共享服務(動態圖像投 稿網站)等,大多對上傳的動態圖像內容有數據大小等的限制,因此,畫質、音質等信號品 質差的內容必然多。另外,通過對原始內容進行錄像(捕捉)等而複製生成的內容,在錄像 (捕捉)階段畫質、音質等信號品質惡化,結果,成為畫質、音質(信號品質)差的內容。此 時,也有僅內容的一部分畫質、音質等信號品質大幅降低的情況。網際網路上的動態圖像共享 服務(動態圖像投稿網站)等中,這樣的通過錄像(捕捉)等而複製生成的內容較多。作為從內容的存在位置到用戶的再現環境之間存在的網絡的品質(網絡品質)導 致的情況,例如,在從內容所在的伺服器到用戶終端間的網絡中,網絡頻帶窄或網絡吞吐量 多時,再現發生延遲(直到再現開始需要時間、再現被中斷等)、或發生漏處理(漏幀等), 結果,成為再現品質差的內容。網際網路上的動態圖像共享服務(動態圖像投稿網站)等,其 伺服器大多存儲大量動態圖像內容且訪問集中,因此大多發生再現延遲、漏處理等問題。當用戶發出某內容的再現指示時,如果該內容是再現品質差的內容(即內容本身 的信號品質差、或從內容的存在位置到用戶的再現環境間的網絡品質差時),用戶將視聽再 現品質差的內容,用戶必須忍受再現品質差的內容的視聽。因此,本發明是鑑於上述問題而發明的,其目的在於提供一種內容再現控制系統 及其方法和程序,實現在再現閱覽內容時確保內容的再現品質的再現(高再現品質)。為了解決上述課題,本發明提供一種內容再現控制系統,其特徵在於包括內容群 存儲部,存儲至少一個內容;信號特徵量序列抽取裝置,按上述內容群存儲部中存儲的內容 抽取與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區 間組檢測裝置,根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似 的區間即公共區間的組作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組, 取得表示公共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內 容再現控制裝置,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容 中在上述公共區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上 述內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。為了解決上述課題,本發明提供一種內容再現控制裝置,其特徵在於包括信號特 徵量序列抽取裝置,按存儲至少一個內容的內容群存儲部中存儲的各內容,抽取與內容的 時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝 置,根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公 共區間的組作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組,取得表示公 共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制 裝置,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容中在上述公 共區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上述內容再現 品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。為了解決上述課題,本發明提供一種內容再現控制方法,其特徵在於包括信號特 徵量序列抽取步驟,按存儲至少一個內容的內容群存儲部中存儲的內容,抽取與內容的時 間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測步驟, 根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共區間組;內容再現品質信息取得步驟,按上述公共區間組,取得表示公共 區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制步 驟,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容中在上述公共 區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上述內容再現品 質信息來切換要再現的內容而進行再現,以提高內容的再現品質。為了解決上述課題,本發明提供一種內容再現控制程序,使信息處理裝置執行以 下處理信號特徵量序列抽取處理,按存儲至少一個內容的內容群存儲部中存儲的內容,抽 取與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間 組檢測處理,根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的 區間即公共區間的組作為公共區間組;內容再現品質信息取得處理,按上述公共區間組,取 得表示公共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容 再現控制處理,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容中 在上述公共區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上述 內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。本發明能夠實現在再現閱覽內容時確保內容的再現品質的再現(高再現品質)。
圖1是表示本實施方式的結構的框2是表示公共區間組的例子的圖。圖3是表示本實施方式的工作的流程圖。標號說明1內容群存儲部2信號特徵量序列抽取裝置3公共區間組檢測裝置4內容再現品質信息取得裝置5內容再現控制裝置
具體實施例方式以下,參照附圖詳細說明本發明的實施方式。圖1是表示本實施方式的內容再現 控制系統的結構的框圖。參照圖1,本發明的實施方式包括內容群存儲部1、信號特徵量序 列抽取裝置2、公共區間組檢測裝置3、內容再現品質信息取得裝置4、以及內容再現控制裝置5。內容群存儲部1存儲多個內容。在此,內容包括視頻信號、音頻信號,或視頻信號和音頻信號這雙方,是具有時間 軸的媒體,例如是CGM(Cosumer Generated Media)內容、家庭錄像、電視節目、電影、音樂內 容等,但不限於這些。根據本發明,內容群存儲部1存儲作為進行內容再現控制的對象的總體的內容。 為了便於說明,撰寫成內容群存儲部1將內容存儲在一處,但顯然也可以分散為多個存儲 器來存儲內容。內容群存儲部1是例如網際網路上的動態圖像共享服務(動態圖像投稿網站)存儲動態圖像內容的存儲器等。此時,動態圖像共享服務(動態圖像投稿網站)的存 儲器也可以分散為多個。另外,內容群存儲部1也可以是例如網際網路上的多個動態圖像共 享服務(動態圖像投稿網站)的存儲器。另外,內容群存儲部1也可以是例如存儲有在互 聯網上分散的所有內容的所有存儲器。信號特徵量序列抽取裝置2按內容群存儲部1包含的每個內容來抽取與內容的時 間軸上的位置(例如媒體時刻等)建立起對應的信號特徵量的序列即信號特徵量序列。將 抽取出的每個內容的信號特徵量序列供給至公共區間組檢測裝置3。在此,信號特徵量是指表示內容所包含的視頻信號的特徵量、或表示內容所包含 的音頻信號的特徵量、或將它們組合後的特徵量。在此,作為表示視頻信號的信號特徵量序列,可以是例如從內容的各幀圖像中抽 取圖像特徵量(視覺特徵量)。此時,用與幀建立起對應的幀序號、基於此計算出的幀的媒 體時刻與內容的時間軸上的位置建立起對應。作為圖像特徵量,可以使用例如表示亮度信 息的特徵量、表示顏色信息的特徵量、表示邊緣信息的特徵量、表示紋理信息的特徵量、表 示形狀信息的特徵量、或表示運動信息的特徵量等。另外,也可以使用例如國際標準ISO/ IEC15938—3 中夫見定白勺 DominantColor、Color Layout、Scalable Color、Color StructureΛ Edge Histogram、Homogeneous Texture、Texture Browsing、Region ShapeΛContourShapeΛ Shape 3D、Parametric Motion,Motion Activity 等。另外,也可以不從內容的各幀中抽取圖像特徵量,而僅從例如以任意的採樣間隔 選擇出的幀中抽取圖像特徵量。還可以僅從例如應用剪切檢測(檢測視頻切換的處理)等 選擇特定幀的處理而選出的幀中抽取圖像特徵量。還可以使用例如將內容分為任意時間長 度的區間,從各區間將該區間中包含的多個幀的圖像特徵量總括而成的特徵量。作為總括 圖像特徵量的方法,例如有求平均值、求中央值、求最頻繁出現值、或求直方圖等方法。還可 以是僅從例如預先規定的內容的特定時間軸上的位置抽取圖像特徵量。這些情況下都用與 幀或區間建立起對應的幀序號、或基於此計算的媒體時刻,與內容的時間軸上的位置建立 起對應。作為表示音頻信號的信號特徵量序列,可以是例如對數字音頻信號(聲音波形) 的連續的任意樣本數的區間(以後,稱為音頻幀)進行解析處理而抽取出的特徵量序列。例 如,可以對音頻幀進行傅立葉變換等頻率變換而抽取頻譜,將其平均功率、各頻帶的平均功 率、頻譜的平坦度、或各頻帶的頻譜的平坦度等作為表示音頻信號的信號特徵量序列來抽 取。此時,用各音頻幀的樣本點的序號、或基於此計算的媒體時刻,與內容的時間軸上的位 置建立起對應。另外,也可以僅從例如預先規定的內容的特定的時間軸上的位置抽取表示 音頻信號的信號特徵量序列。信號特徵量序列抽取裝置1抽取的信號特徵量不限於上述信號特徵量,只要是表 示內容中包含的視頻信號的特徵量、表示內容中包含的音頻信號的特徵量、或將它們組合 後的特徵量即可,可以是任何信號特徵量。公共區間組檢測裝置3根據由信號特徵量序列抽取裝置2供給的每個內容的信號 特徵量序列檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共區間組。 將檢測出的公共區間組的信息即確定公共區間組的各公共區間所屬於的內容與時間軸上 的位置的信息作為公共區間組信息,供給至內容再現品質信息取得裝置4和內容再現控制裝置5。作為根據各內容的信號特徵量序列檢測信號特徵量相互類似的區間即公共區間 的組的方法,例如可以使用文獻 1 (Eiji Kasutani、Ryoma Oami,Akio Yamada,Takami Sato、 Kyoji Hirata、「Video MaterialArchive System for Efficient Video Editing based on MediaIdentification", Proceedings on International Conference on Multimediaand Expo (ICME2004),Vol. 1,pp. 727-730,June 2004.),文獻 2 (西村拓一、水野道尚、小木 L· Θ $、關本信博、岡隆一,「基於主動檢索法的時間序列數據中的一致區間檢測-參照區 間自由時間序列主動檢索法-,,,電子信息通信學會論文集,D-II, Vol, J84-D-II,No. 8, PP. 1擬6-1837,2001年8月.),以及文獻3(日本特表2006-515721號公報)的方法。例如,文獻1中記載有根據視頻信號的信號特徵量序列檢測信號特徵量相互類似 的區間的方法。文獻1的方法,首先從信號特徵量序列抽出時間長度短的區間作為查詢區 間(參照區間)。對於信號特徵量序列的剩餘區間(這次對於不同內容),一邊在時間軸上 移動一邊依次抽出與查詢區間相同時間長度的區間,計算與查詢區間的類似度。類似度的 計算,採用區間的對應幀間的圖像特徵量的類似度的平均值。對於與查詢區間類似度高的 區間,在時間軸的負方向和正方向延長計算類似度的區間,並確定信號特徵量相互類似的 區間的起始點和終點。對某查詢區間結束該處理時,抽出下一查詢區間,反覆進行相同的處 理。這樣,能夠檢測信號特徵量相互類似的區間。文獻1記載的方法不限於視頻信號的信號 特徵量序列,音頻信號的信號特徵量序列也同樣能夠適用。檢測信號特徵量相互類似的區 間時,在信號特徵量類似到什麼程度的情況下作為類似區間來檢測,可以任意決定。因此, 做成為例如在字幕(telop)重疊等對圖像實施了局部加工的情況下,在混入背景音等雜音 時也能視為類似。參照圖2表示公共區間組的檢測的例子(圖2中箭頭表示包含在同一公共區間組 中)。圖2表示對於內容1至內容4這4個內容檢測出2個公共區間組即公共區間組A和 公共區間組B的例子。公共區間組A包括內容1的區間a、內容2的區間C、以及內容3的 區間d這3個公共區間。對公共區間組A的公共區間組信息是確定內容1的區間a、內容2 的區間C、以及內容3的區間d這3個公共區間的信息,例如各區間的起始點和終點的媒體 時刻、幀序號等信息即可。另外,公共區間組B包括內容1的區間b、內容3的區間e、以及 內容4的區間f這3個公共區間。對公共區間組B的公共區間組信息是確定內容1的區間 b、內容3的區間e、以及內容4的區間f這3個公共區間的信息,例如各區間的起始點和終 點的媒體時刻、幀序號等信息即可。內容再現品質信息取得裝置4根據從公共區間組檢測裝置3供給的公共區間組信 息,取得表示公共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息。將 所取得的內容再現品質信息供給至內容再現控制裝置5。內容再現品質信息取得裝置4取得內容再現品質信息的方法是任意的。可以從內 容群存儲部1中包含的內容本身取得,也可以從外部信息取得。參照圖2進行說明,內容再現品質信息取得裝置4對公共區間組A和公共區間組 B取得其中包含的各公共區間所屬於的內容的內容再現品質信息。對於公共區間組A,取得 其中包含的區間a所屬於的內容1、區間c所屬於的內容2、區間d所屬於的內容3的內容 再現品質信息。對於公共區間組B,取得其中包含的區間b所屬於的內容1、區間e所屬於的內容3、區間f所屬於的內容4的內容再現品質信息。另外,內容再現品質信息取得裝置4也可以不取得表示公共區間組的各公共區間 所屬於的內容整體的再現品質的信息,而取得表示各公共區間的再現品質的信息。就圖2 的例子而言,也可以不取得表示內容1、內容2、內容3、內容4的內容整體的再現品質的信 息,而取得表示各公共區間即區間a、區間b、區間C、區間e、區間f的區間再現品質的信息。在此,表示內容的再現品質的內容再現品質信息是指例如內容的畫質、音質等表 示信號品質的信息等。內容的畫質、音質等表示信號品質的信息是例如內容的位速率(對編碼方式的位 速率)、析像度、幀速率或編碼方式等信息。一般位速率越高、析像度越高、幀速率越高、編碼 效率越高的編碼方式,能夠判斷畫質、音質等信號品質越高。這些信息能夠從內容本身(內 容的首部信息等)取得。此時,內容再現品質信息取得裝置4從內容群存儲部1中存儲的 內容本身取得位速率、編碼方式等信息。另外,也可以不從內容群存儲部1中存儲的內容本 身取得內容的位速率、析像度、幀速率或編碼方式等信息,而與這些內容相關聯從元數據信 息取得。另夕卜,也可以解析內容本身,抽取內容的畫質、音質等表示信號品質的信息。此時, 內容再現品質信息取得裝置4解析內容群存儲部1中存儲的內容本身,抽取內容的畫質、音 質等表示信號品質的信息。例如,也可以是通過解析對內容進行解碼而做出的圖像的畫質 來計算編碼失真的大小進而作為表示內容的畫質的信息。此時,能夠判斷為編碼失真越小 則畫質越高。例如,通過使用文獻4(日本特開2005-159419號公報「圖像處理裝置和方法、以及 電腦程式和計算機可讀存儲介質」)的方法,能夠量化編碼失真。顯然,測量編碼失真的 方法不限於此,只要是能夠用對內容進行解碼而做出的畫質來判斷畫質的方法即可。另外, 不限於畫質,音質也同樣。這些畫質、音質等表示信號品質的內容再現品質信息能夠按公共區間組中包含的 各公共區間來取得。另外,也可以將以上列舉的求內容的畫質、音質等信號品質的方法合成來計算品 質評價值,作為內容的畫質、音質等表示信號品質的內容再現品質信息。在此,表示內容的再現品質的內容再現品質信息是指例如從內容的存在位置到用 戶的再現環境之間存在的網絡的品質(網絡品質)等。當內容的存在位置不同時(例如, 當存儲有內容的存儲器不同時),到用戶的再現環境之間存在的網絡不同,因此網絡品質因 每個內容而不同。網絡品質是例如從內容的存在位置(存儲器)到用戶的再現環境(用戶的視聽終 端)之間存在的網絡的通信頻帶、通信延遲、包丟失率、吞吐量等。一般,通信頻帶越寬、通 信延遲越少、包丟失率越低、吞吐量越少,越不容易發生內容的再現延遲(需要直到再現開 始的時間、再現中斷等)、漏處理(漏幀等),因此能夠判斷為內容的再現品質高。此外,還 可以將對存儲有內容的伺服器的訪問量等作為內容再現品質信息來取得。這些信息能夠通 過例如訪問存儲有內容的伺服器並測量這些數據來求得。此時,也可以是例如內容再現品 質信息取得裝置4訪問內容群存儲部1測量這些數據來求得。另外,也可以將通信頻帶、通 信延遲、包丟失率、吞吐量、訪問量等信息作為從外部輸入的信息來取得。例如,可以從根據過去測量出的數據而計算的統計量等外部信息取得。另外,內容再現品質信息取得裝置4也可以將例如內容的再現延遲的發生率、內 容再現延遲時間等的統計數據作為內容再現品質信息來取得。這些信息能夠通過例如過去 測量出的再現延遲的發生率、再現延遲時間來計算。在此,作為取得網絡品質的方法,可以利用評價網絡品質的眾所周知的各種方法。在此列舉的內容再現品質信息只是一例,不限於此。只要是能夠判斷內容的所有 再現品質(用戶視聽內容時感到的品質)的信息,可以是任何信息。內容再現控制裝置5在使用從公共區間組檢測裝置3供給的公共區間組信息、和 從內容再現品質信息取得裝置4供給的內容再現品質信息來再現內容群存儲部1中包含的 內容時,對該再現對象的內容中的公共區間組所包含的區間,根據公共區間組的各公共區 間所屬於的內容的內容再現品質信息切換要再現的內容來進行再現,以提高內容的再現品 質。作為內容再現控制裝置5為提高內容的再現品質而切換要再現的內容來進行再 現的方法,例如可以根據公共區間組的各公共區間所屬於的內容的內容再現品質信息選擇 內容的再現品質最高的內容,切換成所選擇的內容而進行再現。參照圖2進行說明。在此,將再現對象的內容設為內容1。內容1中公共空區間 組中包含的區間是公共區間組A中包含的區間a、和公共區間組B中包含的區間b。在此, 例如,假設公共區間組A的各公共區間所屬於的內容中包含區間d的內容3、公共區間組B 的各公共區間所屬於的內容中包含區間f的內容4分別為內容的再現品質最高的內容時, 內容再現控制裝置5根據內容再現品質信息對再現對象內容即內容1進行再現時,首先,代 替再現區間a而切換成內容3的區間d進行再現,接著,在再現公共區間組中不包含的區間 (區間a和區間b之間)時,原樣再現內容1,最後,代替再現區間b而切換成內容4的區間 f進行再現。顯然,例如假設公共區間組的各公共區間所屬於的內容中作為再現對象內容的 內容1是內容的再現品質最高的內容時,不特別進行內容切換而原樣再現內容1即可。在此,例如內容再現品質信息是內容的畫質、音質等表示信號品質的信息時,可以 按公共區間組選擇內容的信號品質最高的內容,切換為所選擇的內容而進行再現。例如可 以選擇位速率最高的內容、析像度最高的內容、幀速率最高的內容,用編碼效率最高的編碼 方式編碼的內容、編碼失真最少的內容,切換成所選擇的內容而進行再現。在此,例如內容再現品質信息為表示從內容的存在位置到用戶的再現環境之間存 在的網絡的品質(網絡品質)的信息時,按公共區間組選擇網絡品質最高的內容,切換成所 選擇的內容而進行再現。當內容的存在位置分散在多個存儲器時,由於各內容的存在位置 與用戶的再現環境之間存在的網絡不同,因此網絡品質因內容的不同而不同。例如,可以選 擇從內容的存在位置到用戶的再現環境之間存在的網絡的通信頻帶最寬的內容、通信延遲 最少的內容、包丟失率最低的內容、吞吐量最少的內容,切換成所選擇的內容而進行再現。 再例如,可以選擇對內容所在的伺服器的訪問量最少的內容,切換成所選擇的內容而進行 再現。再例如,選擇再現延遲的發生率最低的內容、再現延遲時間最短的內容,切換成所選 擇的內容而進行再現。另外,內容再現控制裝置5對這些表示信號品質的內容再現品質信息、表示網絡 品質的內容再現品質信息等多個信息進行合成,來評價內容的再現品質,選擇被評價為再現品質最高的內容,切換成所選擇的內容而進行再現。例如,也可以按照最優先選擇始終不 發生再現延遲的內容,其次選擇畫質、音質高的內容這樣的基準,來選擇內容。再例如,也可 以在不發生再現延遲的最低限的網絡品質中,選擇畫質、音質最高的內容。再例如,當再現對象的內容中有多個公共區間組中包含的區間時,也可以不對該 區間單獨選擇內容的再現品質最高的內容,而對多個區間,匯總(作為總和)選擇內容的再 現品質最高的內容。由此,能夠選擇內容,使得作為內容整體內容的再現品質最高。例如, 以圖2為例進行說明,當再現對象的內容為內容1時,可以對於公共區間組中包含的區間a 和區間b,不單獨選擇內容的再現品質最高的內容,而是對區間a和區間b匯總選擇內容的 再現品質最高的內容。接著,利用圖3的流程圖,說明本實施方式的工作。圖3是表示本實施方式的內容 再現順序決定系統的工作的流程圖。首先,信號特徵量序列抽取裝置2按內容群存儲部1中包含的各內容,抽取與內容 的時間軸上的位置(例如媒體時刻等)建立起對應的信號特徵量的序列即信號特徵量序 列,將抽取出的每個內容的信號特徵量序列供給至公共區間組檢測裝置3(步驟A01)。接著,公共區間組檢測裝置3根據從信號特徵量序列抽取裝置2供給的每個內容 的信號特徵量序列,檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共 區間組。將檢測到的公共區間組的信息、即確定公共區間組的各公共區間所屬於的內容和 在時間軸上的位置的信息作為公共區間組信息供給至內容再現品質信息取得裝置4和內 容再現控制裝置5(步驟A02)。然後,內容再現品質信息取得裝置4根據從公共區間組檢測裝置3供給的公共區 間組信息,取得表示公共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信 息。將所取得的內容再現品質信息供給至內容再現控制裝置5 (步驟A03)。最後,內容再現控制裝置5在使用從公共區間組檢測裝置3供給的公共區間組信 息和從內容再現品質信息取得裝置4供給的內容再現品質信息,對內容群存儲部1中包含 的內容進行再現時,對該再現對象的內容中的公共區間組中包含的區間,根據公共區間組 的各公共區間所屬於的內容的內容再現品質信息來切換要再現的內容而進行再現,以提高 內容的再現品質(步驟A04)。對本實施方式的效果進行說明。根據本實施方式具有如下效果,在以網際網路上的動態圖像共享服務(動態圖像投 稿網站)等的大量內容為對象再現閱覽內容的系統中,能夠實現確保內容的再現品質的再 現。由此,具有用戶能夠享受高再現品質的內容視聽,少忍受再現品質差的內容的視聽的效^ ο其理由是,內容再現控制裝置5根據內容再現品質信息取得裝置4取得的內容再 現品質信息來再現內容時,對與其他內容存在公共區間的區間,切換成再現品質高的內容 而執行再現。網際網路上的動態圖像共享服務(動態圖像投稿網站)等中,存在多個具有各種再 現品質的同一內容或僅一部區間相同的內容,因此,本實施方式的效果特別大。本發明的對象不限於網際網路上的動態圖像共享服務(動態圖像投稿網站),例如 動態圖像錄像裝置(硬碟錄像機等)、動態圖像視聽終端(機頂盒等)、可攜式動態圖像播放器、可攜式音樂播放器等,只要是以大量的內容為對象再現閱覽內容的系統、裝置即可作 為對象。另外,上述實施方式中用硬體構成各部,但也可以由用程序工作的CPU等信息處 理裝置構成。此時,程序使CPU等執行上述工作。如上所述,本發明的第1形式是一種內容再現控制系統,包括內容群存儲部,存儲 至少一個內容;信號特徵量序列抽取裝置,按上述內容群存儲部中存儲的內容抽取與內容 的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝 置,根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公 共區間的組作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組,取得表示公 共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制 裝置,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容中在上述公 共區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上述內容再現 品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。本發明的第2形式為,在上述形式中,上述內容是由視頻信號、音頻信號、或視頻 信號和音頻信號雙方構成的,具有時間軸的媒體。本發明的第3形式為,在上述形式中,上述信號特徵量序列包括表示內容中包含 的視頻信號的特徵量和表示內容中包含的音頻信號的特徵量中的至少一個。本發明的第4形式為,在上述形式中,上述內容再現品質信息取得裝置取得表示 公共區間組的各公共區間的再現品質的信息,作為內容再現品質信息。本發明的第5形式為,在上述形式中,上述內容再現控制裝置在對上述內容群存 儲部中存儲的內容進行再現時,對該再現對象的內容中的公共區間組中包含的區間,根據 上述公共區間組的各公共區間所屬於的內容的上述內容再現品質信息,選擇內容的再現品 質最高的內容,切換成所選擇的內容而進行再現。本發明的第6形式為,在上述形式中,上述內容再現品質信息取得裝置取得表示 內容的畫質或音質的信息,作為內容再現品質信息,上述內容再現控制裝置,切換成至少一 個公共區間中的畫質或音質的任意一方或雙方都高的內容而進行再現。本發明的第7形式為,在上述形式中,上述表示內容的畫質或音質的信息是表示 內容的位速率、析像度、幀速率、編碼方式、編碼失真中任意一種的信息、或者其組合。本發明的第8形式為,在上述形式中,上述內容再現品質信息取得裝置取得表示 從內容的存在位置到用戶的再現環境之間存在的網絡的品質的信息,作為內容再現品質信 息,上述內容再現控制裝置,切換成從內容的存在位置到用戶的再現環境之間存在的網絡 的品質高的內容而進行再現。本發明的第9形式為,在上述形式中,上述表示網絡的品質的信息是表示從內容 的存在位置到用戶的再現環境之間存在的網絡的通信頻帶、通信延遲、包丟失率、吞吐量、 再現延遲的發生率、再現延遲時間、對伺服器的訪問量中任意一種的信息、或者其組合。本發明的第10形式是一種內容再現控制系統,包括信號特徵量序列抽取裝置, 按存儲至少一個內容的內容群存儲部中存儲的各內容,抽取與內容的時間軸上的位置建立 起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝置,根據上述每個內容 的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組,取得表示公共區間組的各公共區 間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制裝置,在對上述內容 群存儲部中包含的內容進行再現時,對該再現對象的內容中的上述公共區間組中包含的區 間,根據上述公共區間組的各公共區間所屬於的內容的上述內容再現品質信息來切換要再 現的內容而進行再現,以提高內容的再現品質。本發明的第11形式是一種內容再現控制方法,包括信號特徵量序列抽取步驟,按 存儲至少一個內容的內容群存儲部中存儲的內容,抽取與內容的時間軸上的位置建立起對 應的信號特徵量的序列即信號特徵量序列;公共區間組檢測步驟,根據上述每個內容的信 號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共區間 組;內容再現品質信息取得步驟,按上述公共區間組,取得表示公共區間組的各公共區間所 屬於的內容的再現品質的內容再現品質信息;以及內容再現控制步驟,在對上述內容群存 儲部中包含的內容進行再現時,對該再現對象的內容中的上述公共區間組中包含的區間, 根據上述公共區間組的各公共區間所屬於的內容的上述內容再現品質信息來切換要再現 的內容而進行再現,以提高內容的再現品質。本發明的第12形式是一種內容再現控制程序,使信息處理裝置執行以下處理信 號特徵量序列抽取處理,按存儲至少一個內容的內容群存儲部中存儲的內容抽取與內容的 時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測處 理,根據上述每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公 共區間的組作為公共區間組;內容再現品質信息取得處理,按上述公共區間組,取得表示公 共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制 處理,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象的內容中的上述公 共區間組中包含的區間,根據上述公共區間組的各公共區間所屬於的內容的上述內容再現 品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。以上列舉優選的實施方式和形式來對本發明進行了說明,但本發明不必限於上述 實施方式和形式,在其技術思想的範圍內可以實施各種變形。本申請以2008年6月26日申請的日本申請特願2008-167342號為基礎主張優先 權,本申請包含其公開的全部內容。工業上的可利用性作為本發明的使用例,例如,在網際網路上的動態圖像共享服務(動態圖像投稿網 站)等以大量內容為對象再現閱覽內容的系統中,能夠向用戶提供確保內容的再現品質的 再現(高再現品質)。
權利要求
1.一種內容再現控制系統,其特徵在於,包括內容群存儲部,存儲至少一個內容;信號特徵量序列抽取裝置,按存儲在上述內容群存儲部中的內容來抽取與內容的時間 軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝置,根據上述每個內容的信號特徵量序列檢測在不同內容間信號特 徵量相互類似的區間即公共區間的組來作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組來取得表示公共區間組的各公共區間 所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制裝置,在對上述內容群存儲部中包含的內容進行再現時,對該再現對象 的內容中包含在上述公共區間組中的區間,根據上述公共區間組的各公共區間所屬於的內 容的上述內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。
2.根據權利要求1所述的內容再現控制系統,其特徵在於,上述內容是由視頻信號、音頻信號、或者視頻信號和音頻信號雙方所構成的、具有時間 軸的媒體。
3.根據權利要求1或2所述的內容再現控制系統,其特徵在於,上述信號特徵量序列包括表示內容中包含的視頻信號的特徵量和表示內容中包含的 音頻信號的特徵量中的至少一種。
4.根據權利要求1至3中任意一項所述的內容再現控制系統,其特徵在於,上述內容再現品質信息取得裝置取得表示公共區間組的各公共區間的再現品質的信 息來作為內容再現品質信息。
5.根據權利要求1至4中任意一項所述的內容再現控制系統,其特徵在於,上述內容再現控制裝置在對存儲在上述內容群存儲部中的內容進行再現時,對該再現 對象的內容中包含在公共區間組中的區間,根據上述公共區間組的各公共區間所屬於的內 容的上述內容再現品質信息來選擇內容的再現品質最高的內容,並切換成所選擇的內容來 進行再現。
6.根據權利要求1至5中任意一項所述的內容再現控制系統,其特徵在於,上述內容再現品質信息取得裝置取得表示內容的畫質或音質的信息來作為內容再現 品質信息,上述內容再現控制裝置切換成至少一個公共區間的畫質和音質中任意一方高的內容、 或者雙方高的內容來進行再現。
7.根據權利要求6所述的內容再現控制系統,其特徵在於,上述表示內容的畫質或音質的信息是表示內容的位速率、析像度、幀速率、編碼方式以 及編碼失真中任意一種的信息、或者其組合。
8.根據權利要求1至7中任意一項所述的內容再現控制系統,其特徵在於上述內容再現品質信息取得裝置取得表示介於從內容的所在位置至用戶的再現環境 之間的網絡的品質的信息來作為內容再現品質信息,上述內容再現控制裝置切換成介於從內容的所在位置至用戶的再現環境之間的網絡 的品質高的內容來進行再現。
9.根據權利要求8所述的內容再現控制系統,其特徵在於,上述表示網絡的品質的信息是表示介於從內容的所在位置至用戶的再現環境之間的 網絡的通信頻帶、通信延遲、包丟失率、吞吐量、再現延遲的發生率、再現延遲時間、以及對 伺服器的訪問量中的任意一種的信息、或者其組合。
10.一種內容再現控制裝置,其特徵在於,包括信號特徵量序列抽取裝置,按存儲至少一個內容的內容群存儲部中存儲的各內容來抽 取與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝置,根據上述每個內容的信號特徵量序列檢測不同內容之間信號特 徵量相互類似的區間即公共區間的組來作為公共區間組;內容再現品質信息取得裝置,按上述公共區間組來取得表示公共區間組的各公共區間 所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制裝置,當對上述內容群存儲部中包含的內容進行再現時,對該再現對象 的內容中包含在上述公共區間組中的區間,根據上述公共區間組的各公共區間所屬於的內 容的上述內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。
11.一種內容再現控制方法,其特徵在於,包括信號特徵量序列抽取步驟,按存儲至少一個內容的內容群存儲部中存儲的內容來抽取 與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測步驟,根據上述每個內容的信號特徵量序列檢測在不同內容之間信號 特徵量相互類似的區間即公共區間的組來作為公共區間組;內容再現品質信息取得步驟,按上述公共區間組來取得表示公共區間組的各公共區間 所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制步驟,當對上述內容群存儲部中包含的內容進行再現時,對該再現對象 的內容中包含在上述公共區間組中的區間,根據上述公共區間組的各公共區間所屬於的內 容的上述內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。
12.—種內容再現控制程序,使信息處理裝置執行以下處理信號特徵量序列抽取處理,按存儲至少一個內容的內容群存儲部中存儲的內容來抽取 與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測處理,根據上述每個內容的信號特徵量序列檢測在不同內容之間信號 特徵量相互類似的區間即公共區間的組來作為公共區間組;內容再現品質信息取得處理,按上述公共區間組來取得表示公共區間組的各公共區間 所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制處理,當對上述內容群存儲部中包含的內容進行再現時,對該再現對象 的內容中包含在上述公共區間組中的區間,根據上述公共區間組的各公共區間所屬於的內 容的上述內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。
全文摘要
本發明提供一種內容再現控制系統及其方法和程序,該內容再現控制系統包括信號特徵量序列抽取裝置,按存儲至少一個內容的內容群存儲部中存儲的各內容來抽取與內容的時間軸上的位置建立起對應的信號特徵量的序列即信號特徵量序列;公共區間組檢測裝置,根據每個內容的信號特徵量序列檢測不同內容間信號特徵量相互類似的區間即公共區間的組作為公共區間組;內容再現品質信息取得裝置,按公共區間組,取得表示公共區間組的各公共區間所屬於的內容的再現品質的內容再現品質信息;以及內容再現控制裝置,在對內容群存儲部中包含的內容進行再現時,對該再現對象的內容中在公共區間組中包含的區間,根據公共區間組的各公共區間所屬於的內容的內容再現品質信息來切換要再現的內容而進行再現,以提高內容的再現品質。
文檔編號G11B27/32GK102067229SQ20098012372
公開日2011年5月18日 申請日期2009年6月22日 優先權日2008年6月26日
發明者仙田裕三, 佐藤貴美, 大綱亮磨, 巖元浩太, 平川康史, 木本崇博 申請人:日本電氣株式會社