用於分析和標記電影的系統和方法

2023-10-04 03:55:49 2

專利名稱：用於分析和標記電影的系統和方法
技術領域：
本發明一般地涉及電影(film)安全，更具體地涉及為了反盜版目的 用於分析和標記電影圖像的系統和方法。
背景技術：
這個部分旨在向讀者介紹與以下將描述和/或要求保護的本發明的各個 方面相關的本領域的各個方面。相信這種論述將有助於向讀者提供背景信 息以輔助更好地理解本發明的各個方面。因此，應當了解，應基於這種考 慮來閱讀這些陳述，而不應將其認作現有技術。
與電影膠片(motion picture film )的電影院放映(theatrical exhibition)有關的盜版問題是眾所周知的。 一旦電影發行人將電影膠片的 拷貝(print)分發給放映商以供電影院放映，通常就會失去對該產品的某 種程度的控制。例如，在電影院中放映電影的常規過程中，電影院中的顧 客可在放映期間使用例如手持式便攜攝像機(無論是模擬的還是數字的) 暗中記錄電影。在更複雜的層面上，試圖獲得電影拷貝的非法複製品的人 可與放映商的僱員勾結而進入電影院放映室，並在相對受控的環境中在幾 個小時之後製作電影的複製品。在這樣一個環境中，來自放映儀器的音頻 可直接饋入便攜攝像機。可使用三腳架來確保清楚且穩定的影像。其結果 是，可製作得到相對高質量的一份非法複製品。或者，可掃描拷貝本身以 創建視頻母盤(video master)。
影片的這種非法"盜版"複製品現在可經由網際網路或通過使用硬複製 件(視頻CD或DVD)而被分發，這降低了合法電影發行的經濟價值。隨 著網際網路和可買得起的更高質量記錄設備的出現，這個問題在近年來已變 得越來越嚴重。因此，高度希望有用於追蹤造成這種損失的一干人等的方 法。
5在1982年，美國電影協會(MPAA)與KodakTM公司一起開發了用於唯一地標識電影拷貝的技術。這種技術通常被稱為編碼反盜版(CAP)編碼術。這種碼是在製造拷貝時添加在影像中的一系列虛點。大約每一百幀中有一幀包含已被添加到圖像中的四個微小點。 一般而言，重構影片拷貝的序列號需要11個CAP編碼幀。點的各個唯一配置對應於一拷貝標識符。通常針對電影被分發給其的每一特定電影院來編碼電影拷貝。
過去，將模擬便攜攝像機對準電影院屏幕通常產生質量差、搖曳的圖像，但是編碼點通常在複製和再現處理中存留下來以使得可以獲得電影拷貝的序列號。但是，數字視頻壓縮和分發技術的出現已經縮小了 CAP編碼術的生存能力。改進型數字便攜攝像機不僅可拍攝更高質量的影像，而且視頻壓縮算法(當以數字格式存儲或經由網際網路傳送盜版電影時通常採用這些壓縮算法)易於去除CAP碼。也就是說，因為表示碼的點極其小且分散，所以在視頻壓縮期間它們很容易被分解。此外，因為CAP碼是用電影幀內的空間圖像布置來表示的，所以在圖像壓縮期間的單個CAP碼點的丟失就會使CAP編碼方案作廢。事實上，CAP編碼術取決於100%的圖像存留度(survival)。
另外，CAP編碼系統中的編碼圖像重複頻率增加了公眾將看見該圖像的可能性。這是不希望發生的，因為其可分散觀眾對電影內容的注意力或者會導致他們形成特定電影院放映較差質量的拷貝的觀點。
TechnicolorTM和Deluxe 電影實驗室都己經引入改進了 CAP編碼的更新系統。這些系統在將要標記的電影的不同幀中布置不同圖案的點，並使用這些圖案來編碼用於該拷貝的序列號。但是，在這樣的系統中，標記在幀中的位置或者不受控制或者固定。
因此，高度需要以下述方式來標記電影的系統和方法所述方式提供
了魯棒且耐久的標記電影，避免了CAP編碼的局限性和不足，並提供了無論在盜版還是壓縮中都具有極好的存留度且仍然可視的標記。

發明內容
本發明提供了一種用於分析和標記電影圖像的系統和方法，用於提供具有魯棒標記的經標記電影，所述魯棒標記在例如未經授權的複製時具有 高存留率。本發明提供了輔助選擇用於標記電影圖像的標記的理想位置的
能力，所述標記可用於取證(forensic)目的以例如在盜版的情況下追蹤電 影。本發明將通過基於針對不同背景色的標記的可存留性來推薦潛在標記 製作位置，從而自動化電影的標記製作處理。
在本發明的一個方面中，提供了用於分析和標記電影的系統。該系統 包括預篩分設備，該預篩分設備被配置為在所述電影的至少一個幀上疊加 潛在標記製作區域的繪圖。預篩分設備包括標記製作模塊。標記製作模塊
包括顏色分析器，其被配置為用標記的預定顏色來滲透至少兩個潛在標
記製作區域；以及RMSE計算器，其被配置為計算所述至少兩個潛在標記 製作區域的每一個和圍繞每個潛在標記製作區域的區域的均方根誤差 (RMSE)。標記製作模塊還被配置為確定所述至少兩個潛在標記製作區 域中的哪一個具有最低均方根誤差。
在本發明的另一個方面中，提供了用於確定電影中的標記位置的方
法。該方法包括在所述電影的至少一個幀中選擇至少兩個潛在標記製作
區域；計算所述至少兩個潛在標記製作區域的每一個以及圍繞每個潛在標 記製作區域的區域的均方根誤差(RMSE);以及確定所述至少兩個潛在 標記製作區域中的哪一個具有最低RMSE。所述選擇至少兩個潛在標記制
作區域還包括在至少一個幀上疊加包括標識軸的網格；確定網格相對於 所述幀的位置；以及將潛在標記製作區域的位置選擇為包括所述標識軸的
交叉點。
在又一個方面，該方法還包括針對在至少預定數目的連續幀中的同一
位置來確定具有最低RMSE的潛在標記製作區域。
根據本發明另一個方面，提供了一種機器可讀的程序存儲設備，其有 形地包含可由所述機器運行以執行用於確定電影中的標記位置的方法步驟 的指令程序。所述方法包括在所述電影的至少一個幀中選擇至少兩個潛 在標記製作區域；用標記的預定顏色來浸透所述至少兩個潛在標記製作區 域；計算所述至少兩個潛在標記製作區域的每個以及圍繞每個潛在標記制 作區域的區域的均方根誤差(RMSE);以及確定所述至少兩個潛在標記製作區域中的哪一個具有最低RMSE。


本發明的這些和其它方面、特徵和優點將被描述，或者從以下對優選 實施例的詳細描述中變得清楚可見，其中，要結合附圖來閱讀所述詳細描 述。
在附圖中，相似標號在各幅圖中表示相似元件 圖1是根據本發明一個方面的系統布局的示例圖示； 圖2是根據本發明一個方面、用於標記電影的示例方法的流程圖； 圖3是根據本發明一個方面、用於分析和標記電影幀的示例方法的流 程圖；以及
圖4是根據本發明一個方面、被示出為其上疊加了網格顯示的要被標
記的電影圖像以及示例測試區域的示例繪圖。
應當了解，這些附圖是用於例示本發明的概念的目的的，而不必然是 用於圖示本發明的唯一可能配置。
具體實施例方式
應當了解，可以硬體、軟體或其組合的各種形式來實現附圖中示出的 元件。優選地，在一個或多個經適當編程的通用設備上以硬體和軟體的組 合來實現這些元件，所述通用設備可包括處理器、存儲器和輸入/輸出接□。
本說明書舉例說明了本發明的原理。因此將會了解，本領域技術人員 將能夠作出雖然未在這裡顯式描述或示出但是實現了本發明的原理且包括 在其精神和範圍內的各種配置。
這裡記載的所有示例和條件語言是打算用於教導目的的，以輔助讀者 理解本發明的原理和發明人為了促進本技術而貢獻的概念，並且這些示例 和條件語言應被視為並不限於這些具體記載的示例和條件。
此外，這裡記載了本發明的原理、各個方面和實施例及其具體示例的 所有陳述意圖包含本發明的結構和功能的等同物。另外，這些等同物意圖包括當前已知的等同物以及以後開發的等同物，即，無論為何種結構執行 相同功能的、所開發出來的任何元件。
因此，例如，本領域技術人員將會了解，這裡呈現的框圖表示實現本 發明原理的例示電路的示意圖。類似地，將會了解，任何流程表、流程 圖、狀態轉換圖、偽代碼等表示實質上可用計算機可讀介質表示並因而可 由計算機或處理器執行的各種處理，而無論該計算機或處理器是否被顯式 地示出。
可通過使用專用硬體以及與適當軟體相關聯的能夠執行軟體的硬體來 提供附圖中示出的各個元件的功能。當由處理器提供時，這些功能可由單 個專用處理器、單個共享處理器、或者多個單獨處理器(其中的一些可被 共享)來提供。此外，對術語"處理器"或"控制器"的顯式使用不應當 被理解為排他地指能夠執行軟體的硬體，而可隱式地包括但不限於數字信
號處理器("DSP")硬體、用於存儲軟體的只讀存儲器("ROM")、 隨機存取存儲器("RAM")和非易失性存儲裝置。
也可包括傳統和/或定製的其它硬體。類似地，附圖中示出的任何開關 僅僅是概念上的。它們的功能可通過操作程序邏輯、通過專用邏輯、通過 程序控制和專用邏輯的交互、或者甚至手動地執行，從上下文中更具體地 理解，可由實現者選擇特定技術。
在其權利要求書中，表示為用於執行指定功能的裝置的任何元件意欲 包含執行該功能的任何方式，例如包括a)執行該功能的電路元件的組合 或者b)任何形式的軟體(因而包括固件、微碼等)與用於運行執行該功 能的軟體的適當電路的組合。由這些權利要求限定的本發明具備以下事 實由各個所記載的裝置提供的功能性被以權利要求需要的方式來組合併 結合在一起。因而認為，可提供那些功能性的任何裝置等同於這裡所示出 的那些裝置。
根據本發明的一個方面提供的軟體可分析電影圖像，並推薦標記的潛 在位置和類型，以幫助最小化可能不怎麼有效或者可能分散正觀看圖像或 影片的團體的注意力的標記的使用。事實上，如果使標記位於不希望的位 置，則在未經授權的再現之後(例如，在由便攜攝像機記錄之後)這些標記可能無法存留下來(例如，可檢測到)。本發明降低了在例如黑幕
(dark scene)或彩幕中做標記而其中的標記在拷貝電影之後將無法存留下 來的可能性，，並使得能夠選擇具有例如在盜版時將存留下來的不同形狀 的更好標記。
本發明通過基於標記在不同背景顏色上的可存留性來建議標記的位 置，以幫助操作者選擇標記，從而有利地輔助在影片的預篩分 (prescreening)期間對標記的選擇。
取決於各種顏色的飽和度和所使用的顏色，標記有差別地在盜版/再現 處理中存留。本發明包括基於諸如RGB (紅色、綠色、藍色)之類的過濾 色的算法。該算法計算所需標記周圍區域的均方根誤差(RMSE)，以測 試背景色對標記的影響。相對於標記製作設備的標記大小和用於產生數字 圖像的掃描方法來確定測試塊大小。在一個實施例中，選擇測試塊並用標 記的預定顏色來浸透(saturate)該測試塊，然後對該測試塊和周圍區域應 用均方根誤差，以確定所推薦的可接受或不可接受的區域以用於呈現給用 戶，之後用戶可最終決定將標記放置在哪裡。將基於針對不同背景色的標 記的可存留性來確定所推薦的/可接受的標記製作區域。
現在參考附圖，在圖1中示出了根據本發明一個實施例的示例性系統 組件。掃描設備102可被提供用於將電影拷貝104 (例如，相機原始電影 負片)掃描成數字格式，例如Cineon格式或SMPTEDPX的文件。掃描設 備102可包括例如電視電影機(telecine)或者將從諸如具有視頻輸出的 Arri LocProTM之類的膠片生成視頻輸出的任何設備。或者，可直接使用來 自後製作處理或數字電影的文件106 (例如，已經具有計算機可讀形式的 文件)。計算機可讀文件的潛在來源可以是AVIDTM編輯器、DPX文件、 D5磁帶等。
掃描後的電影拷貝被輸入到預篩分設備108，例如計算機。該計算機 可在各種已知計算機平臺的任何一個上實現，所述計算機平臺具有以下硬 件諸如一個或多個中央處理單元(CPU)、諸如隨機存取存儲器 (RAM)和/或只讀存儲器(ROM)之類的存儲器110以及諸如鍵盤、光 標控制設備(例如，滑鼠或操縱杆)和顯示設備之類的一個或多個輸入/輸
10出(I/O)用戶接口 112。該計算機平臺還包括作業系統和微指令代碼。這 裡所描述的各種處理和功能可以是經由作業系統來運行的微指令代碼的一 部分或軟體應用程式的一部分(或者其組合)。另外，各種其它外圍設備 可通過諸如並行埠、串行埠或通用串行總線(USB)之類的各種接口
和總線結構來連接到計算機平臺。其它外圍設備可包括附加存儲設備122 和拷貝機128。
或者，已經具有計算機可讀形式的文件/電影拷貝106 (例如，數字電 影，其例如可存儲在外部硬驅動器122上)可直接被輸入到計算機108。 注意，這裡所使用的術語"電影(film)"可以指電影拷貝或者數字電影 (cinema)。
軟體程序包括存儲在存儲器110中的標記製作模塊114。標記製作模 塊114包括顏色分析器116、 RMSE計算器118和序列分析器120，序列分 析器120對拷貝進行評估和處理(例如，協助分析以及標記膠片/數字電 影)以使得可最佳地標記每個電影圖像。顏色分析器104分析多個幀中的 每個所選擇幀的潛在標記製作區域的測試塊以確定該塊的顏色，例如，在 該塊中的像素的RGB值。RMSE計算器118計算該測試塊和周圍測試區域 的均方根誤差。序列分析器120針對多個幀中的至少預定數目的連續幀內 的特定位置確定具有最低RMSE的預設數目的塊，如以下將參考圖3的步 驟320進一步描述的。 一旦用於標記的潛在位置己被確定，標記製作模塊 114就將使得電影的至少一個幀的圖像被顯示在顯示設備上，其中，例如 通過高亮顯示、環繞等來指示出潛在的標記製作區域。標記製作模塊114 還可示出可應用於圖像的例如不同顏色、形狀、或大小的標記。
可在可經由網絡(例如，網際網路)訪問的伺服器上從外部提供資料庫 或者在存儲設備122上存儲資料庫。在例如用戶選擇用於布置標記的所需 區域之後得到的輸出包括來自計算機108的經最佳標記的電影文件124和/ 或從功能上與計算機108相連接的電影拷貝機128拷貝的經標記電影拷貝 126。
圖2是根據本發明一個方面、用於確定電影上的理想和實際標記製作 位置的方法的示例概況的流程圖。圖3示出了分析標記及周圍測試區域以確定每個圖像內的理想(所推薦/可接受)標記製作位置的方法的示例步 驟。圖4示出了疊加在圖像上的示例場景網格401以及採樣測試區域。
參考圖2，在步驟202中，確定電影是否具有計算機可讀格式。如果 不具有，則在步驟204掃描該電影，並前進到步驟206;如果具有，則處 理直接前進到步驟206。應當了解，無論電影是被掃描還是已具有數字格 式，電影的數字文件都將包括關於幀的位置的指示或信息，例如幀數目、 從電影的開始起的時間等等，這些指示或信息將被用於定位潛在標記製作 區域。 一旦圖像信息可具有計算機可讀格式，就使用軟體(例如，標記制 作模塊114)來顯示圖像。
在步驟206，以像素為單位確定潛在標記400的塊大小。基於將對電 影採用的標記製作設備的標記大小(例如，近似100-220微米)來確定塊 大小。塊大小也可受正使用的膠片的類型以及用於獲取數字格式的電影的 掃描設備的解析度的影響。例如，如果正在使用35mm的膠片，圖像或幀 佔據了膠片的20mm，標記大小為100微米且掃描設備具有2000像素的分 辨率，則每個標記的像素數目將是10x10。在本領域已知用於將微米轉換 為像素的許多方法，並且根據本發明的原理可採用這些方法。
一旦已經確定塊大小，就將在步驟208確定周圍測試區域大小。測試 區域將等於用於圍繞潛在標記的塊400的足夠數目的塊。例如，如果潛在 標記的塊是正方塊，貝i」周圍測試區域401將是3x3網格的塊的區域，每個 塊403的大小與潛在標記的塊400基本相同。參考以上示例，周圍測試區 域401將包含30x30個像素。將會了解，潛在標記的測試塊400可以是任 何形狀，例如圓形、三角形等，而周圍區域401的塊403將具有相同形 狀。
在步驟210，用戶可選地可以向軟體輸入在膠片/數字電影中的想要標 記的預定數目的連續幀。優選地，必須有最小至少兩幀；如果沒有進行輸 入，則默認預定數目的幀被自動選擇/獲取為包括兩個連續幀。
在步驟212中，軟體優選地將可用於選擇標記製作位置的信息與每個 所選擇幀的圖像一起顯示。在這方面的有用信息是幀數目或時間以及對可 用標記製作位置的某種指示。例如，轉向圖4，矩形網格402可疊加在電影的圖像上，例如幀404上。該網格由多個經標籤列406和行408組成， 這些列和行限定了多個交叉點410 (即，潛在標記製作區域)，在這些交 叉點上可放置標記。即，例如，可提供利用標識軸示出正方形的網格，並 且可提供將允許用戶用點選設備點擊所需標記位置的程序。幀的潛在標記 製作區域可包括例如所疊加場景網格402的所有網格交叉點410。
網格顯示402可被疊加/放置在電影圖像上，以將該電影圖像的各個方 面(字符、布景等)與潛在標記製作區域的位置相比較(步驟212)。有 利地，可確定網格402相對於具有圖像的電影拷貝的精確位置，並因此可 估定標記相對於電影中的圖像的精確位置。可複查所疊加的圖像，並可確 定理想網格交叉點/潛在標記區域(以及，例如幀數目)以用於製作標記。
返回到圖2，在歩驟214，顏色分析器116對測試塊400的顏色值執 行分析，並且RMSE計算器118對測試塊(即，潛在標記製作區域)和圍 繞幀中的每個潛在標記製作區域的測試區域執行分析。標記製作模塊114 對多個潛在標記製作區域進行分析以確定對於應用標記而言為理想的(所 推薦的/可接受的)測試區域。
優選地，序列分析器120分析具有理想標記製作位置的每序列的連續 幀，以確定電影中的實際標記製作位置。例如，電影中的可放置實際標記 的位置可包括下述一序列幀，在該一序列幀中，在被測試的該序列連續幀 中的至少兩個內的特定位置處滿足至少一個條件，例如，具有最低所計算 RMSE的位置。序列分析器120複查電影並選擇電影中的、在被測試的每 序列幀中的至少兩個連續幀的特定位置處滿足至少一個條件的所有序列的 預定數目的連續幀。將參考圖3進一步說明步驟214的處理。
根據本發明一個方面，對於幀的每個潛在標記製作區域，執行顏色分 析以確定用於施加標記的被推薦/可接受標記製作區域。圖3示出了根據本 發明一個實施例的步驟214的示例性顏色分析處理。
在圖3的步驟302，在等於要標記的連續幀的數目(例如，在步驟 210中提供)的一序列幀中的一個幀內確定特定潛在標記製作區域位置， 例如坐標(X， Y)。例如，在圖4中，特定位置位於網格402的坐標 (2， C)處。在步驟304中，評定圖像是否為RGB格式。如果不是(例如，圖像 為YUV顏色格式)，則優選地執行顏色空間轉換，或者將圖像或潛在標 記的塊400轉換為RGB格式。對網格交叉點處的塊400執行顏色分析， 以確定塊中的像素的顏色。優選地，根據本發明的顏色分析是基於RGB (紅色、綠色、藍色)顏色模型格式的。可經由數值表示來描述RGB顏 色模型中的顏色，所述數值表示指示出包括了紅色、綠色和藍色中的每一 種的多少。每種顏色可在最小值(沒有顏色)和最大值(滿飽和度)之間 變化。如果所有顏色都處在最小值，則結果是黑色，而如果所有顏色都處 在最大值，則結果是白色。顏色值可被寫為在0到255的範圍內的數值； 例如，滿飽和度紅色可被寫為255、 0、 0。
在確定測試塊400的顏色之後，在步驟306確定該測試塊的顏色是否 與標記製作設備兼容。本發明的算法將確定最佳潛在標記製作區域，該最 佳潛在標記製作區域將使得標記儘可能可視但是卻魯棒。不過，標記製作 設備的某些顏色將對測試塊的特定顏色具有不利影響。多個預先存儲的條 件可以是存儲設備122上的資料庫中的程序。顏色分析器116將針對這些
所存儲的條件將測試塊的顏色和要使用的標記的預定顏色進行比較，以確 定測試塊是否與標記的預定顏色相兼容。例如，如果標記製作設備使用紅 色雷射，則完全藍色或綠色的測試塊400不應當被使用。因此，如果在步 驟306確定測試塊與標記製作設備不相兼容，則該不兼容測試塊的位置將 被記錄在存儲設備122上的資料庫中，並且在步驟308，處理將去往下一 個位置，例如坐標(2， D)。否則，處理將繼續前往步驟310。
如果測試塊與標記製作設備相兼容，則在步驟310，用標記製作設備 的顏色浸透測試塊，即，模擬用標記製作設備的顏色來標記或燒制潛在的 標記製作區域。這個浸透處理是通過改變測試塊的每個像素中的每個RGB 值來執行的。針對標記製作設備的特定顏色的每個RGB值的百分比變化 可從對實際電影的測試序列實驗中確定，並存儲在存儲設備122上的數據 庫中。這些百分比值隨後將被應用於測試塊的每個像素中的每個RGB 值。例如，如果採用紅色標記設備，例如雷射器，則紅色設備將在電影上 最多地浸透或影響RGB的紅色。紅色飽和度(R值)在其已由標記製作設
14備在電影上被浸透之後將失去其值的大約70%,而紅色標記影響綠色的
10%和藍色的15%。例如，如果像素飽和度對於紅色是100，綠色是100 並且藍色是100，則在浸透測試塊的像素之後，同一像素位置的飽和度值 對於紅色是30,綠色是90而藍色是85。
在測試塊被浸透之後，在步驟312中計算測試塊400和周圍測試區域 401的均方根誤差(RMSE)，如下所示
RMSE =均方根[{^1^11)+^2712)+...+(乂171111)...+&11- ymn))/〈每個塊的 像素數目*周圍塊的數目>]
其中，xl、 x2、...是測試塊中的像素；yml、 ym2…是第m個周圍塊 中的像素，n是每個塊的像素數目，而m是周圍塊的數目。在一個實施例 中，x和y值正好是預定標記的顏色的顏色值，例如，每個像素的R值。 在另一個實施例中，x和y值將是每個像素的RGB值，即三個數。
計算得到的RMSE與位置的坐標一起被存儲在資料庫122中，以供序 列分析器120隨後分析。此時，RMSE計算器也可採用限幅算法以丟棄具 有第一預定閾值以下(即，被測試區域很亮)或在第二預定閾值以上 (即，被測試區域太暗)的RMSE值的潛在標記製作區域。
在步驟314中，確定是否已分析特定幀上的所有位置。如果所有位置 都已被分析，則處理將去往特定幀內的下一個位置。例如，如果位置2,C (X， Y坐標)是圖4的網格402中被分析的上一個位置，則幀404中的 要被分析的下一個位置將是位置2，D。否則，如果特定幀中的所有位置都 已被分析，則處理將去往下一幀(步驟316)。
在步驟318中，評定是否已測試電影中的至少最小數目的連續幀。如 果不是，則處理前進到步驟308並分析下一個幀。如果是，則序列分析器 120將在步驟320確定連續幀中具有最低RMSE的相同位置。另外，來自 連續幀的相同位置的計算得到的RMSE必須在彼此的預定範圍內，即，對 於給定位置的計算得到的RMSE沒有因幀不同而顯著改變。連續幀中具有 最低的計算得到的RMSE的位置將被確定為最佳潛在標記製作區域。優選 地，為了有效標記電影必須標記至少兩個連續幀。因此，如果對於電影中 的至少兩個連續幀沒有發現所推薦/可接受標記製作區域，或者如果在至少兩個連續幀內不存在所希望的/合適的標記製作區域，則對電影中下一組預 定數目的連續幀應用根據本發明的算法。
應當了解，可在已經分析最小數目的幀之後，或者在已經分析所有幀 且結果存儲在存儲設備122中之後執行步驟320。在後一個實施例中，序
列分析器120也將確定電影中的哪些連續幀具有最低的計算得到的 RMSE。此外，在已經確定該序列的幀之後，幀中的位置(即，X和Y坐 標)和幀號、幀號序列或其它指示將被存儲在資料庫122中以供隨後檢 索。這確保發現電影的每一序列幀中的所有可能標記製作位置。這是很有 利的，因為製片廠可能不喜歡特定序列中的某些標記位置，並且可能想要 同一序列中的替代位置。此外，製片廠必須決定他們想要在每一序列中放 置多少標記。
在圖3的分析完成之後，軟體(例如，標記製作模塊114)指示出所 有理想(所推薦/可接受)標記製作區域，這些標記製作區域可隨後被顯示 在例如疊加在圖像上的網格布局上以供用戶複查(步驟216)。用戶隨後 可經由點選設備選擇用於標記的優選位置和/或用於標記的優選幀。可替代 地，標記製作模塊114可基於預定的可接受RMSE、每個電影的預定數目 的標記、每幀的預定最小數目的標記和要標記的預定數目的連續幀來自動 確定所選擇位置。這些值可由用戶經由用戶接口 112來預先輸入，例如， 通常每幀選擇5或6個標記。
本發明使得標記儘可能可視卻仍然魯棒，並且在確定理想標記製作位 置期間包括顏色分析。有利地，根據一個方面，本發明提供了用於確定和 選擇用於在膠片/數字電影中放置標記的理想位置的方法。標記因而在位置 方面被最優化，並從而耐久且魯棒以使得根據本發明來標記的電影提供了 對電影觀眾的最小影響，同時確保了在評估經這樣標記的電影的盜版複製 品期間的成功的取證分析、標識和標記恢復的最大可能性。
雖然已經在這裡詳細示出和描述了包含本發明教導的實施例，但是本 領域技術人員可容易地設計仍然包含這些教導的許多其它變形實施例。已 經描述了用於分析和標記電影的系統和方法的優選實施例(其意圖是例示 性的而非限制性的)，但是應當注意，本領域技術人員根據以上教導可進行修改和變更。因此應當了解，可在所公開的本發明的特定實施例中進行 在由所附權利要求限定的本發明的範圍和精神內的改變。所有這些修改、 替代和添加都意欲落在由以下權利要求最佳限定的本發明的範圍內。
權利要求
1. 一種用於分析和標記電影的系統，包括預篩分設備(108)，該預篩分設備被配置為在所述電影的至少一個幀(404)上疊加潛在標記製作區域(400)的繪圖，所述預篩分設備(108)包括標記製作模塊(114)，所述標記製作模塊(114)包括顏色分析器(116)，該顏色分析器被配置為用標記的預定顏色來滲透至少兩個潛在標記製作區域(400)；以及均方根誤差計算器(118)，該均方根誤差計算器被配置為計算所述至少兩個潛在標記製作區域(400)的每一個和圍繞每個潛在標記製作區域的區域(401)的均方根誤差；其中，所述標記製作模塊(114)還被配置為確定所述至少兩個潛在標記製作區域中的哪一個具有最低均方根誤差。
2. 如權利要求1所述的系統，其中，所述顏色分析器(116)還被配 置為分析每個潛在標記製作區域(400)的顏色並確定該潛在標記製作區 域是否與標記的預定顏色兼容。
3. 如權利要求1所述的系統，還包括資料庫(122)，該資料庫可操 作地與所述預篩分設備(108)相連接以存儲具有最低均方根誤差的所述 潛在標記製作區域的位置以及對所述至少一個幀的指示。
4. 如權利要求1所述的系統，其中，所述標記製作模塊(114)還包 括序列分析器(120)，該序列分析器被配置為針對在至少預定數目的連 續幀中的同一位置來確定具有最低均方根誤差的潛在標記製作區域。
5. 如權利要求1所述的系統，其中，所述潛在標記製作區域(400) 的繪圖包括多個交叉標識軸(406， 408)的交叉點。
6. 如權利要求1所述的系統，還包括電影拷貝機(128)，該電影拷 貝機可操作地與所述預篩分設備相連接。
7. 如權利要求1所述的系統，還包括掃描設備(102)，該掃描設備 可操作地與所述預篩分設備(108)相連接以將電影拷貝轉換為計算機可 讀形式。
8. 如權利要求1所述的系統，還包括顯示設備，用於顯示指示出潛在標記製作區域(400)的位置的至少一個幀(404)。
9. 一種用於確定電影中的標記位置的方法，包括以下步驟在所述電影的至少一個幀(404)中選擇至少兩個潛在標記製作區域 (400) (302);計算所述至少兩個潛在標記製作區域(400)的每個以及圍繞每個潛 在標記製作區域的區域(401)的均方根誤差(312);以及確定所述至少兩個潛在標記製作區域(400)中的哪一個具有最低均 方根誤差(320)。
10. 如權利要求9所述的方法，其中，所述選擇至少兩個潛在標記制 作區域的步驟還包括以下步驟在至少一個幀上疊加包括標識軸的網格(212); 確定所述網格相對於所述幀的位置；以及將所述潛在標記製作區域的位置選擇為包括所述標識軸的交叉點。
11. 如權利要求10所述的方法，還包括針對在至少預定數目的連續幀中的同一位置來確定具有最低均方根誤差的潛在標記製作區域的步驟(320)。
12. 如權利要求9所述的方法，還包括用標記的預定顏色來浸透所述 至少兩個潛在標記製作區域的步驟(310)。
13. 如權利要求9所述的方法，其中，所述選擇步驟還包括確定所述 至少兩個潛在標記製作區域是否與標記的預定顏色兼容的步驟(306)。
14. 如權利要求10所述的方法，還包括以下步驟利用對所述至少 一個幀的指示來存儲具有最低均方根誤差的所述潛在標記製作區域的位 置。
15. 如權利要求14所述的方法，其中，對所述至少一個幀的指示是 幀號和從所述電影的開始起的時間中的至少一個。
16. 如權利要求9所述的方法，其中，所述選擇至少兩個潛在標記制 作區域還包括基於用於標記所述電影的標記製作設備的標記大小來確定所 述至少兩個潛在標記製作區域的測試塊大小(206)。
17. 如權利要求16所述的方法，其中所述圍繞每個潛在標記製作區 域的區域是3x3網格的塊，每個塊的大小與所述測試塊的大小基本相同(208)。
18. 如權利要求17所述的方法，其中，所述均方根誤差按如下計算均方根誤差=均方根[^1-711)+^2^2)+...+01->^11)...+&11- ymn)V〈每個塊的像素數目*周圍塊的數目>]其中，xl、 x2、...是所述測試塊中的像素；yml、 ym2、...是第m個 周圍塊中的像素，n是每個塊的像素數目，而m是周圍塊的數目。
19. 如權利要求9所述的方法，還包括顯示疊加在所述至少一個幀上 的具有最低均方根誤差的所述潛在標記製作區域以供用戶選擇(216)。
20. —種機器可讀的程序存儲設備，有形地包含可由所述機器運行以 執行用於確定電影中的標記位置的方法步驟的指令程序，所述方法步驟包 括在所述電影的至少一個幀中選擇至少兩個潛在標記製作區域 (302);用標記的預定顏色來浸透所述至少兩個潛在標記製作區域(310); 計算所述至少兩個潛在標記製作區域的每個以及圍繞每個潛在標記制 作區域的區域的均方根誤差(312);以及確定所述至少兩個潛在標記製作區域中的哪一個具有最低均方根誤差 (320)。
全文摘要
一種用於分析和標記電影圖像的系統和方法，用於提供具有魯棒標記的經標記電影，所述魯棒標記在例如未經授權的複製時具有高存留率。本發明提供了通過基於針對不同背景色的標記的可存留性來推薦潛在標記製作位置，從而輔助選擇標記的理想位置以用於標記電影圖像的能力。該系統和方法用於在所述電影的至少一個幀中選擇至少兩個潛在標記製作區域(400)(302)；用標記的預定顏色來浸透該至少兩個潛在標記製作區域(310)；計算該至少兩個潛在標記製作區域(400)的每個以及圍繞每個潛在標記製作區域的區域(401)的均方根誤差(RMSE)(312)；以及確定該至少兩個潛在標記製作區域中的哪一個具有最低均方根誤差(320)，即推薦的標記製作位置。
文檔編號H04N1/32GK101467436SQ200680054993
公開日2009年6月24日 申請日期2006年6月17日 優先權日2006年6月17日
發明者尤瑟夫·沃瑟夫·尼基姆, 愛恩·威茲瑞安尤, 邁克·亞瑟·德恩伯格 申請人:湯姆遜許可證公司