運動圖像編輯設備和方法
2023-09-17 23:20:55 3
專利名稱：運動圖像編輯設備和方法
技術領域：
本發明涉及一種用於編輯多個運動圖像的圖像編輯設備、以及用於控制該圖像編輯設備的方法及程序。
背景技術：
對於視頻信號存在多個不同類型的系統。例如，這些系統包括由國家電視系統委員會(NTS C, national television systemcommittee)禾口逐對亍倒相(PAL, phase alternation by line)所分別制定的模擬電視(TV)廣播用的標準格式、以及電影動畫用的格式。在這些格式中，幀頻彼此不同，因而將一種類型的視頻信號轉換成輸出裝置可利用的、幀頻不同的其它類型的視頻信號(參考日本特開2000-3M453號公報)。另一方面，近年來，與僅可以處理特定格式的視頻信號的傳統的電視機不同，諸如個人計算機(PC)等的輸出裝置可以處理多個格式的運動圖像。此外，PC可以經由網際網路從全球資訊網(WEB)伺服器下載各種類型的格式的運動圖像數據。當能夠處理多個格式的運動圖像的裝置組合各自採用不同格式的多個運動圖像以新創建一個運動圖像時，用戶不得不從多個幀頻中選擇要採用哪個幀頻，由此對用戶施加了較多的工作。此外，對於不熟悉操作該裝置的用戶而言，用戶難以判斷哪個幀頻適合， 因此可能錯誤地進行了選擇。結果，有時不能獲得平滑的運動圖像。
發明內容
根據本發明的方面，一種運動圖像編輯設備，包括分類單元，用於根據運動圖像的幀頻將要組合的多個運動圖像分類成組，其中，分類到同一組的運動圖像的幀頻為同一值的整數倍；第一選擇單元，用於基於屬於各個組的運動圖像的量，從分類得到的組中選擇一個組；第二選擇單元，用於基於針對屬於所選擇的組的運動圖像的各個幀頻的運動圖像的量，從屬於所選擇的組的運動圖像的幀頻中選擇一個幀頻；轉換單元，用於將要組合的多個運動圖像轉換成所述第二選擇單元所選擇的幀頻；以及組合單元，用於組合轉換後的多個運動圖像。根據本發明的另一方面，一種運動圖像編輯方法，包括以下步驟根據運動圖像的幀頻將要組合的多個運動圖像分類成組，其中，分類到同一組的各個運動圖像的幀頻為同一值的整數倍；基於屬於各個組的運動圖像的量，從分類得到的組中選擇一個組；基於針對屬於所選擇的組的運動圖像的各個幀頻的運動圖像的量，從屬於所選擇的組的運動圖像的幀頻中選擇一個幀頻；將要組合的多個運動圖像轉換成所選擇的幀頻；以及組合轉換後的多個運動圖像。根據本發明的方面，當通過組合不同格式的多個運動圖像來創建運動圖像時，可以在不對用戶施加過多工作的情況下設置適合的幀頻。通過以下參考附圖對典型實施例的詳細說明，本發明的其它特徵和方面將變得明
3顯。
包含在說明書中並構成說明書的一部分的附圖示出本發明的典型實施例、特徵和方面，並和說明書一起用來解釋本發明的原理。圖1是示出根據本發明的典型實施例的圖像編輯設備的結構的框圖。圖2是示出根據本發明的典型實施例的圖像編輯設備所進行的操作的流程圖。圖3A和IBB示出根據本發明的典型實施例的運動圖像選擇畫面。圖4是示出根據本發明的典型實施例的圖像編輯設備的操作的流程圖。圖5示出根據本發明的典型實施例的要編輯的運動圖像數據。圖6是示出根據本發明的典型實施例的圖像編輯設備所進行的操作的流程圖。圖7是示出根據本發明的典型實施例的圖像編輯設備所進行的操作的流程圖。圖8是示出根據本發明的典型實施例的圖像編輯設備所進行的操作的流程圖。圖9示出根據本發明的典型實施例的要編輯的運動圖像數據。
具體實施例方式以下將參考附圖來詳細說明本發明的各種典型實施例、特徵和方面。然而，本典型實施例所述的結構元件僅是例子，並且並不意圖限制本發明的範圍。在本典型實施例中，將說明圖像編輯設備通過組合幀頻不同的多個運動圖像數據來創建一個運動圖像數據的情況。根據本典型實施例的圖像編輯設備要混合併組合以下的 NTSC系統、PAL系統、電影系統和其它系統中的運動圖像數據在NTSC系統中，幀頻為每秒 30幀(fps) (29. 97fps)的整數倍；在PAL系統中，幀頻為25fps的整數倍；在電影系統中， 幀頻為Mfps。更具體地，根據本典型實施例，屬於同一系統的運動圖像數據的幀頻為同一值的整數倍，並且屬於不同系統的運動圖像數據的幀頻為不同值的整數倍。例如，除了幀頻為 30fps的運動圖像數據以外，在NTS C系統中還包括幀頻為作為「30」的2倍的60fps的運動圖像數據。另一方面，幀頻為作為「25」的2倍的50fps的運動圖像數據不屬於NTS C系統而屬於PAL系統。首先，參考圖1所示的框圖，將說明本典型實施例的圖像編輯設備的結構。在圖1中，圖像編輯設備100可以由諸如個人計算機(PC)等的信息處理設備來實現。控制單元101是例如用以整體控制圖像編輯設備100的中央處理單元(CPU)。只讀存儲器(ROM) 102存儲無需改變的程序和參數。隨機存取存儲器(RAM) 103暫時存儲從外部裝置供給的程序和數據。外部存儲裝置104包括對圖像編輯設備100固定設置的硬碟和存儲卡、或者從圖像編輯設備100可拆卸的存儲卡。根據本典型實施例的外部存儲裝置104記錄諸如作業系統(0 、各種類型的程序以及圖像數據等的數字數據。特別地，根據本典型實施例的外部存儲裝置104將以下將作為控制單元101執行的計算機可讀程序代碼來說明的運動圖像編輯程序記錄在控制單元101中。與輸入裝置的接口 105接收用戶進行的操作，並且將圖像編輯設備100與用於輸入數據的、諸如指示裝置(滑鼠)和鍵盤等的輸入裝置109相連接。顯示器110顯示圖像編輯設備100所保持的數據和供給至圖像編輯設備100的數據。顯示器接口 106將圖像編輯設備100與顯示器110相連接。網絡接口 107將圖像編輯設備100與諸如網際網路等的網絡線路111相連接。系統總線113可通信地相互連接各單元101、102、103、104、105、106和107。在本典型實施例中，說明了將運動圖像編輯程序記錄在外部存儲裝置104中的例子，然而，可以將本發明應用於將運動圖像編輯程序記錄在ROM 102中或保持在網絡上的情況。在本典型實施例中，將說明由PC來實現圖像編輯設備的例子。此外，本發明同樣可應用於諸如數位照相機等的攝像設備。接著，將參考圖2所示的流程圖來說明本典型實施例的圖像編輯設備100進行的操作。當圖像編輯設備100的控制單元101從外部存儲裝置104讀取OS或運動圖像編輯程序以啟動該OS或運動圖像編輯程序時，可以實現以下操作。在步驟S201中，控制單元101在顯示器110上顯示初始狀態的運動圖像選擇畫面。在步驟S202中，響應於用戶對輸入裝置109進行的操作，控制單元101從外部存儲裝置104中存儲的運動圖像數據中選擇要編輯的運動圖像數據，並且在步驟S203中，設置運動圖像數據的順序。例如，在圖3A所示的運動圖像選擇畫面300中，顯示與要編輯的運動圖像數據相對應的縮略像，其中，將這些縮略像中的第一個縮略像排列在左側。當用戶操作輸入裝置109以移動縮略像301時，響應於該操作，縮略像301的位置改變，並且顯示為如圖3B所示。根據縮略像排列的順序，RAM 103存儲要編輯的運動圖像數據的順序。接著，響應於用戶對輸入裝置109進行的操作，控制單元101開始要編輯的運動圖像數據的編輯處理，並且在步驟S204中判斷是否自動選擇幀頻。響應於用戶對輸入裝置 109進行的操作，控制單元101預先將與是否自動選擇幀頻有關的信息存儲在外部存儲裝置104中。如果不自動選擇幀頻，則外部存儲裝置104存儲與運動圖像編輯軟體相關聯的預定幀頻。當判斷為自動選擇幀頻時(步驟S204中為「是」)，在步驟S205中，控制單元101 進行以下將說明的幀頻的選擇處理。在步驟S206中，控制單元101將要編輯的運動圖像數據的幀頻轉換成在步驟S205中選擇的幀頻。另一方面，當判斷為不自動選擇幀頻時(步驟S204中為「否」)，在步驟S207中， 控制單元101從外部存儲裝置104讀取預定幀頻。在步驟S208中，將要編輯的運動圖像數據的幀頻轉換成在步驟S207中讀取的預定幀頻。在步驟S206和S208中，不對具有與轉換後的幀頻相同的幀頻的運動圖像數據進行幀頻的轉換處理。在步驟S209中，控制單元101在轉換幀頻之後，通過組合要編輯的運動圖像數據來新創建運動圖像數據。在步驟S210中，外部存儲裝置104存儲該新創建的運動圖像數據。接著，將參考圖4所示的流程圖來說明在步驟S 205中本典型實施例的圖像編輯設備100進行幀頻的選擇處理的操作。首先，在步驟S401中，控制單元101從外部存儲裝置104讀取要編輯的運動圖像數據。在步驟S402中，基於各運動圖像數據的幀頻，控制單元101識別各運動圖像數據的系統，以將要編輯的運動圖像數據分類成系統組。在步驟S403中，控制單元101比較這些系統組中包括的運動圖像數據的量，並且選擇運動圖像數據的量最大的系統組。運動圖像數據的量表示運動圖像數據的個數、運動圖像數據的再現時間或幀數。 當運動圖像數據的量最大的系統組存在多個時，控制單元101根據預定規則選擇這些系統組中的任一個系統組。例如，當PAL系統組和NTSC系統組各自所包括的運動圖像數據的量相同時，選擇PAL系統組。在步驟S404中，控制單元101從要編輯的運動圖像數據中提取在步驟S403中選擇的系統組中包括的運動圖像數據。在步驟S405中，控制單元101識別提取出的運動圖像數據的幀頻，並且針對各個幀頻比較運動圖像數據的量，以選擇運動圖像數據的量最大的幀頻。圖5示出根據本典型實施例的要編輯的運動圖像數據的示例。在圖5中，選擇了 11個運動圖像數據進行編輯，並且設置了這11個運動圖像數據的順序。第1個、第3個、第4個、第9個和第10個運動圖像數據屬於幀頻為25fps的PAL 系統。第2個、第5個、第6個和第7個運動圖像數據屬於幀頻為30fps的NTSC系統，並且第8個和第11個運動圖像數據屬於幀頻為60fps的NTSC系統。如果將運動圖像數據的量定義為運動圖像數據的個數，則在這11個運動圖像數據中包括了 6個NTSC系統中的運動圖像數據和5個PAL系統中的運動圖像數據。因而，在步驟S403中，控制單元101選擇NTSC系統。此外，由於NTSC系統包括4個幀頻為30fps 的運動圖像數據和2個幀頻為60fps的運動圖像數據，因此，在步驟S405中，控制單元101 選擇30fps。在步驟S208中，控制單元101進行用於按每5幀對幀頻為25fps的運動圖像數據插入1幀的處理、以及用於將幀頻為60fps的運動圖像數據間隔剔除為一半的處理，以將這些運動圖像數據轉換成幀頻為30fps的運動圖像數據。在本典型實施例中，說明了 NTSC系統和PAL系統這兩類系統組中包括的運動圖像數據。此外，本典型實施例同樣可應用於其它類型的系統組中包括的運動圖像數據。此外，在步驟S405中，控制單元101基於運動圖像數據的量選擇幀頻，然而，控制單元101可以基於其它標準來選擇幀頻。例如，無論運動圖像數據的量如何，都可以選擇最大的幀頻。如圖5所示，當在步驟S403中獲取的系統組中包括的運動圖像數據的幀頻為 30fps和60fps時，控制單元101選擇60fps。此外，在步驟S405中，當運動圖像數據的量最大的幀頻存在多個時，控制單元101可以選擇較大的幀頻。此外，在步驟S 402中，控制單元101基於運動圖像數據的幀頻來識別運動圖像數據的系統。然而，識別方法不限於此，並且控制單元101可以基於表示諸如分配給運動圖像數據的文件的類型等的各種類型的信息的元數據來識別系統。在如上所述的本典型實施例中，首先基於要編輯的運動圖像數據的各系統組中包括的運動圖像數據的量來選擇系統組。此外，基於針對各幀頻的系統組中包括的運動圖像數據的量來選擇幀頻。利用該配置，即使組合幀頻不同的多個運動圖像數據，也可以減少不連續部分以創建平滑的運動圖像數據。
例如，關於圖5所示的要編輯的運動圖像數據，如果在不考慮各系統組中包括的運動圖像數據的個數的情況下、僅通過針對各個幀頻比較運動圖像數據的個數來選擇運動圖像數據的量最大的幀頻，則選擇25fps。當將NTSC系統中的幀頻為30fps或60fps的運動圖像數據轉換成PAL系統中的幀頻為25fps的運動圖像數據時，通常進行用於對幀進行間隔剔除的處理。例如，當幀頻為 30fps時，按每6幀間隔剔除1幀。當幀頻為60fps時，將幀間隔剔除為一半，並且進一步按每6幀間隔剔除1幀。如上所述，當將幀頻從NTSC系統轉換成PAL系統時，由於生成了運動圖像數據的幀不是按均勻間隔布置的部分，因此運動圖像數據無法平滑地連續。因此，不能獲得平滑的視頻。此外，當將幀頻從PAL系統轉換成NTSC系統時，由於同樣生成了運動圖像數據的幀不是按等間隔布置的部分，因此運動圖像數據無法平滑地連續。因此，如上所述，同樣不能獲得平滑的視頻。在第二典型實施例中，將說明基於關於與運動圖像數據相關聯的屬性的信息來選擇幀頻的情況。在以下說明中，將不重複說明與第一典型實施例中的結構相同的結構，並且將詳細說明本典型實施例特有的結構。在本典型實施例中，作為屬性信息，將說明表示運動圖像數據的重要性的等級信息(ratinginformation)作為例子，然而，本典型實施例可以同樣應用於運動圖像數據的圖像大小及其記錄率。參考圖6所示的流程圖，將說明在步驟S205中根據本典型實施例的圖像編輯設備 100對幀頻進行選擇處理的操作。在步驟S601中，控制單元101從外部存儲裝置104讀取要編輯的運動圖像數據， 並且在步驟S602中，進行以下將說明的用於針對包括運動圖像數據的各系統組計算第一基準量的處理。在步驟S603中，控制單元101針對各個系統組比較第一基準量，並且選擇第一基準量最大的系統組，然後生成所選擇的系統組中包括的運動圖像數據的列表，將該列表存儲在RAM 103中。當多個系統組具有最大的第一基準量時，控制單元101根據預定規則識別這些系統組中的任一個系統組。例如，控制單元101按NTSC系統、PAL系統、電影系統和其它系統的順序選擇系統組。接著，在步驟S604中，控制單元101對與該列表相關聯的運動圖像數據進行以下將說明的用於計算運動圖像數據的第二基準量的處理。在步驟S605中，控制單元101針對各個幀頻比較第二基準量，並且選擇第二基準量最大的幀頻。當多個幀頻具有最大的第二基準量時，選擇較大的幀頻。接著，參考圖7所示的流程圖，將說明在步驟S602中根據本典型實施例的圖像編輯設備100進行用於計算第一基準量的處理的操作。在步驟S701中，控制單元101從外部存儲裝置104讀取要編輯的運動圖像數據中的一個運動圖像數據，並對其進行分析，並且基於該運動圖像數據的幀頻判斷其系統的類型。在步驟S702中，控制單元101讀取與該運動圖像數據相關聯的等級信息，並且將該等級信息保持為變量「η」。在步驟S703中，控制單元101將變量「η」代入等式「m = η/3」中以計算加權係數「m」。將本典型實施例中的等級信息定義為整數1、2、3、4和5，並且當等級信息沒有與該運動圖像數據相關聯時，控制單元101保持「3」作為變量「η」的初始值。此外，用於計算加權係數「m」的等式不限於以上所述的等式。在步驟S 704中，控制單元101將與該運動圖像數據相關聯的系統和加權係數「m」保持在RAM103中。在步驟S705中，控制單元101判斷是否已經對所有的運動圖像數據進行了處理， 並且對其餘的運動圖像數據重複進行上述處理。當已經對所有的運動圖像數據進行了處理時(步驟S705中為「是」)，在步驟S706中，控制單元101針對各個系統組計算加權係數 「m」的總和作為第一基準量。接著，參考圖8所示的流程圖，將說明在步驟S604中根據本典型實施例的圖像編輯設備100進行用於針對各幀頻計算運動圖像數據的加權係數的處理的操作。首先，在步驟S801中，控制單元101從外部存儲裝置104讀取列表上的運動圖像數據中的一個運動圖像數據並分析該運動圖像數據，從外部存儲裝置104讀取與該運動圖像數據相關聯的等級信息，並且保持該等級信息作為變量「η」。在步驟S802中，控制單元 101將變量「η」代入等式「m = η/3」中以計算加權係數「m」。用於計算加權係數「m」的等式不限於此。在步驟S803中，控制單元101將與該運動圖像數據相關聯的幀頻和加權係數「m，， 保持在RAM 103中。在步驟S804中，控制單元101判斷是否對列表上的所有運動圖像數據進行了處理，並且對列表上的其餘運動圖像數據重複進行上述處理。當控制單元101已經對列表上的所有運動圖像數據進行了處理時(步驟S804中為「是」)，在步驟S805中，控制單元101針對各幀頻計算加權係數的總和作為第二基準量。圖9示出根據本典型實施例的要編輯的運動圖像數據的一個例子。在圖9中，選擇了 14個運動圖像數據進行編輯，並且設置了這14個運動圖像數據的順序。第1個、第4 個、第9個、第10個和第12個運動圖像數據屬於幀頻為25fps的整數倍的PAL系統。第2 個、第6個、第13個和第14個運動圖像數據屬於幀頻為30fps的整數倍的NTSC系統。第 3個、第5個和第7個運動圖像數據屬於幀頻為Mfps的電影系統。第8個和第11個運動圖像數據屬於其它系統。因而，在這14個運動圖像數據中，4個運動圖像數據屬於NTSC系統，5個運動圖像數據屬於PAL系統，3個運動圖像數據屬於電影系統，並且2個運動圖像數據屬於其它系統。 此外，根據本典型實施例的運動圖像數據包括與運動圖像數據相關聯的並且在星號的右側示出的等級信息。例如，第1個運動圖像具有「2」，第2個運動圖像具有「3」，並且第3個運動圖像具有「5」。因此，PAL系統的第一基準量為13/3，NTSC系統的第一基準量為16/3，電影系統的第一基準量為13/3，並且其它系統的第一基準量為5/3。因而，NTSC系統的第一基準量最大。NTSC系統的第二基準量對於30fps為8/3，並且對於120fps為8/3。由於這兩個幀頻的第二基準量相同，因此控制單元101選擇作為較大的值的120fps。根據本典型實施例，將加權係數應用於第一基準量和第二基準量這兩者，然而，可以將加權係數應用於第一基準量和第二基準量中的一個。如上所述，根據本典型實施例，還基於與運動圖像數據相關聯的屬性信息來選擇幀頻。因此，例如，由於幀頻適合於對於用戶而言重要的運動圖像數據，因此可以平滑地再現與該重要的運動圖像數據相對應的部分。
8
還可以通過讀出並執行存儲裝置上所記錄的程序以進行上述實施例的功能的系統或設備的計算機(或者CPU或MPU等的裝置)以及通過以下方法來實現本發明的方面， 其中，由系統或設備的計算機通過例如讀出並執行存儲裝置上所記錄的程序以進行上述實施例的功能，來進行該方法的步驟。為了該目的，例如，經由網絡或者從用作存儲裝置的各種類型的記錄介質(例如，計算機可讀介質)向計算機提供該程序。在這種情況下，系統或設備、以及存儲有程序的存儲介質包括於本發明的範圍內。儘管已經參考典型實施例說明了本發明，但是應該理解，本發明不限於所公開的典型實施例。所附權利要求書的範圍符合最寬的解釋，以包含所有這類修改、等同結構和功能。
權利要求
1.一種運動圖像編輯設備，包括分類單元，用於根據運動圖像的幀頻將要組合的多個運動圖像分類成組，其中，分類到同一組的運動圖像的幀頻為同一值的整數倍；第一選擇單元，用於基於屬於各個組的運動圖像的量，從分類得到的組中選擇一個組；第二選擇單元，用於基於針對屬於所選擇的組的運動圖像的各個幀頻的運動圖像的量，從屬於所選擇的組的運動圖像的幀頻中選擇一個幀頻；轉換單元，用於將要組合的多個運動圖像轉換成所述第二選擇單元所選擇的幀頻；以及組合單元，用於組合轉換後的多個運動圖像。
2.根據權利要求1所述的運動圖像編輯設備，其特徵在於，所述運動圖像的量表示運動圖像的個數、運動圖像的再現時間和運動圖像的幀數至少之一。
3.根據權利要求1所述的運動圖像編輯設備，其特徵在於，所述第二選擇單元還基於幀頻的大小來選擇幀頻。
4.根據權利要求1所述的運動圖像編輯設備，其特徵在於，所述第二選擇單元還基於與運動圖像有關的屬性信息來選擇幀頻。
5.根據權利要求4所述的運動圖像編輯設備，其特徵在於，所述屬性信息包括等級、圖像大小和記錄率至少之一。
6.根據權利要求1所述的運動圖像編輯設備，其特徵在於，至少存在針對NTSC系統、 PAL系統和電影系統之一的組。
7.—種運動圖像編輯方法，包括以下步驟根據運動圖像的幀頻將要組合的多個運動圖像分類成組，其中，分類到同一組的各個運動圖像的幀頻為同一值的整數倍；基於屬於各個組的運動圖像的量，從分類得到的組中選擇一個組； 基於針對屬於所選擇的組的運動圖像的各個幀頻的運動圖像的量，從屬於所選擇的組的運動圖像的幀頻中選擇一個幀頻；將要組合的多個運動圖像轉換成所選擇的幀頻；以及組合轉換後的多個運動圖像。
全文摘要
本發明提供一種運動圖像編輯設備和方法。該運動圖像編輯設備在用戶新創建運動圖像時，自動選擇適合的幀頻以提高通過組合幀頻不同的多個運動圖像所生成的新運動圖像的圖像質量，從而防止用戶進行過多的選擇工作。本發明的圖像編輯設備基於幀頻來將要組合的多個運動圖像分類成組，比較各個組中包括的運動圖像的量，並且選擇運動圖像的量最大的組。此外，該圖像編輯設備比較所選擇的組中包括的針對各個幀頻的運動圖像的量，以選擇運動圖像的量最大的幀頻。該圖像編輯設備將要組合的運動圖像轉換成所選擇的幀頻，然後組合轉換後的多個運動圖像。
文檔編號H04N7/01GK102164264SQ20111004169
公開日2011年8月24日 申請日期2011年2月21日 優先權日2010年2月19日
發明者三河拓馬 申請人:佳能株式會社