攝像設備和方法、圖像再現設備和方法、程序和記錄介質的製作方法
2023-05-19 20:39:31 3
攝像設備和方法、圖像再現設備和方法、程序和記錄介質的製作方法
【專利摘要】本發明提供了一種設備。該設備包括硬體處理器和耦接至該處理器的存儲介質。該存儲介質存儲指令，當指令由處理器執行時，使得設備：生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號；並且將圖像數據和運動信號存儲到存儲介質中。
【專利說明】攝像設備和方法、圖像再現設備和方法、程序和記錄介質
【技術領域】
[0001]本技術涉及攝像設備以及方法、圖像再現設備以及方法、程序以及記錄介質，具體地涉及使得能夠更加自由地執行是否再現已記錄的圖像的決定的攝像設備以及方法、圖像再現設備以及方法、程序以及記錄介質。
【背景技術】
[0002]傳統上，使用用戶手中的視頻攝像按鈕對使用攝錄像機的視頻記錄進行控制。
[0003]可以使用攝錄像機、個人計算機等執行已記錄的視頻的再現。在此，例如，當存在不必要再現的場景時，用戶只是連續地觀看視頻或用戶使用快進按鈕或快進圖標來主動地跳過該場景。
[0004]即使是在所期望的主題的攝像已經結束時，由於用戶忘記關閉記錄(REC)按鈕，連續地記錄的場景可以被認為是不必要的場景的示例。此外，包括意外的大的相機抖動的場景、相機的方向突然改變的場景、包括可歸因於用戶的行走或相機受到的撞擊而造成的大的振動的場景等可以被認為是不必要的場景的示例。
[0005]作為一種防止不必要的場景被記錄的方法，已經提出了一種用於檢測用戶的行走的加速度並且如果用戶停止行走則使得能夠開始記錄的技術(例如，參照專利文獻I)。
[0006]另外，已經提出了一種用於在受到抖動之後預定時間阻止執行記錄的技術(例如，參照專利文獻2)。
[0007]引用列表
[0008]專利文獻
[0009]PTLl:日本未審查專利申請公布N0.2009-267792
[0010]PTL2:日本未審查專利申請公布N0.06-237463
【發明內容】
[0011]技術問題
[0012]然而，即使在使用專利文獻I和專利文獻2中所公開的技術時，也存在如下面所描述的問題。
[0013]換而言之，專利文獻I和專利文獻2中公開的技術可以被稱為這樣的配置:當執行攝像時，確定沒有必要再現的場景，使得不執行記錄本身。當使用這樣的配置時，存在問題在於:存在用戶想要攝像的場景可能被拒絕的可能性。
[0014]最近，已經進行了節省設備的電力以及增加記錄介質的容量的嘗試，並且記錄數據的成本已經逐年地降低。在這樣的情況下，成本負擔幾乎與之前在執行攝像時確定不必要的場景然後不記錄該場景的情況以及在執行再現時首先記錄不必要的場景然後剪切該場景的情況下二者的成本負擔相同。
[0015]另外，當執行攝像時，根據條件或用戶所準許的值，在指定沒有必要再現的場景時所使用的參考(例如，用來判定是否跳過場景的振動量)不同。然而，非常難以在執行攝像之前確定參考。
[0016]此外，存在問題在於:除了行走以及受到撞擊的情況之外，傳統的方法不能響應於場景的自動排除。
[0017]本實施例提供了一種設備。該設備包括硬體處理器和耦接至該處理器的存儲介質。該存儲介質存儲指令，當指令由處理器執行時，使得該設備生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號，並且將圖像數據和運動信號存儲到存儲介質中。
[0018]本實施例提供了一種再現設備。該再現設備包括接收器，該接收器被配置成接收記錄的圖像數據和運動信號，該運動信號具有表示在記錄圖像信息期間圖像記錄裝置在對應的時間處的移動。再現設備還包括硬體處理器和耦接至該處理器的存儲介質。該存儲介質存儲指令，當指令由處理器執行時，使得該設備:分析運動信號值；基於運動信號值來指定圖像數據中的不用於顯示的至少一部分；以及生成由其中將圖像數據中的不用於顯示的至少一部分移除的記錄的圖像數據所構成的經修改的圖像數據。
[0019]本實施例提供了一種由處理裝置執行的方法。該方法包括由處理設備生成運動信號的步驟，該運動信號表示在生成圖像數據期間圖像記錄裝置隨著時間的移動。該方法還包括將圖像數據和運動信號存儲在存儲介質中的步驟。
[0020]本實施例還提供一種非暫態計算機可讀介質。該非暫態計算機可讀介質存儲指令，當指令由計算機執行時，使得計算機:生成運動信號，該運動信號表示在生成圖像數據期間圖像記錄設備隨著時間的移動；並且將圖像數據和運動信號存儲到存儲介質中。
[0021]本實施例還提供一種由再現裝置再現圖像的方法。該方法包括以下步驟:接收記錄的圖像數據；以及接收表示圖像記錄裝置在記錄圖像數據期間的移動的運動信號。該方法還包括以下步驟:由再現裝置分析運動信號；基於該運動信號指定圖像數據中的不用於顯示的至少一部分；以及生成由其中將圖像數據中的不用於顯示的至少一部分移除的記錄的圖像數據所構成的經修改的圖像數據。
[0022]本實施例還提供了一種非暫態計算機可讀介質。該非暫態計算機可讀介質存儲指令，當指令由計算機執行時，使得計算機:接收記錄的圖像數據；接收表示在記錄圖像數據期間圖像記錄裝置的移動的運動信號；由計算機分析運動信號；基於該運動信號指定圖像數據中的不用於顯示的至少一部分；以及生成由其中將圖像數據中的不用於顯示的至少一部分移除的記錄的圖像數據所構成的經修改圖像數據。
【專利附圖】
【附圖說明】
[0023]圖1是示出了根據一個實施例應用本技術的攝像設備的配置的示例的框圖。
[0024]圖2是示出了根據一個實施例應用本技術的再現設備的配置的示例的框圖。
[0025]圖3是示出了從陀螺儀傳感器中輸出的感測信號的波形的示例的曲線圖。
[0026]圖4是示出了運動信號的示例的視圖。
[0027]圖5是示出了運動信號的另一示例的視圖。
[0028]圖6是示出了運動信號的又一示例的視圖。
[0029]圖7是示出了運動信號的再一示例的視圖。
[0030]圖8是示出了運動信號的再一示例的視圖。[0031]圖9是示出了運動信號的再一示例的視圖。
[0032]圖10是示出了運動信號的再一示例的視圖。
[0033]圖11是示出了運動信號的再一示例的視圖。
[0034]圖12是示出了記錄圖像數據和運動數據的方法的示例的視圖。
[0035]圖13是示出了記錄圖像數據和運動數據的方法的另一示例的視圖。
[0036]圖14是示出了記錄圖像數據和運動數據的方法的再一示例的視圖。
[0037]圖15是示出了記錄處理的示例的流程圖。
[0038]圖16是示出了再現處理的示例的流程圖。
[0039]圖17是示出了場景跳過控制處理的示例的流程圖。
[0040]圖18是示出了攝像設備的外觀的示例的視圖。
[0041]圖19是示出了個人計算機的配置的示例的框圖。
【具體實施方式】
[0042]在下文中，將參照附圖對在此公開的技術的實施例進行描述。
[0043]圖1是示出了根據一個實施例的應用本技術的攝像設備的配置的示例的框圖。攝像設備10被配置為例如攝錄像機(camcorder)。
[0044]圖中示出的攝像設備10包括輸入單元21、透鏡致動器22、陀螺儀傳感器23、成像單元24、相機抖動校正操作單元25、運動量計算單元26、編碼器27、記錄單元28以及顯示單元29。
[0045]輸入單元21接收例如由用戶操縱的輸入。例如，由用戶輸入操縱如開始攝像、終止攝像、放大、縮小等。
[0046]當在視頻的攝像期間施加振動如相機抖動時，透鏡致動器22由此通過將透鏡移動至所施加的振動量的程度來實現抵消可歸因于振動的影響的功能(相機抖動校正功能)。透鏡致動器22在攝像期間基於從陀螺儀傳感器23輸出的感測信號來檢測振動如相機抖動，隨後將對陀螺儀傳感器23進行描述。
[0047]陀螺儀傳感器23檢測並且輸出兩個軸或三個軸的角速度。也就是說，陀螺儀傳感器23感測例如俯仰方向、偏航方向、滾轉方向(roll direction)上的旋轉,並且檢測攝像設備10的振動。從陀螺儀傳感器輸出的感測信號被輸出至透鏡致動器22和運動量計算單元26。
[0048]成像單元24包括傳感器等，該傳感器包括光電轉換元件,例如，電荷稱合器件(CXD)傳感器、互補金屬氧化物半導體(CMOS)傳感器等，並且將與經由攝像設備10的透鏡的入射光相對應的信號作為圖像信號輸出。
[0049]相機抖動校正操作單元25基於由陀螺儀傳感器23提供的感測信號生成用於表示相機抖動的尺寸和方向的信號，並且將所生成的信號輸出至透鏡致動器22。
[0050]運動量計算單元26基於由陀螺儀傳感器23提供的感測信號來生成運動信號，該運動信號是表示在生成圖像數據期間攝像設備10隨著時間的運動量的信號。同時，隨後將詳細地對運動信號進行描述。由運動量計算單元26生成的運動信號與隨後將要描述的編碼器27的輸出一起被輸出至記錄單元28。在此，運動信號以與從編碼器27中輸出的圖像數據被再現的再生時間相關聯的方式輸出。[0051 ] 編碼器27使用預定編碼方法如動態圖像專家組(MPEG)方法等對由成像單元24提供的圖像信號進行編碼。從編碼器27中輸出的編碼後的圖像數據與由運動量計算單元26生成的運動信號一起被輸出至記錄單元28。
[0052]記錄單元28將圖像數據和運動信號記錄在記錄介質如硬碟驅動器(HDD)、半導體存儲卡等中。在此，如上面所描述的，運動信號以與圖像數據被再現的再生時間相關聯的方式被記錄。同時，使用如下任意方法將運動信號轉換成數字數據，在這些方法中，例如，運動信號在其被記錄時進行編碼，並且被記錄為運動數據。
[0053]顯示單元29包括顯示器，例如液晶顯示器(IXD)等，並且基於從成像單元24中輸出的圖像信號顯示圖像。
[0054]圖2是示出了根據一個實施例的、與圖1中的攝像設備10相對應並且應用本技術的再現設備的配置的示例的框圖。再現設備50包括，例如HDD記錄器、個人計算機等。
[0055]圖中示出的再現設備50包括輸入單元61、驅動器62、操作解碼器63、顯示單元64和高速緩衝存儲器65。
[0056]輸入單元61接收例如由用戶操縱的輸入。例如，由用戶輸入操縱如與再現的開始、再現的結束、或場景跳過相關的指令。
[0057]驅動器62配備有記錄介質，使用攝像設備10的記錄單元28將圖像數據和運動數據記錄在該記錄介質中。驅動器62基於例如經由輸入單元61所輸入的用戶的操縱從記錄介質中讀取圖像數據和運動數據。將從記錄介質中讀取的圖像數據和運動數據提供至操作解碼器63。
[0058]操作解碼器63在接收了來自驅動器62的圖像數據和運動數據之後，對例如從記錄介質中讀取的圖像數據和運動數據進行解碼，並且將通過使用高速緩衝存儲器65執行預定操作處理而獲得的圖像信號輸出至顯示單元64。
[0059]操作解碼器63基於例如通過對運動數據進行解碼而獲得的運動信號來獲取和分析表示攝錄像機的運動(相機抖動、振動、透鏡方向上的大的變化等)的信息，並且基於該信息控制場景跳過。
[0060]例如，操作解碼器63將通過對編碼後的圖像數據進行解碼而獲得的圖像數據存儲在高速緩衝存儲器65中。同時，操作解碼器63參照表示攝錄像機的運動的視頻的信息來指定待跳過的畫面，然後對排除了所指定的畫面的視頻的一系列圖像數據進行重新配置。之後，操作解碼器63生成與重新配置後的圖像數據相對應的圖像信號並且將該圖像信號輸出至顯示單元64。在此，操作解碼器63基於例如經由輸入單元61輸入的用戶的操縱確定待跳過的畫面的運動範圍或運動時段。
[0061]顯示單元64包括顯示器，例如IXD等，並且顯示與由操作解碼器63提供的圖像信號相對應的圖像。
[0062]接下來，將對上面所描述的運動信號進行描述。圖3是曲線圖，在曲線圖中其橫軸表示時間以及其縱軸表示信號電平，並且示出了從陀螺儀傳感器23中輸出的感測信號的波形的示例。同時，這個示例示出了在偏航方向上陀螺儀傳感器23的旋轉感測信號的波形的示例。
[0063]如圖3所示的從陀螺儀傳感器23中輸出的感測信號可以在沒有變化的情況下被用作運動信號。[0064]圖4是示出了由運動量計算單元26生成的運動信號的另一示例的視圖。該圖是一個曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號電平，並且示出了通過執行閾值判定對圖3所示的信號進行二值化而獲得的信號的波形的示例。在該示例中，圖3中的信號被二值化，使得，例如，當電平超出距DC中心值土 100數字時，判定超過閾值，當輸出大於閾值的感測信號時，輸出I，否則輸出O。
[0065]如上面所描述的，可以通過對從陀螺儀傳感器23中輸出的感測信號進行二值化來簡單地識別，例如攝錄像機的運動較大的視頻部分和運動較小的視頻部分。
[0066]如圖4所示，通過使用閾值判定對從陀螺儀傳感器23中輸出的感測信號進行二值化所獲得的信號可以被用作運動信號。
[0067]圖5是示出了由運動量計算單元26生成的運動信號的又一示例的視圖。該圖是曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號電平，並且示出了通過對圖4所示的信號執行延遲效應處理所獲得的信號的波形的示例。在此，該延遲效應處理是例如如下處理:執行該處理，使得將圖3所示的信號轉化為O或I之後在預定的時間內不允許進行後續的轉化。
[0068]例如，當基於圖4所示的信號執行場景跳過控制時，必要的是，只要閾值被超過，則通過精細循環(fine cycle)重複地判定是否執行再現，使得當執行再現時工作量較大。當如圖5所示執行延遲效應處理時，則沒有必要通過上面所描述的精細循環來重複判定是否執行再現。
[0069]如圖5所示，通過使用閾值判定對從陀螺儀傳感器23中輸出的感測信號進行二值化並且進一步執行延遲效應處理所獲得的信號可以被用作運動信號。
[0070]圖6是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。該圖是曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號電平，並且示出了通過使用具有兩個閾值的階梯式判定對圖3所示的信號進行三值化並且進一步通過執行延遲效應處理所獲得的信號的波形的示例。
[0071]例如，當基於圖6所示的信號執行場景跳過控制時，則在執行再現時判定沒有必要再現的運動的尺寸可以通過提供多個閾值從多個尺寸中選出。
[0072]如圖6所示，通過使用具有多個閾值的階梯式判定對從陀螺儀傳感器23輸出的感測信號進行多值化並且進一步通過執行延遲效應處理所獲得的信號可以被用作運動信號。
[0073]圖7是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。該圖是曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號電平，並且示出了通過對使用具有兩個閾值的階梯式判定對圖3所示的信號進行三值化所獲得的信號執行低通濾波處理而獲得的信號的波形的示例。也就是說，替代如圖6所示的情況的執行延遲效應處理，對信號執行低通濾波處理。
[0074]如圖7所示，通過使用具有多個閾值的階梯式判定對從陀螺儀傳感器23輸出的感測信號進行多值化並且進一步通過執行低通濾波處理而獲得的信號可以被用作運動信號。
[0075]圖8是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。在該示例的情況下，示出了通過關於從陀螺儀傳感器23輸出的感測信號計算每個預定時間的預定頻率範圍內的功率譜的面積值並且將該功率譜的面積值投影到時間軸上而獲得的波形的示例。也就是說，圖8的橫軸表示時間，其縱軸表示功率譜的面積。[0076]對於圖8所示的運動信號，可以排除例如周期運動、突發劇烈運動等的影響。也就是說，由於在視頻中不能確定是否發生相機抖動的部分處的信號電平不高，因此僅可以識別清晰的相機抖動或撞擊。該信號可以被用作運動信號。
[0077]圖9是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。在該示例的情況下，示出了如下曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號的電平，並且示出了通過使用閾值判定對圖8所示的信號進行二值化而獲得的信號的波形的示例。該信號可以被用作運動信號。
[0078]圖10是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。在該示例的情況下，示出了如下曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號的電平，並且示出了通過對圖9所示的信號執行延遲效應處理所獲得的信號的波形的示例。該信號可以被用作運動信號。
[0079]圖11是示出了由運動量計算單元26生成的運動信號的再一示例的視圖。在該示例的情況下，示出了一個曲線圖，在該曲線圖中其橫軸表示時間以及其縱軸表示信號的電平，並且示出了對通過使用具有兩個閾值的階梯式判定對圖8所示的信號進行三值化所獲得的信號執行低通濾波處理而獲得的信號的波形的示例。該信號可以被用作運動信號。
[0080]接下來，將對記錄圖像數據和運動數據的方法進行描述。
[0081]圖12是示出了將運動信號的波形與圖像數據的時間線同步並且記錄運動信號的波形的方法的視圖。例如，與參照圖3和圖8所描述的情況一樣，同步的波形111顯示了運動信號的波形。
[0082]記錄單元28通過例如對波形111進行採樣和量化將運動信號的波形與圖像數據的時間線同步，並且記錄該波形。同時，通過量化所獲得的每個值與表示時間線上的時間的數據一起被提交(filed)，然後被記錄，使得運動數據和圖像數據一起被記錄。
[0083]因此，例如，由再現設備50的操作解碼器63再現運動數據，使得如參照圖3和圖8所描述的情況一樣，運動信號的波形可以被再現。在該情況下，例如，在再現圖像之前，用戶可以查看波形111並且執行編輯例如在時間線上指定待跳過的場景。
[0084]圖13是示出了記錄圖像數據和運動數據的方法的另一示例的視圖。該圖示出了其中基於例如如圖4至圖7以及圖9至圖11所示的被多值化(包括二值化)的運動信號來提取運動尺寸作為狀態，並且記錄關於視頻數據的每個畫面的狀態的情況的示例。在這種情況下，例如假定運動信號被三值化，以及運動尺寸被表示為相機抖動、撞擊等的「強度」，並且設置第一強度的狀態至第三強度的狀態。
[0085]如圖13所示，使用寫在時間線上的值O至值3來顯示每個畫面的狀態。可以通過例如將狀態存儲到包含在視頻數據中的數據包的報頭中來記錄該狀態。
[0086]另外，如圖所示，如果在時間線上顯示基於畫面的狀態的顏色編碼(在此，陰影線)的條，則可以在一個視圖中識別視頻的較大的相機抖動(較大的運動)間隔或較小的相機抖動間隔。
[0087]圖14是示出了記錄圖像數據和運動數據的方法的另一示例的視圖。圖14示出了如下這樣的情況的示例:基於例如如圖4至圖7以及圖9至圖11所示的被多值化(包括二值化)的運動信號來提取運動尺寸的變化，並且運動尺寸的變化被記錄為與視頻數據的時間線相關聯的標記。在這種情況下，例如在提交了如圖14的右下方所示的記錄數據121之後，通過記錄數據121來將運動數據和圖像數據一起存儲，在記錄數據121中時間戳與表示運動尺寸的變化的信息的「狀態」相關聯。
[0088]根據圖14中的數據121，示出了如下事實:在時間戳「00:00」處運動尺寸為「0」，以及在時間戳「01:05」處運動尺寸從「O」變成「I」(「0—1」)。同樣地示出了如下事實:在時間戳「02:40」處運動尺寸從「I」變成「2」，在時間戳「03:00」處運動尺寸從「2」變成「 3 」，以及在時間戳「04:12 」處運動尺寸從「 3 」變成「 2 」……。
[0089]例如，可以通過使用基於運動尺寸的變化的標誌來指定場景跳過起始點和場景跳過結束點來控制待要跳過的場景。當如上面所描述的記錄標記後的數據時，例如，可以容易地識別當執行再現時運動的變化點並且可以簡單地識別出場景跳過起始點和場景跳過結束點。另外，與例如記錄關於每個畫面的狀態的情況相比，記錄的工作量可以被限制到較低。 [0090]以這種方式，記錄了圖像數據和運動數據。
[0091]接下來，將參照圖15的流程圖對由圖1中的攝像設備10執行的記錄處理的示例進行描述。
[0092]在步驟S21中，使用攝像設備10開始攝像。
[0093]在步驟S22中，運動量計算單元26獲得由陀螺儀傳感器23提供的感測信號。
[0094]在步驟S23中，運動量計算單元26生成運動信號。此時,例如,如上面參照圖3至圖11所描述的生成運動信號。
[0095]在步驟S24中，編碼器27使用預定編碼方法如MPEG等對由成像單元24提供的圖像信號進行編碼。
[0096]同時，如上面所描述的，在步驟S23的處理中生成的運動信號與在再現步驟S24的處理中編碼的圖像數據的情況下的再生時間(也就是說，時間線)相關聯。
[0097]在步驟S25中，記錄單元28通過對在步驟S23的處理中生成的與時間線相關聯的運動信號進行數位化來生成運動數據。
[0098]在步驟S26中，記錄單元28將在步驟S24中編碼的圖像數據以及在步驟S25中生成的運動數據記錄到記錄介質中。例如，生成包括圖像數據和運動數據的數據文件。
[0099]在步驟S27中，判定是否指示了終止攝像。例如，當使用輸入單元21執行預定的攝像終止操縱時，則判定指示了終止攝像。
[0100]在步驟S27中，當判定沒有指示終止攝像時，則處理返回至步驟S22。
[0101]同時，在步驟S27中，當確定指示了終止攝像時，則終止記錄處理。
[0102]以這種方式，執行了記錄處理。
[0103]接下來，將參照圖16中的流程圖對由圖2中的再現設備50所執行的再現處理的示例進行描述。同時，當指示再現視頻時，由再現設備50執行該處理，並且在執行該處理之前，將包括作為上面參照圖15所描述的記錄處理的結果的已記錄的數據的記錄介質安裝在再現設備50的驅動器62上。
[0104]在步驟S41中，從安裝在驅動器42上的記錄介質中讀取圖像數據和運動數據。
[0105]在步驟S42中，操作解碼器63對在步驟S41的處理中所讀取的圖像數據和運動數據進行解碼。
[0106]在步驟S43中，高速緩衝存儲器65存儲在步驟S42的處理中被解碼然後獲得的圖像數據。
[0107]在步驟S44中，操作解碼器63執行場景跳過控制處理，隨後將參照圖17中的流程圖對場景跳過控制處理進行描述。因此，例如，指定待跳過的場景的畫面，然後對圖像數據進行重新配置。
[0108]在步驟S45中，操作解碼器63生成與根據步驟S44中的處理被重新配置的圖像數據相對應的圖像信號。
[0109]在步驟S46中，顯示單元64顯示與在步驟S45的處理中所生成的圖像信號相對應的圖像。
[0110]以這種方式，執行了再現處理。
[0111]接下來，將參照圖17中的流程圖對圖16中的步驟S44中的場景跳過控制處理的示例進行詳細地描述。
[0112]在步驟S61中，操作解碼器63對基於運動數據所獲得的運動信號進行分析。因此，例如，獲得了表示攝錄像機的運動的視頻的信息(相機抖動、撞擊、透鏡方向上的大的變化等)。
[0113]在步驟S62中，操作解碼器63基於步驟S61中的分析結果指定待跳過的畫面。
[0114]在此，用戶通過在顯示單元64上顯示如圖12所示的時間線和運動信號來指定待跳過的場景，使得對場景進行配置的畫面被指定為待跳過的畫面。
[0115]另外，例如當如圖13所示對每個畫面的狀態進行記錄時，預設狀態的畫面被指定為待跳過的畫面。例如，當做出設置使得待跳過的畫面的判定參考等於或大於第一狀態時，第一狀態至第三狀態的畫面被確定為待跳過的畫面。另外，例如當做出設置使得待跳過的畫面的判定參考等於或大於第二狀態時，第二狀態至第三狀態的畫面被確定為待跳過的畫面。此外，例如，當做出設置使得待跳過的畫面的判定參考等於或大於第三狀態時，則第三狀態的畫面被確定為待跳過的畫面。
[0116]另外，例如當如圖14所示記錄標記後的運動數據時，由用戶指定的間隔內的畫面基於標誌被指定為待跳過的畫面。
[0117]在步驟S63中，操作解碼器63對排除了步驟S62的處理中所指定的畫面的、視頻的一系列圖像數據進行重新配置。因此，跳過了包括如相機抖動、撞擊、透鏡方向上的大的變化等的場景並且再現視頻。
[0118]以這種方式，執行了場景跳過控制處理。
[0119]如上面所描述的，根據本技術，當執行攝像(記錄)時，與時間線相關聯地記錄運動數據，以及當執行再現時，基於運動數據跳過預定場景。
[0120]常規地，例如已經提出了如下技術:一種技術用於檢測用戶的行走加速度並且如果用戶停止行走使得能夠開始記錄，以及一種技術用於當受到撞擊時，在此之後的預定時間內阻止執行記錄。
[0121]然而，換而言之，這些技術可以被稱為如下配置:當執行拍攝時，確定不必要再現的場景，使得不執行記錄本身。當使用這樣的配置時，存在的問題在於:存在用戶想要攝像的場景可能被拒絕的可能性。
[0122]另外，最近，已經進行了節省設備的電力以及增加記錄介質的容量的嘗試，並且記錄數據的成本已經逐年地降低。在這樣的情況下，成本負擔幾乎與之前在執行攝像時確定不必要的場景然後不記錄該場景的情況以及在執行再現時首先記錄不必要的場景然後剪切該場景的情況下二者的成本負擔相同。
[0123]另外，當執行攝像時，根據條件或用戶所準許的值，在指定沒有必要再現的場景時所使用的參考(例如，用來判定是否跳過場景的振動量)不同。然而，非常難以在執行攝像之前確定參考。
[0124]另一方面，根據本技術，在執行攝像時記錄所有的場景並且在執行再現時指定不必要的場景，使得例如用戶想要攝像的場景沒有被拒絕。
[0125]另外，可以基於例如與時間線相關聯的狀態指定待跳過的場景，使得可以靈活地響應於根據執行拍攝時的條件和用戶所允許的值而不同的參考。
[0126]另外，即使在由於較大的相機抖動而通常被認為是不必要再現的場景的情況下，然而例如在該場景是由小孩子攝像時，該場景可能對於用戶來說是珍貴的回憶，使得這樣的場景不被完全地剪切並且可以保留。因此，根據本技術，可以記錄用戶的所有回憶。
[0127]另外，如果設置了用於判定不必要再現的場景的參考，則可以自動地跳過場景。
[0128]因此，根據本技術，可以更加自由地決定是否再現所記錄的圖像。
[0129]在上文中，已經描述了基於陀螺儀傳感器23的感測信號生成運動信號的示例。然而，可以基於例如從加速度傳感器中輸出的感測信號來生成運動信號。
[0130]以這種方式，可以使用例如作為傾斜傳感器的加速度傳感器來指定相機面朝下時所攝像的畫面，傾斜傳感器指代除了運動如相機抖動、撞擊等之外的重力的矢量方向。例如，當在終止攝像後用戶忘記按下終止按鈕時，存在如下情況:當相機面朝下時，連續地拍攝地面的圖像。如果基於從加速度傳感器中輸出的感測信號生成運動信號並且與時間線相關聯地記錄運動數據，則可以跳過在相機面朝下時所攝像的場景。
[0131]另外，圖像傳感器可以安裝在攝像設備10上，並且基於從圖像傳感器輸出的感測信號所獲得的傳感器數據可以與時間線相關聯地記錄。
[0132]圖18是示出了攝像設備10的外觀的示例的視圖。該圖示出了從觀察者側所查看到的攝像設備10的外觀的示例，並且在這種情況下，目標存在於空間的深度方向上的稍微左側。如圖所示，圖像傳感器31被設置在例如朝向攝像者的顯示圖像的顯示單元29的顯示器的下部。
[0133]圖像傳感器31包括例如緊湊型CXD相機，並且識別所攝像的圖像的面部圖像。也就是說，例如，由圖像傳感器31輸出用於表示用戶的面部是否被識別的感測信號。因此，例如，可以指定當用戶在觀看目標的方向的同時執行攝像時所獲得的畫面。
[0134]通常，當對圖像進行攝像時，用戶朝著目標的方向執行攝像。同時，例如，當終止攝像後用戶忘記按下終止按鈕時，可想像的是，用戶沒有看著目標的方向。也就是說，可想像的是，在圖像傳感器31識別到用戶的面部時所攝像的畫面的圖像是非常值得再現的。然而，可想像的是，當圖像傳感器31沒有識別到用戶的面部時所攝像的畫面的圖像是不值得再現的。
[0135]如上面所描述的，如果基於從圖像傳感器31輸出的感測信號而獲得的傳感器數據與時間線相關聯地被記錄，則最終可以簡單地確定不必要再現的場景。另外，如果在使用傳感器數據確定不必要再現的場景的同時基於上面所描述的運動數據確定待跳過的場景，則可以更加有效且自動地跳過該場景。[0136]也就是說，不必要的是，在本技術中與時間線相關聯地被記錄的信息不一定是表示運動的信息，也可以是各種類型的附帶信息如由預定傳感器所感測的數據。
[0137]同時，可以使用硬體並且可以使用軟體來執行上面所描述的一系列處理。當使用軟體來執行上面所描述的一系列處理時，配置該軟體的程序被安裝在設置有專用硬體的計算機上，或者例如，如圖19所示的通用個人計算機700，該通用個人計算機700能夠通過安裝來自網絡或存儲軟體程序的記錄介質(即，非暫態記錄介質)的各種類型的程序來執行各種類型的功能。
[0138]在圖19中，中央處理單元(CPU) 701根據存儲在只讀存儲器(ROM) 702中的程序或從存儲單元708下載到隨機存取存儲器(RAM)703中的程序執行各種類型的處理。另外，RAM703適當地存儲當CPU701執行各種類型的處理時必要的數據等。
[0139]CPU701、R0M702和RAM703經由總線704彼此連接。另外，輸入/輸出接口 705連接至總線704。
[0140]輸入/輸出接口 705連接至包括鍵盤、滑鼠等的輸入單元706、包括顯示器如液晶顯示器(IXD)、揚聲器等的輸出單元707、包括硬碟等的存儲單元708以及包括網絡接口如數據機、區域網(LAN)卡等的通信單元709。通信單元709經由包括網際網路的網絡處理通信過程。
[0141]驅動器710根據需要連接至輸入/輸出接口 705，並且在驅動器710上適當地安裝可移除介質711如磁碟、光碟、磁光碟、半導體存儲器等。從驅動器710和可移除介質711中讀取的電腦程式安裝在存儲單元708中。
[0142]當通過軟體執行上面所描述的一系列處理時，從網絡如網際網路等或包括可移除介質711等的記錄介質中安裝配置該軟體的程序。
[0143]同時，除了圖19示出的設備的主體之外，記錄介質不僅包括可移除介質711，而且還包括硬碟，可移除介質711包括磁碟(包括軟盤(註冊商標))、光碟(包括緊湊盤只讀存儲器(⑶-ROM)和數字通用盤(DVD))、磁光碟(包括迷你盤(MD，註冊商標))、半導體存儲器等，這些可移除介質被分配用於將程序傳遞給用戶並且在這些可移除介質中記錄有程序，硬碟包括在R0M702或存儲單元708中，在設備的主體中建立硬碟時預先將硬碟傳遞給用戶，並且將程序記錄在硬碟中。
[0144]同時，在本說明書中的上面所描述的一系列處理包括根據寫入順序以時間順序執行的處理，以及並行地或單獨地執行的處理，即使這些處理不總是以時間順序來處理。
[0145]另外，本技術的實施例並不限於上面所描述的實施例，並且在不偏離本技術的主旨的範圍內可以進行各種修改。
[0146]此外，本技術還可以如下被配置。
[0147](I) 一種設備，包括:
[0148]硬體處理器；以及
[0149]存儲介質，所述存儲介質耦接至所述處理器並且存儲指令，所述指令當由所述處理器執行時，使得所述設備:
[0150]生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號；以及
[0151]將所述圖像數據和所述運動數據存儲到所述存儲器介質中。
[0152]( 2 )根據(I)所述的設備，還包括陀螺儀傳感器。[0153](3 )根據(I)或(2 )所述的設備，還包括加速度傳感器。
[0154](4)根據(I)至(3)中任一項所述的設備，還包括圖像檢測單元，所述圖像檢測單元被配置成檢測所述圖像數據中的面部圖像。
[0155](5)根據(I)至(4)中任一項所述的設備，其中，所述處理器被配置成根據所述運動信號生成第一經處理信號，所述第一經處理信號具有多個在時間點處的第一經處理信號值，所述第一經處理信號值對應於預定數量的閾值中的一個閾值。
[0156](6)根據(5)所述的設備，其中，所述處理器被設置成生成具有第二經處理信號值的第二經處理信號，所述第二經處理信號值:
[0157]在第一條件發生的情況下，對應於對應時間點處的所述第一經處理信號值；以及
[0158]在第二條件發生的情況下，對應於較早時間點處的所述第一經處理信號值。
[0159]( 7 )根據(5 )或(6 )所述的設備，其中，所述處理器被配置成通過對所述運動信號應用低通濾波器來生成所述第一經處理信號。
[0160](8)根據(5)至(7)中任一項所述的設備，其中，所述處理器被配置成基於所述閾值對所述第一經處理信號指定標誌。
[0161](9)根據(I)至(7)中任一項所述的設備，還包括:
[0162]顯示單元，所述顯示單元被配置成顯示圖像。
[0163](10) 一種再現裝置，包括:
[0164]接收器，所述接收器被配置成接收:
[0165]記錄的圖像數據；以及
[0166]運動信號，所述運動信號具有表示在記錄圖像數據期間圖像記錄裝置在對應的時間處的移動的運動信號值；以及
[0167]硬體處理器；以及
[0168]存儲介質，所述存儲介質耦接至所述處理器並且存儲指令，所述指令當由所述處理器執行時，使得所述設備:
[0169]分析所述運動信號值；
[0170]基於所述運動信號值指定所述圖像數據中的不用於顯示的至少一部分；以及
[0171]生成由其中將所述圖像數據中的所述不用於顯示的至少一部分移除的所述記錄的圖像數據所構成的經修改的圖像數據。
[0172](11)根據(10)所述的設備，其中:
[0173]所述運動信號值包括對應於所述圖像記錄裝置在第一時間點處的運動的第一值，以及對應於所述圖像記錄裝置在第二時間點處的運動的第二值，所述第一值不同於所述第
二值；
[0174]所述處理器被配置成根據所述運動信號值指定所述圖像數據中的所述不用於顯示的至少一部分。
[0175](12)根據(10)或(11)所述的設備，其中；
[0176]通過標誌將所述運動信號劃分成多個片段，所述標誌具有表示所述運動信號在所述運動信號值之間的轉換的標誌值；以及
[0177]所述處理器被配置成根據所述標誌值指定所述圖像數據中的所述不用於顯示的至少一部分。[0178](13)根據(10)至(12)中任一項所述的設備，還包括:
[0179]顯示單元，所述顯示單元被配置成顯示所述經修改的圖像數據。
[0180]附圖標記列表
[0181]同時，本技術可以包括下面的配置中的一個或多個。
[0182]10攝像設備
[0183]21輸入單元
[0184]22透鏡致動器
[0185]23陀螺儀傳感器
[0186]24成像單元
[0187]25相機抖動校正操作單元
[0188]26運動量計算單元
[0189]27編碼器
[0190]28記錄單元
[0191]29 顯示單元
[0192]50再現設備
[0193]61輸入單元
[0194]62驅動器
[0195]63操作解碼器
[0196]64 顯示單元
[0197]65高速緩衝存儲器
【權利要求】
1.一種設備，包括: 硬體處理器；以及 存儲介質，所述存儲介質耦接至所述處理器並且存儲指令，當所述指令由所述處理器執行時，使得所述設備: 生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號；以及 將所述圖像數據和所述運動信號存儲到所述存儲介質中。
2.根據權利要求1所述的設備，還包括陀螺儀傳感器。
3.根據權利要求1所述的設備，還包括加速度傳感器。
4.根據權利要求1所述的設備，還包括圖像檢測單元，所述圖像檢測單元被配置成檢測所述圖像數據中的面部圖像。
5.根據權利要求1所述的設備，其中，所述處理器被配置成根據所述運動信號生成第一經處理信號，所述第一經處理信號具有多個在時間點處的第一經處理信號值，所述第一經處理信號值對應於預定數量的閾值中的一個閾值。
6.根據權利要求5所述的設備，其中，所述處理器被配置成生成具有第二經處理信號值的第二經處理信號，所述第二經處理信號值: 在發生第一條件的情況下，對應於對應時間點處的所述第一經處理信號值；以及 在發生第二條件的情況下，對應於較早時間點處的所述第一經處理信號值。
7.根據權利要求5所述的設備，其中，所述處理器被配置成通過對所述運動信號應用低通濾波器來生成所述第一經處理信號。
8.根據權利要求5所述的設備，其中，所述處理器被配置成基於所述閾值對所述第一經處理信號指定標誌。
9.根據權利要求1所述的設備，還包括: 顯示單元，所述顯示單元被配置成顯示所述圖像。
10.一種再現設備，包括: 接收器，所述接收器被配置成接收: 記錄的圖像數據；和 運動信號，所述運動信號具有表示在記錄所述圖像數據期間圖像記錄裝置在對應的時間處的移動的運動信號值；以及硬體處理器；以及 存儲介質，所述存儲介質耦接至所述處理器並且存儲指令，當所述指令由所述處理器執行時，使得所述設備: 分析所述運動信號值； 基於所述運動信號值指定所述圖像數據中的不用於顯示的至少一部分；以及生成由其中將所述圖像數據中的所述不用於顯示的至少一部分移除的所述記錄的圖像數據所構成的經修改的圖像數據。
11.根據權利要求10所述的設備，其中: 所述運動信號值包括對應於所述圖像記錄裝置在第一時間點處的運動的第一值，以及對應於所述圖像記錄裝置在第二時間點處的運動的第二值，所述第一值不同於所述第二值；所述處理器被配置成根據所述運動信號值指定所述圖像數據中的所述不用於顯示的至少一部分。
12.根據權利要求10所述的設備，其中: 通過標誌將所述運動信號劃分成多個片段，所述標誌具有表示所述運動信號在所述運動信號值之間的轉換的標誌值；以及 所述處理器被配置成根據所述標誌值指定所述圖像數據中的所述不用於顯示的至少一部分。
13.根據權利要求10所述的設備，還包括: 顯示單元，所述顯示單元被配置成顯示所述經修改的圖像數據。
14.一種由處理裝置執行的方法，包括: 由所述處理裝置生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號；以及 將所述圖像數據和所述運動信號存儲到存儲介質中。
15.一種存儲指令的非暫態計算機可讀介質，當所述指令由計算機執行時，使得所述計算機: 由所述計算機生成表示在生成圖像數據期間圖像記錄裝置隨著時間的移動的運動信號；以及 將所述圖像數據和所述運動信號存儲到存儲介質中。
16.一種由再現裝置再現圖像的方法，包括: 接收記錄的圖像數據； 接收表示圖像記錄裝置在記錄所述圖像數據期間的移動的運動信號； 由所述再現裝置分析所述運動信號； 基於所述運動信號指定所述圖像數據中的不用於顯示的至少一部分；以及 生成由其中將所述圖像數據中的所述不用於顯示的至少一部分移除的所述記錄的圖像數據所構成的經修改的圖像數據。
17.一種存儲指令的非暫態計算機可讀介質，所述指令當由計算機執行時，使得所述計算機: 接收記錄的圖像數據； 接收表示圖像記錄裝置在記錄所述圖像數據期間的移動的運動信號； 由所述計算機分析所述運動信號； 基於所述運動信號指定所述圖像數據中的不用於顯示的至少一部分；以及 生成由其中將所述圖像數據中的所述不用於顯示的至少一部分移除的所述記錄的圖像數據所構成的經修改的圖像數據。
【文檔編號】H04N5/225GK103548338SQ201280024951
【公開日】2014年1月29日 申請日期:2012年5月22日 優先權日:2011年5月30日
【發明者】山本一幸 申請人:索尼公司