數據結構、再現設備、再現方法和程序的製作方法

2023-04-27 16:17:21

專利名稱：數據結構、再現設備、再現方法和程序的製作方法
技術領域：
本發明涉及數據結構、再現設備、再現方法和程序。本發明具體地涉及這樣的數據 結構、再現設備、再現方法和程序，它們適用於常用的採用LR圖像顯示方式(偏光式、液晶 快門式，等等)的顯示器及使用從至少三個視點(多視角)觀看的圖像(雙凸透鏡方式) 的顯示器，並且能夠提供使顯示器中執行的信號處理變得容易的3D視頻格式。
背景技術：
一般而言，具有顯示3D (三維)視頻圖像功能的各種類型的顯示設備(下文中稱 為「3D顯示設備」)已經得到使用。此外，用於3D顯示的各種類型的視頻格式(下文中稱 為3D視頻格式)已經得到使用。因此，理論上可以採用一種3D顯示設備和3D視頻格式的大量組合方式。然而，應 當採用有助於並且優化視頻顯示的信號處理的最優組合方式。例如，使用左眼用圖像(下文中稱為「L圖像」)和右眼用圖像(下文中稱為「R圖 像」)的3D視頻格式適合於採用偏光式的3D顯示設備和採用液晶快門式的3D顯示設備。 注意，下文中，這種3D顯示設備被稱為「採用LR圖像顯示方式的3D顯示設備」。此外，例如，使用二維圖像和深度圖像的3D視頻格式適合於採用使用從三個或更 多個視點(多視角)觀看的圖像的方式的3D顯示設備，即，採用所謂的雙凸透鏡方式的3D 顯示設備(例如參見非專利文獻1)。引用列表非專利文獻NPL 1 :web site of Royal Philips Electronics (皇家飛利 甫電子公司的網站) >home page(±M) > 3D solutions > About, " searchedin 7 July, 2008" ，〃 http:// www.business-sites, philips. com/3dsolutions/about/Index. html"

發明內容
技術問題然而，尚未開發出適用於常用的不同類型的3D顯示器並且使顯示所需的信號處 理變得容易的3D視頻格式。例如，如上所述，已被一般人使用的採用LR圖像顯示方式的3D顯示設備基本採用 使用L圖像和R圖像的3D視頻格式。因此，如果要在採用LR圖像顯示方式的3D顯示設備 中顯示使用二維圖像和深度圖像的3D視頻格式的3D視頻圖像，則需要基於該3D視頻格式 生成L圖像和R圖像的功能。然而，該功能的額外實現是不現實的(因為這種實現的負擔 很大)。即，使用二維圖像和深度圖像的3D視頻格式不適合於採用LR圖像顯示方式的3D 顯不設備。另一方面，例如，當要在採用雙凸透鏡方式的3D顯示設備中顯示使用L圖像和R 圖像的3D視頻格式的3D視頻圖像時，需要基於該視頻格式生成二維圖像和深度圖像的功能。然而，實現這種功能在技術上是困難的。即，使用L圖像和R圖像的3D視頻格式不適 合於採用雙凸透鏡方式的顯示器。類似地，使用L圖像和R圖像的3D視頻格式不適合於採 用除雙凸透鏡方式以外的其他使用從三個或更多個視點(多視角)觀看的圖像的方式的顯不器。因此，需要實現一種3D視頻格式，其可用於常用的LR圖像顯示方式(偏光式、液 晶快門式，等等)和使用從三個或更多個視點(多視角)觀看的圖像的方式，並且使顯示所 需的信號處理變得容易。然而，這一需要還未得到充分滿足。鑑於該情形作出了本發明，本發明提供了一種3D視頻格式，其可用在常用的採用 LR圖像顯示方式(偏光式、液晶快門式，等等)的顯示器和採用使用從三個或更多個視點 (多視角)觀看的圖像的方式的顯示器中，並且使顯示所需的信號處理變得容易。解決方案根據本發明的一個實施例，提供了一種數據結構，包括用在第一 3D(三維)視頻圖 像顯示方式中的第一數據結構和用在第二 3D視頻圖像顯示方式中的第二數據結構，在第 一 3D視頻圖像顯示方式中使用左眼用的L圖像和右眼用的R圖像，並且第一數據結構包括 用於顯示的與L圖像相對應的圖像數據及與R圖像相對應的圖像數據，在第二 3D視頻圖像 顯示方式中至少利用二維圖像和深度圖像生成從三個或更多個視點觀看的圖像，並且第二 數據結構在第一數據結構的L圖像或R圖像被用作二維圖像時至少包括與深度圖像相對應 的圖像數據。第二數據結構可包括隱藏在二維圖像中包含的物體後面的圖像和該隱藏在物體 後面的圖像的深度圖像。根據本發明的另一實施例，提供了一種數據結構，包括用在第一 3D(三維)視頻圖 像顯示方式中的第一數據結構和用在第二 3D視頻圖像顯示方式中的第二數據結構，在第 一 3D視頻圖像顯示方式中使用左眼用的L圖像和右眼用的R圖像，並且第一數據結構包括 用於顯示的與L圖像相對應的圖像數據及與R圖像相對應的圖像數據，在第二 3D視頻圖像 顯示方式中利用至少二維圖像和深度圖像生成從三個或更多個視點觀看的圖像，並且第二 數據結構在第一數據結構的L圖像或R圖像被用作二維圖像時至少包括與深度圖像相對應 的圖像數據。根據本發明的另一實施例，提供了一種再現設備，再現設備再現具有以下數據結 構的圖像數據，該數據結構包括用在第一 3D(三維)視頻圖像顯示方式中的第一數據結構 和用在第二 3D視頻圖像顯示方式中的第二數據結構，在第一 3D視頻圖像顯示方式中使用 左眼用的L圖像和右眼用的R圖像，並且第一數據結構包括用於顯示的與L圖像相對應的 圖像數據及與R圖像相對應的圖像數據，在第二 3D視頻圖像顯示方式中至少利用二維圖像 和深度圖像生成從三個或更多個視點觀看的圖像，並且第二數據結構在第一數據結構的L 圖像或R圖像被用作二維圖像時至少包括與深度圖像相對應的圖像數據，當要再現具有上 述數據結構的圖像數據時，在使用採用第一 3D視頻圖像顯示方式的顯示單元的情況下，從 第一數據結構的圖像數據中獲得的、與L圖像相對應的圖像數據及與R圖像相對應的圖像 數據被再現，並且在使用採用第二 3D視頻圖像顯示方式的顯示單元的情況下，第一數據結 構的與L圖像或R圖像相對應的圖像數據被再現並且第二數據結構的深度圖像被再現。第二數據結構還可包括隱藏在二維圖像中包含的物體後面的圖像和該隱藏在物體後面的圖像的深度圖像，並且當使用採用第二 3D視頻圖像顯示方式的顯示單元時，再現 設備除了再現深度圖像以外，還再現與第二數據結構的圖像數據相對應的、隱藏在物體後 面的圖像及隱藏在物體後面的圖像的深度圖像。根據本發明又一實施例的再現方法和程序對應於上述根據本發明實施例的再現 設備。根據所述再現設備、再現方法和程序，具有以下數據結構的圖像數據按下述方式 被再現，該數據結構包括用在第一 3D(三維)視頻圖像顯示方式中的第一數據結構和用在 第二 3D視頻圖像顯示方式中的第二數據結構，在第一 3D視頻圖像顯示方式中使用左眼用 的L圖像和右眼用的R圖像，並且第一數據結構包括用於顯示的與L圖像相對應的圖像數 據及與R圖像相對應的圖像數據，在第二 3D視頻圖像顯示方式中至少利用二維圖像和深度 圖像生成從三個或更多個視點觀看的圖像，並且第二數據結構在第一數據結構的L圖像或 R圖像被用作二維圖像時至少包括與深度圖像相對應的圖像數據。即，在使用採用第一 3D 視頻圖像顯示方式的顯示單元的情況下，從第一數據結構的圖像數據中獲得的、與L圖像 相對應的圖像數據和與R圖像相對應的圖像數據被再現，並且在使用採用第二 3D視頻圖像 顯示方式的顯示單元的情況下，第一數據結構的與L圖像或R圖像相對應的圖像數據被再 現，並且第二數據結構的深度圖像被再現。本發明的有利效果根據本發明，本發明可適用於常用的採用LR圖像顯示方式(偏光式、液晶快門式， 等等)的顯示器和使用從至少三個視點(多視角)觀看的圖像(雙凸透鏡式)的顯示器。 此外，使顯示所需的信號處理變得容易。此外，可以提供實現這些功能的3D視頻格式。


圖1是圖示根據相關技術的使用L圖像和R圖像的3D視頻格式的示意圖。圖2是圖示根據相關技術的使用二維圖像和深度圖像的3D視頻格式的示意圖。圖3是圖示根據相關技術的使用二維圖像和深度圖像的3D視頻格式的示意圖。圖4是圖示根據相關技術的使用二維圖像和深度圖像的3D視頻格式的示意圖。圖5是圖示根據相關技術的使用二維圖像和深度圖像的3D視頻格式的示意圖。圖6是圖示根據本發明的3D視頻格式的例子的示意圖。圖7是圖示根據本發明的另一 3D視頻格式的示意圖。圖8是圖示根據圖7中所示的本發明的3D格式配置的再現設備，即，應用了本發 明的再現設備的配置的框圖。圖9是圖示圖8中所示的再現設備的再現處理的流程圖。圖10是圖示根據本發明的另一 3D視頻格式的示意圖。圖11是圖示根據圖10中所示的本發明的3D格式配置的另一再現設備，S卩，應用 了本發明的再現設備的配置的框圖。圖12是圖示由圖11中所示的再現設備執行的再現處理的例子的流程圖。圖13是圖示根據圖10中所示的本發明的3D格式配置的又一再現設備，S卩，應用 了本發明的再現設備的配置的框圖。圖14是圖示由圖13中所示的再現設備執行的再現處理的流程圖。
圖15是圖示用作根據本發明的3D視頻格式的元數據的例子的角度θ的示意圖。
圖16是圖示介質中存儲有圖15中所示的角度θ的部分的示意圖。
圖17是圖示介質中存儲有圖15中所示的角度θ的另一部分的示意圖。
圖18是圖示圖15中所示的角度θ的使用的示意圖。
圖19是圖示用作應用本發明的再現設備的計算機的配置的框圖。
附圖標記列表
21 再現設備
22 介質
23 採用LR圖像顯示方式的3D顯示器
24 採用雙凸透鏡方式的3D顯示器
31 主控制器
32 讀取單元
33 基本信號(base signal)解碼器
34 可選信號(optional signal)解碼器
35 :48Hz 逐行信號(progressive signal)生成器
41 再現設備
42 介質
43 採用LR圖像顯示方式的3D顯示器
44 採用雙凸透鏡方式的3D顯示器
51 主控制器
52 讀取單元
53 =L基本信號解碼器
54 =R基本信號解碼器
55 可選信號解碼器
56 :48Hz逐行信號生成器
57 並排信號生成器
58 :48Hz逐行信號生成器
201= CPU
202=ROM
203 =RAM
208存儲單元
211可移動介質
具體實施例方式首先，將描述傳統的3D視頻格式以幫助對本發明的理解。如圖1所示，例如，在使用L圖像和R圖像的3D視頻格式中，通過將水平方向上L 圖像LP的像素數目減半而獲得的圖像和通過將水平方向上R圖像RP的像素數目減半而獲 得的圖像被布置在水平方向上，從而獲得單個圖像SbSP，並且使用圖像SbSP的視頻信號。 注意，圖像^SP在下文中被稱為並排(side-by-side)圖像釙SP。
採用LR圖像顯示方式(偏光式、液晶快門式，等等)的3D顯示設備通過對並排圖 像SbSP的視頻信號執行信號處理來顯示L圖像LP和R圖像RP。在這種情況下，當佩戴特殊眼鏡的用戶觀看3D顯示設備時，右眼看見L圖像LP且 左眼看見R圖像RP。結果，用戶看見了 3D圖像。另一方面，在使用二維圖像和深度圖像的3D視頻格式中，使用如圖2所示的二維 圖像2DP的視頻信號和如圖3所示的深度圖像DeP的視頻信號。二維圖像2DP可以在一般的顯示設備以及3D顯示設備中顯示。深度圖像DeP是這樣一個圖像，其中關於二維圖像2DP的深度的信息由灰度級表 示。深度圖像DeP具有這樣一種特性，其中在一區域具有較亮的灰度級時，該區域看起來在 3D顯示設備中位於前側。例如，在圖2和3的例子中，足球看起來位於前側。注意，深度圖 像DeP的編碼方式由MPEG-C(IS0/IEC 23002)標準化。此外，在根據非專利文獻1的雙凸透鏡方式的3D視頻格式中，除了二維圖像2DP 和深度圖像DeP的視頻信號以外，還使用圖4中所示的「隱藏在物體後面的圖像BP」和圖5 中所示的「圖像BP的深度圖像BD印」的視頻信號。「隱藏在物體後面的圖像BP」是當要基於二維圖像2DP和深度圖像DeP生成從三個 或更多個視點(多視角)觀看的圖像時、用於呈現從某一視點看到的物體(二維圖像2DP中 包括的圖像，即，圖2和4所示的例子中的足球)的背景圖像(圖4所示的例子中的房子) 所需的二維圖像。「圖像BP的深度圖像BD印」是用灰度級表示關於「隱藏在物體後面的圖像BP」的 深度的信息的圖像。採用雙凸透鏡方式的3D顯示設備基於二維圖像2DP和深度圖像DeP生成從三個 或更多個視點(多視角)觀看的圖像並顯示該圖像。採用雙凸透鏡方式的3D顯示設備在 生成從三個或更多個視點(多視角)觀看的圖像時使用「隱藏在物體後面的圖像BP」和「圖 像BP的深度圖像BD印」。採用雙凸透鏡方式的3D顯示設備能夠允許用戶在無需佩戴眼鏡的情況下觀看三 維圖像。即，3D顯示設備的表面由大致U形的透鏡構成。因此，右眼看到的圖像和左眼看到 的圖像根據觀看3D顯示設備表面的用戶的眼睛的位置而改變。結果，用戶可以看到並識別 從不同的三個或更多個視點獲得的不同圖像。上面已參考圖1至5描述了傳統的3D視頻格式。接下來，參考圖6，將描述應用本發明的3D視頻格式(下文中稱為「根據本發明的 3D視頻格式」)的例子。在圖6所示的根據本發明的3D視頻格式的例子中，除了並排圖像SbSP的視頻信 號以外，還使用通過收集以下三個關於並排圖像SbSP的L圖像LP的圖像而獲得的圖像 Sup(下文中稱為「子圖像SuP」)的視頻信號L圖像的深度圖像、隱藏在L圖像中包含的物 體後面的圖像、以及隱藏在物體後面的圖像的深度圖像。在這種情況下，排列這些圖像的方 式不受限制。在圖6所示的例子中，通過將L圖像水平方向上的像素數目減半且垂直方向 上的像素數目減半而獲得的隱藏在L圖像中包含的物體後面的圖像以及該圖像的深度圖 像被按照該順序從上至下垂直排列，並且通過將L圖像水平方向上的像素數目減半而獲得 的L圖像的深度圖像被排列在這些圖像的左側，從而構成子圖像SuP。
注意，由採用LR圖像顯示方式(偏光式、液晶快門式，等等)的3D顯示設備執行 的3D顯示所需的視頻信號在下文中被稱為「基本信號BS」。另一視頻信號，即，在使用從三 個或更多個視點(多視角)(雙凸透鏡方式)觀看的圖像的3D顯示設備的情況下所需的視 頻信號被稱為「可選信號OS」。具體而言，在圖6所示的例子中，並排圖像SbSP的視頻信號用作基本信號BS。子 圖像SuP的視頻信號用作可選信號OS。因此，利用這些信號名，根據本發明的3D視頻格式使用基本信號BS和可選信號 OS。在這種情況下，採用LR圖像顯示方式(偏光式、液晶快門式，等等)的3D顯示設 備可以通過對基本信號BS執行信號處理來顯示L圖像LP和R圖像RP。因此，當佩戴特殊 眼鏡的用戶觀看3D顯示設備時，右眼觀看L圖像LP且左眼觀看R圖像RP，因此，用戶識別 出3D圖像。換句話說，基本信號BS並不限於圖6中所示的例子，只要使用能夠在採用LR圖像 顯示方式(偏光式、液晶快門式，等等)的3D顯示設備中分別顯示L圖像LP和R圖像RP 的格式即可。注意，基本信號BS的另一例子將在下面參考圖10描述。此外，採用雙凸透鏡方式的3D顯示設備使用基本信號BS的L圖像LP作為二維 圖像2DP、可選信號OS的L圖像的深度圖像作為深度圖像DeP來生成從三個或更多個視點 (多視角)觀看的圖像，並顯示該圖像。採用雙凸透鏡方式的3D顯示設備在生成從三個或 更多個視點(多視角)觀看的圖像時使用隱藏在L圖像中包括的物體後面的圖像和隱藏在 物體後面的圖像的深度圖像。換句話說，可選信號OS並不限於圖6中所示的例子，只要使用採用雙凸透鏡方式 的3D顯示設備可用於生成從三個或更多個視點(多視角)觀看的圖像的圖像格式即可。例如，基本信號BS的R圖像RP可以用作二維圖像2DP。在這種情況下，如圖7所 示，通過收集以下三個關於並排圖像SbSP的R圖像RP的圖像而獲得的圖像可以用作可選 信號OS的子圖像SuP:R圖像的深度圖像、隱藏在R圖像中包含的物體後面的圖像、以及隱 藏在R圖像的物體後面的圖像的深度圖像。在這種情況下，排列這些圖像的方式不受限制。 在圖7所示的例子中(還參考圖6中所示的例子)，通過將R圖像水平方向上的像素數目減 半且垂直方向上的像素數目減半而獲得的隱藏在R圖像中包含的物體後面的圖像以及該 圖像的深度圖像被按照該順序從上至下垂直排列，並且通過將R圖像水平方向上的像素數 目減半而獲得的R圖像的深度圖像被排列在這些圖像的左側，從而構成子圖像SuP。圖8是圖示根據本發明根據圖6和7中所示的例子的3D格式而配置的再現設備 的示意圖。即，圖8中所示的再現設備21是應用了本發明的再現設備的實施例。圖8中所示的例子的再現設備21包括主控制器31、讀取單元32、基本信號解碼器 33、可選信號解碼器34和48Hz逐行信號生成器35。介質22記錄通過對根據本發明的3D視頻格式的兩種視頻信號(基本信號BS和 可選信號0 進行編碼而獲得的流。假定視頻信號是根據MHz逐行式記錄的。此外，採用LR圖像顯示方式(偏光式、液晶快門式，等等)的3D顯示設備23和採 用雙凸透鏡方式的3D顯示設備M可連接到再現設備21。主控制器31控制再現設備21的整體操作。即，主控制器31控制包括讀取單元32。基本信號解碼器33、可選信號解碼器34和48Hz逐行信號生成器35在內的各個塊的操 作。注意，沒有示出表示從主控制器31到各個塊的連接的箭頭以改善圖像的可視性，而代 之以示出了白色的箭頭。白色箭頭的含義在其他圖中是相同的。讀取單元32從介質22讀取基本信號BS並將基本信號BS送至基本信號解碼器
33。此外，讀取單元32從介質22讀取可選信號OS並將可選信號OS送至可選信號解碼器34。注意，基本信號BS和可選信號OS可以作為不同的流被記錄在介質22中，或者可 以作為單個復用流被記錄在介質22中。在後一情況下，讀取單元32從介質22讀取復用流， 將復用流分割為基本信號BS和可選信號0S，並將信號送至下一級中的相應信號處理器。基本信號解碼器33對已編碼的基本信號BS進行解碼以獲得MHz逐行基本信號 BS。之後，基本信號解碼器33將MHz逐行基本信號BS送至採用LR圖像顯示方式的3D顯 示設備23和48Hz逐行信號生成器35。採用LR圖像顯示方式的3D顯示設備23對MHz逐行基本信號BS執行信號處理 以顯示L圖像LP和R圖像RP。可選信號解碼器34對已編碼的可選信號OS進行解碼以獲得MHz逐行可選信號 OS。之後，可選信號解碼器34將MHz逐行可選信號OS送至48Hz逐行信號生成器35。48Hz逐行信號生成器35逐個幀地交替排列MHz逐行基本信號BS和MHz逐行可 選信號0S，以生成要提供給採用雙凸透鏡方式的3D顯示設備M的48Hz逐行信號。採用雙凸透鏡方式的3D顯示設備M使用與從48Hz逐行信號生成器35輸出的 48Hz逐行信號相對應的圖像中的L圖像LP作為二維圖像2DP，並且使用L圖像的深度圖像 作為深度圖像DeP，以生成從三個或更多個視點(多視角)觀看的圖像並顯示該圖像。採用 雙凸透鏡方式的3D顯示設備M在生成從三個或更多個視點(多視角)觀看的圖像時使用 隱藏在與從48Hz逐行信號生成器35輸出的48Hz逐行信號相對應的圖像中的L圖像中所 包含的物體後面的圖像並且使用該圖像的深度信號。圖9是圖示由圖8中所示的再現設備21執行的處理(下文中稱為「再現處理」) 的流程圖。在步驟Sl中，再現設備21的主控制器31判斷輸出目的地是否對應於採用雙凸透 鏡方式的3D顯示設備M。當輸出目的地對應於採用LR圖像顯示方式的3D顯示設備23時，在步驟Sl中判 斷結果是否定的。然後，讀取單元32從介質22讀取基本信號BS並將基本信號BS提供給 基本信號解碼器33。之後，處理進行到步驟S2。在步驟S2中，基本信號解碼器33對已編碼的基本信號BS進行解碼以生成MHz 逐行信號(基本信號BS)。在步驟S6中，基本信號解碼器33將信號輸出到採用LR圖像顯 示方式的3D顯示設備23。這樣，再現處理終止。另一方面，當輸出目的地對應於採用雙凸透鏡方式的3D顯示設備M時，在步驟Sl 中判斷結果是肯定的。然後，讀取單元32從介質22讀取基本信號BS並將基本信號BS提 供給基本信號解碼器33。此外，讀取單元32從介質22讀取可選信號OS並將可選信號OS 提供給可選信號解碼器34。之後，處理進行到步驟S3。在步驟S3中，基本信號解碼器33對已編碼的基本信號BS進行解碼以生成第一24Hz逐行信號(基本信號BQ。第一 MHz逐行信號(基本信號BQ被提供給48Hz逐行信 號生成器35。在步驟S4中，可選信號解碼器34對已編碼的可選信號OS進行解碼以生成第二 24Hz逐行信號(可選信號0 。第二 MHz逐行信號(可選信號0 被提供給48Hz逐行信 號生成器35。注意，步驟S3和步驟S4的處理順序並不特別限於圖9中所示的順序。具體而言， 步驟S4中的處理可以在步驟S3中的處理執行之前執行，或者步驟S3中的處理和步驟S4 中的處理可以基本上同時執行。在任一種情況下，在步驟S3中的處理和步驟S4中的處理 終止之後，處理進行到步驟S5。在步驟S5中，48Hz逐行信號生成器35逐幀地交替排列第一 MHz逐行信號(基本 信號BS)和第二 MHz逐行信號(可選信號OS)，以生成用作輸出信號的48Hz逐行信號。在步驟S6中，48Hz逐行信號生成器35將信號輸出到採用雙凸透鏡方式的3D顯示 設備對。這樣，再現處理終止。上面已描述了圖6和7中所示的例子作為根據本發明的3D格式。之後，上面已描 述了根據圖6和7中所示本發明的3D格式配置的再現設備的實施例。注意，本發明並不特別限於該實施例，而是可以採用各種實施例。例如，圖10是圖示不同於圖6和7中所示例子的根據本發明的3D視頻格式的例 子的示意圖。在圖10所示的根據本發明的3D視頻格式中，取代並排圖像SbSP，使用了原始L圖 像LP和原始R圖像RP。具體而言，L圖像LP和R圖像RP的視頻信號被用作基本信號。下 文中，前一圖像的基本信號，即，L圖像LP的視頻信號被稱為「L基本信號LBS」。此外，後一 圖像的基本信號，即，R圖像RP的視頻信號被稱為「R基本信號RBS」。具體而言，在圖10所示的根據本發明的3D視頻格式的例子中，使用了基本信號BS 和可選信號Os。在圖10所示的例子中，具有與圖6所示相同格式的子圖像SuP的視頻信號被用作 可選信號OS。注意，可選信號OS並不限於圖6中所示的例子，例如，可以使用具有與圖7所 示相同格式的子圖像SuP的視頻信號。圖11是圖示根據圖10中所示本發明的3D格式配置的另一再現設備的配置的框 圖。即，再現設備41是不同於再現設備21的再現設備的實施例。圖11中所示的再現設備41包括主控制器51、讀取單元52、L基本信號解碼器53、 R基本信號解碼器M、可選信號解碼器55、48Hz逐行信號生成器56、並排信號生成器57和 48Hz逐行信號生成器58。介質42記錄通過對根據本發明的3D視頻格式的三種視頻信號(即，L基本信號 LBS、R基本信號RBS和可選信號0 進行編碼而獲得的流。視頻信號是根據MHz逐行方 式記錄的。此外，採用LR圖像顯示方式(偏光式、液晶快門式，等等)的3D顯示設備43和採 用雙凸透鏡方式的3D顯示設備44可連接到再現設備41。主控制器51控制再現設備41的整體操作。即，主控制器51控制包括讀取單元 52、L基本信號解碼器53、R基本信號解碼器M、可選信號解碼器55、48Hz逐行信號生成器56、並排信號生成器57和48Hz逐行信號生成器58在內的各個塊的操作。讀取單元52從介質42讀取L基本信號LBS並將L基本信號LBS送至L基本信號 解碼器53。讀取單元52從介質42讀取R基本信號RBS並將R基本信號RBS送至R基本信 號解碼器M。此外，讀取單元52從介質42讀取可選信號OS並將可選信號OS送至可選信 號解碼器陽。注意，L基本信號LBS、R基本信號RBS和可選信號OS可以作為不同的流被記 錄在介質中，或者可以作為單個復用流被記錄在介質中。在後一情況下，讀取單元52從介 質讀取單個復用流，將復用流分割為L基本信號LBS、R基本信號RBS和可選信號0S，並將 這些信號送至下一級中的信號處理單元。L基本信號解碼器53對已編碼的L基本信號LBS進行解碼以獲得MHz逐行L基 本信號LBS，並將MHz逐行L基本信號LBS送至48Hz逐行信號生成器56和並排信號生成 器57。R基本信號解碼器M對已編碼的R基本信號RBS進行解碼以獲得MHz逐行R基 本信號RBS，並將MHz逐行R基本信號RBS送至48Hz逐行信號生成器56和並排信號生成 器57。48Hz逐行信號生成器56逐幀地交替排列MHz逐行L基本信號LBS和MHz逐行 R基本信號RBS以生成48Hz逐行信號，並將該48Hz逐行信號送至採用LR圖像顯示方式的 3D顯示設備43。採用LR圖像顯示方式的3D顯示設備43對48Hz逐行信號執行信號處理以顯示L 圖像LP和R圖像RP。可選信號解碼器55對已編碼的可選信號OS進行解碼以獲得MHz逐行可選信號 OS,並將該MHz逐行可選信號OS送至48Hz逐行信號生成器58。並排信號生成器57利用MHz逐行L基本信號LBS和MHz逐行R基本信號RBS 生成並排圖像SbSP的視頻信號(下文中稱為「並排信號」)，並將該並排信號送至48HZ逐 行信號生成器58。具體而言，並排信號具有與從圖8中所示的基本信號解碼器33輸出的 24Hz逐行基本信號BS相同的格式。48Hz逐行信號生成器58逐幀地交替排列MHz逐行並排信號和MHz逐行可選信 號OS以生成48Hz逐行信號，並將該48Hz逐行信號送至採用雙凸透鏡方式的3D顯示設備 44。採用雙凸透鏡方式的3D顯示設備44使用與從48Hz逐行信號生成器58輸出的 48Hz逐行信號相對應的圖像中的L圖像LP作為二維圖像2DP，並且使用L圖像的深度圖像 作為深度圖像DeP，以生成從三個或更多個視點(多視角)觀看的圖像。然後，採用雙凸透 鏡方式的3D顯示設備44顯示該圖像。採用雙凸透鏡方式的3D顯示設備44在生成從三個 或更多個視點(多視角)觀看的圖像時使用與從48Hz逐行信號生成器58輸出的48Hz逐 行信號相對應的圖像中、隱藏在L圖像中包含的物體後面的圖像和隱藏在物體後面的圖像 的深度圖像。圖12是圖示由圖11中所示的再現設備41執行的再現處理的例子的流程圖。在步驟S21中，再現設備41的主控制器51判斷輸出目的地是否對應於採用雙凸 透鏡方式的3D顯示設備44。當輸出目的地對應於採用LR圖像顯示方式的3D顯示設備43時，在步驟S21中判斷結果是否定的。然後，讀取單元52從介質42讀取L基本信號LBS並將L基本信號LBS 提供給L基本信號解碼器53。此外，讀取單元52從介質42讀取R基本信號RBS並將R基 本信號RBS提供給R基本信號解碼器M。之後，處理進行到步驟S22。在步驟S22中，L基本信號解碼器53對已編碼的L基本信號LBS進行解碼以生 成第一 MHz逐行信號(L基本信號LBQ。第一 MHz逐行信號(L基本信號LBQ被提供給 48Hz逐行信號生成器56。在步驟S23中，R基本信號解碼器M對已編碼的R基本信號RBS進行解碼以生 成第二 MHz逐行信號(R基本信號RBQ。第二 MHz逐行信號(R基本信號RBQ被提供給 48Hz逐行信號生成器56。注意，步驟S22和步驟S23的處理順序並不特別限於圖12中所示的順序。即，步 驟S23中的處理可以在步驟S22中的處理執行之前執行，或者步驟S22中的處理和步驟S23 中的處理可以基本上同時執行。在任一種情況下，在步驟S22和步驟S23中的處理終止之 後，處理進行到步驟S24。在步驟SM中，48Hz逐行信號生成器56逐幀地交替排列第一 MHz逐行信號(L基 本信號LBS)和第二 MHz逐行信號(R基本信號RBS)，以生成用作輸出信號的48Hz逐行信號。在步驟S30中，48Hz逐行信號生成器56將信號輸出到採用LR圖像顯示方式的3D 顯示設備43。這樣，再現處理終止。另一方面，當輸出目的地對應於採用雙凸透鏡方式的3D顯示設備44時，在步驟 S21中判斷結果是肯定的。然後，讀取單元52從介質42讀取L基本信號LBS並將L基本 信號LBS提供給L基本信號解碼器53。讀取單元52從介質42讀取R基本信號RBS並將R 基本信號RBS提供給R基本信號解碼器M。此外，讀取單元52從介質42讀取可選信號OS 並將可選信號OS提供給可選信號解碼器55。這樣，處理進行到步驟S25。在步驟S25中，L基本信號解碼器53對已編碼的L基本信號LBS進行解碼以生成 第一 MHz逐行信號(L基本信號LBQ。第一 MHz逐行信號(L基本信號LBQ被提供給並 排信號生成器57。在步驟S26中，R基本信號解碼器M對已編碼的R基本信號RBS進行解碼以生成 第二 MHz逐行信號(R基本信號RBQ。第二 MHz逐行信號(R基本信號RBQ被提供給並 排信號生成器57。注意，步驟S25和步驟S26的處理順序並不特別限於圖12中所示的順序。即，步 驟S^中的處理可以在步驟S25中的處理執行之前執行，或者步驟S25中的處理和步驟S^ 中的處理可以基本上同時執行。在任一種情況下，在步驟S25和步驟S26中的處理終止之 後，處理進行到步驟S27。在步驟S27中，並排信號生成器57利用第一 MHz逐行信號(L基本信號LBS)和 第二 MHz逐行信號(R基本信號RBQ生成關於第三MHz逐行信號的並排信號。第三MHz 逐行信號被提供給48Hz逐行信號生成器58。在步驟S28中，可選信號解碼器55對已編碼的可選信號OS進行解碼以生成第四 24Hz逐行信號(可選信號OS)。第四MHz逐行信號(可選信號0 被提供給48Hz逐行信 號生成器58。
注意，步驟S27和步驟S28的處理順序並不特別限於圖12中所示的順序。即，步 驟S28中的處理可以在步驟S27中的處理執行之前執行，或者步驟S27中的處理和步驟S28 中的處理可以基本上同時執行。在任一種情況下，在步驟S27和步驟S28中的處理終止之 後，處理進行到步驟S29。在步驟S29中，48Hz逐行信號生成器58逐幀地交替排列第三MHz逐行信號(並 排信號)和第四MHz逐行信號(可選信號OS)，以生成用作輸出信號的48Hz逐行信號。在步驟S30中，48Hz逐行信號生成器58將信號輸出到採用雙凸透鏡方式的3D顯 示設備44。這樣，再現處理終止。在圖12和13所示的例子中，假定採用雙凸透鏡方式的3D顯示設備44的類型與 圖8中所示示例的採用雙凸透鏡方式的3D顯示設備M的類型相同。因此，在再現設備41 中利用L基本信號LBS和R基本信號RBS生成並排信號，從而使得要提供給採用雙凸透鏡 方式的3D顯示設備44的信號類型與提供給採用雙凸透鏡方式的3D顯示設備M的信號類 型相同。然而，用於生成從三個或更多個視點(多視角)觀看的圖像所需的二維圖像2DP 並不對應於並排圖像SbSP，而是對應於L圖像LP或R圖像RP。例如，當採用圖10所示的 例子中的子圖像SuP時，L圖像LP被用作二維圖像2DP。因此，當採用雙凸透鏡方式的3D顯示設備44具有處理通過逐幀地交替排列L基 本信號LBS或R基本信號RBS及可選信號OS而生成的48Hz逐行信號的功能時，再現設備 不需要生成並排信號。在這種情況下，例如，可以配置圖13中所示的再現設備41。換句話說，圖13示出 了根據圖10所示的本發明的3D格式配置的再現設備的例子，並且該配置不同於圖11中所 示的例子的配置。即，圖13中所示的再現設備41是應用了本發明的再現設備的實施例，並 且不同於圖8和11中所示的實施例。在圖13所示的再現設備41中，省略了圖11所示的配置例中包含的並排信號生成 器57。具體而言，48Hz逐行信號生成器58逐幀地交替排列第一 MHz逐行信號(L基本信 號LBQ和MHz逐行可選信號OS以生成48Hz逐行信號，並將該48Hz逐行信號提供給採用 雙凸透鏡方式的3D顯示設備44。注意，再現設備41的其他配置與圖11中所示的例子相 同，因此省略了對其的描述。注意，圖14中示出了由圖13所示的例子中的再現設備41執行的再現處理的例子。步驟S41至步驟S44中的處理基本與圖12所示的步驟S22至步驟S24中的處理 相同。具體而言，在輸出目的地對應於採用LR圖像顯示方式的3D顯示設備43的情況下執 行的處理基本與圖12中所示的例子的處理相同。因此，省略了對這些處理的描述。具體而言，下面將描述在輸出目的地對應於採用雙凸透鏡方式的3D顯示設備44 的情況下執行的處理。在這種情況下，在步驟S41中判斷結果是肯定的。然後，讀取單元52從介質42讀 取L基本信號LBS並將L基本信號LBS提供給L基本信號解碼器53。此外，讀取單元52從 介質42讀取可選信號OS並將該可選信號OS提供給可選信號解碼器55。之後，處理進行到 步驟S45。
在步驟S45中，L基本信號解碼器53對已編碼的L基本信號LBS進行解碼以生 成第一 MHz逐行信號(L基本信號LBQ。第一 MHz逐行信號(L基本信號LBQ被提供給 48Hz逐行信號生成器58。在步驟S46中，可選信號解碼器55對已編碼的可選信號OS進行解碼以生成第二 24Hz逐行信號(可選信號0 。第二 MHz逐行信號(可選信號0 被提供給48Hz逐行信 號生成器58。注意，步驟S45中的處理和步驟S46中的處理的處理順序並不特別限於圖14中所 示的順序。即，步驟S46中的處理可以在步驟S45中的處理執行之前執行，或者步驟S45中 的處理和步驟S46中的處理可以基本上同時執行。在任一種情況下，在步驟S45和步驟S46 中的處理終止之後，處理進行到步驟S47。在步驟S47中，48Hz逐行信號生成器58逐幀地交替排列第一 MHz逐行信號(L基 本信號LBS)和第二 MHz逐行信號(可選信號OS)，以生成用作輸出信號的48Hz逐行信號。在步驟S48中，48Hz逐行信號生成器58將信號輸出到採用雙凸透鏡方式的3D顯 示設備44。這樣，再現處理終止。注意，當不用圖10所示例子的子圖像SuP，而用與圖7所示的例子具有相同格式的 子圖像SuP的視頻信號作為可選信號OS時，上述L基本信號LBS被R基本信號RBS代替。注意，除上述各種圖像的視頻信號以外，關於各種圖像的信息項(下文中稱為「元 數據」)也可以被定義為上述根據本發明的3D視頻格式。例如，如圖15所示，作為一種元數據，可以使用在L圖像LP的視點和正前方之間 以及在R圖像RP的視點和正前方之間定義的角度Θ。在圖15中，相機71L拍攝L圖像LP 並且相機71R捕獲R圖像RP。角度θ可以被記錄在介質中與記錄有編碼流不同的區域中。注意，當使用圖8中 所示的介質22時，「編碼流」對應於基本信號BS和可選信號0S，而當使用圖11和13中所 示的介質42時，「編碼流」對應於L基本信號LBS、R基本信號RBS和可選信號OS。例如，當介質對應於藍光碟時，角度θ可以例如被記錄在由藍光碟的格式定義的 剪輯信息文件的「ExtensionData(擴展數據)」中。具體而言，圖16示出了例如由「藍光碟只讀格式第3部分」定義的管理結構，並且 示出了要記錄在藍光碟中的文件的管理結構的例子。如圖16所示，文件以分層方式通過目 錄結構加以管理。在介質中，首先，生成一目錄(在圖16所示的例子中是根目錄(root))。 該目錄下的目錄被包含在由單個記錄/再現系統所管理的範圍中。目錄「BDMV」和目錄「CERTIFICATE」被設在根目錄下。作為目錄「BDMV」的下一級目錄之一，設有包含剪輯的資料庫的目錄「CLIPINF」。 具體而言，目錄「CLIPINF」包括「zzzzz. clpi」文件，這些文件是用作剪輯AV流文件的剪輯 信息文件。在文件名中，點「.」之前的部分「zzzzz」由五位數字構成，而點「.」之後的部分 「clpi」是這一類文件的固定擴展名。例如，在圖16所示的例子中，角度θ可被記錄在剪輯信息文件的ExtensionData 中。圖17示出了表示這種剪輯信息文件81的結構例子的語法。欄位typejndicator具有32比特(四字節)的數據長度並且表示該文件是剪輯信息文件。欄位versiorunumber具有32比特(四字節)的數據長度並且表示剪輯信息文 件的版本。剪輯信息文件包括CliphfoO SequenceInfo 塊、Progran^nfo ±夬、CPI 塊、ClipMark塊和ExtensionDataO塊。各自具有32比特數據長度的SequenceInfo_ start_address ^f j^；、ProgramInfo_start_address ^f j^；、CPI_start_address ^f j^；、 ClipMark_start_address 欄位禾口 ExtensionData_start_address 欄位表示相應塊的起女臺 地址。"ExtensionData_start_address"欄位表示 ExtensionDataO 塊 82 的起女臺地 址，其以從剪輯信息文件的第一字節起的相對字節數表示。相對字節數從「O」開始。或 者，當 「ExtensionData_start_address」 欄位的值為 「O」 時，「index, bdmv」 文件不包括 ExtensionData雙820ClipInfoO塊從被預留以供將來使用的區域之後的部分開始，該預留區域具有 96比特的數據長度並且跟在表示起始地址的欄位之後。在CliphfoO塊中，描述了關於 由剪輯信息文件管理的剪輯AV流的信息。例如，在Clip^ifoO塊中管理著由剪輯信息文 件管理的剪輯AV流中包含的源包數、表示剪輯AV流的類型的信息、表示最大記錄速率的信
自 AjVAjV 尼、，寸寸ο在^^仙！！⑶^^乂)塊中，描述了用於統一管理具有連續的STC和ATC(到達時間 基準)的序列的信息。在f^rogramhfoO塊中，描述了表示用於記錄剪輯信息文件中管理 的剪輯AV流的編解碼器的類型(例如MPEG2方式或者MPEG4AVC方式)的信息以及關於剪 輯AV流中包含的視頻數據的縱橫比的信息。CPI 塊存儲關於特徵點信息CPI的信息，該特徵點信息CPI表示AV流的特徵部 分，例如隨機訪問起始點。在ClipMark 塊中，描述了指派給剪輯的用作提示的索引點(跳 躍點)(例如章節位置)。在ExtensionDataO塊82中，描述了根據本發明實施例的數據， 即角度θ。注意，當角度θ的狀況被正規化(標準化)時，不需要在介質中進行記錄。在這種情況下，圖8中所示的再現設備21以及圖11和13中所示的再現設備 41 (下文中總稱為「根據本發明的再現設備」)從介質22和介質42 (下文中總稱為「根據 本發明的介質」)讀取角度θ並將角度θ發送給採用雙凸透鏡方式的3D顯示設備M和 44 (下文中總稱為「3D雙凸透鏡顯示器」)。注意，發送的方法並不受特別限制。例如，可以採用通過HDMI (高清晰度多媒體接 口)等的發送方法。注意，當角度θ的狀況被正規化(標準化)時，不需要發送。根據本發明採用雙凸透鏡方式的3D顯示設備通過利用角度θ對L圖像LP執行 轉換(映射變換)來生成並顯示從三個或更多個視點(多視角)觀看的圖像。在這種情況 下，在適當情況下還使用L圖像的深度圖像、隱藏在L圖像中包含的物體後面的圖像、以及 隱藏在物體後面的圖像的深度圖像。在圖18所示的例子中，R圖像RP被生成作為第一視 點的圖像，圖像Μ2Ρ被生成作為第二視點的圖像，圖像Μ3Ρ被生成作為第三視點的圖像，並 且圖像Μ4Ρ被生成作為第四視點的圖像。此外，不僅3D顯示設備而且一般顯示設備都可以通過利用角度θ對L圖像LP執 行轉換(映射變換)來生成並顯示圖15中所示的正面圖像DP。在這種情況下，在適當情況下還使用L圖像的深度圖像、隱藏在L圖像中包含的物體後面的圖像、以及隱藏在物體後面 的圖像的深度圖像。這裡，上述處理序列可以通過軟體及硬體執行。在這種情況下，圖19中所示的個人計算機可以用作上述信息處理系統的至少一 部分。在圖19中，CPU(中央處理單元)201根據記錄在R0M(只讀存儲器)202中的程序 或者從存儲單元208加載到RAM(隨機訪問存儲器)203的程序執行各種處理。RAM 203適 當地存儲CPU 201執行各種程序所需的數據。CPU 20UROM 202和RAM 203通過總線204彼此連接。輸入/輸出接口 205也連 接到總線204。包括鍵盤和滑鼠的輸入單元206、包括顯示器的輸出單元207、包括硬碟的存儲單 元208、以及包括數據機和終端適配器的通信單元209連接到輸入/輸出接口 205。通 信單元209控制通過網絡(包括網際網路)與另一設備(未示出)的通信。此外，適當地附接有可移動介質211(例如磁碟、光碟、磁光碟或半導體存儲器)的 驅動器210連接到輸入/輸出接口 205。從可移動介質讀取的電腦程式被適當地存儲在 存儲單元208中。當要利用軟體執行處理序列時，軟體中包含的程序通過網絡或記錄介質被安裝在 專用硬體中所含的計算機中，或者被安裝在能夠通過安裝各種程序執行各種功能的通用個 人計算機中。如圖19所示，記錄介質的例子包括可移動介質(封裝介質)211，例如磁碟(包括 軟盤)、光碟(包括⑶_R0M(緻密盤-只讀存儲器)、DVD(數字多功能盤)和藍光碟)、磁 光碟(包括MD(迷你盤))或半導體存儲器，除此之外，記錄介質的例子還包括記錄程序的 R0M202或存儲單元208中包含的硬碟，ROM 202或硬碟以預先結合在設備主體中的狀態被 提供給用戶。注意，在說明書中，記錄介質中記錄的程序的步驟不僅包括按時序以所述順序執 行的處理，還包括並行執行的處理和分開執行的處理。此外，在該說明書中，系統代表包括多個處理設備和處理器的整個設備。注意，本發明可適用於區分顯示方式、將視頻信號轉換為適合於顯示方式的視頻 信號並輸出轉換後的視頻信號的再現設備，並且該再現設備還包括不與3D顯示兼容的顯 示設備。
權利要求
1.一種數據結構，包括用在第一 3D(三維)視頻圖像顯示方式中的第一數據結構，在所述第一 3D視頻圖像顯 示方式中使用左眼用的L圖像和右眼用的R圖像，並且所述第一數據結構包括用於顯示的 與所述L圖像相對應的圖像數據及與所述R圖像相對應的圖像數據；以及用在第二 3D視頻圖像顯示方式中的第二數據結構，在所述第二 3D視頻圖像顯示方式 中至少利用二維圖像和深度圖像生成從三個或更多個視點觀看的圖像，並且所述第二數據 結構在所述第一數據結構的L圖像或R圖像被用作所述二維圖像時至少包括與所述深度圖 像相對應的圖像數據。
2.如權利要求1所述的數據結構，其中所述第二數據結構包括隱藏在所述二維圖像中包含的物體後面的圖像和該隱藏 在物體後面的圖像的深度圖像。
3.一種再現設備，其中，該再現設備再現具有以下數據結構的圖像數據，所述數據結構包括用在第一 3D(三 維)視頻圖像顯示方式中的第一數據結構和用在第二 3D視頻圖像顯示方式中的第二數據 結構，在所述第一 3D視頻圖像顯示方式中使用左眼用的L圖像和右眼用的R圖像，並且所 述第一數據結構包括用於顯示的與所述L圖像相對應的圖像數據及與所述R圖像相對應的 圖像數據，在所述第二 3D視頻圖像顯示方式中至少利用二維圖像和深度圖像生成從三個 或更多個視點觀看的圖像，並且所述第二數據結構在所述第一數據結構的L圖像或R圖像 被用作所述二維圖像時至少包括與所述深度圖像相對應的圖像數據，當要再現具有所述數據結構的圖像數據時，在使用採用所述第一 3D視頻圖像顯示方式的顯示單元的情況下，從所述第一數據結 構的圖像數據中獲得的、與所述L圖像相對應的圖像數據及與所述R圖像相對應的圖像數 據被再現，並且在使用採用所述第二 3D視頻圖像顯示方式的顯示單元的情況下，所述第一數據結構 的與所述L圖像或R圖像相對應的圖像數據被再現並且所述第二數據結構的深度圖像被再 現。
4.如權利要求3所述的再現設備，其中所述第二數據結構還包括隱藏在所述二維圖像 中包含的物體後面的圖像和該隱藏在物體後面的圖像的深度圖像，並且當使用採用所述第二 3D視頻圖像顯示方式的顯示單元時，所述再現設備除了再現所 述深度圖像以外，還再現與所述第二數據結構的圖像數據相對應的、隱藏在所述物體後面 的圖像及隱藏在所述物體後面的圖像的深度圖像。
5.一種用在再現設備中的再現方法，所述再現設備再現具有以下數據結構的圖像數 據，所述數據結構包括用在第一 3D (三維)視頻圖像顯示方式中的第一數據結構和用在第 二 3D視頻圖像顯示方式中的第二數據結構，在所述第一 3D視頻圖像顯示方式中使用左眼 用的L圖像和右眼用的R圖像，並且所述第一數據結構包括用於顯示的與所述L圖像相對 應的圖像數據及與所述R圖像相對應的圖像數據，在所述第二 3D視頻圖像顯示方式中至少 利用二維圖像和深度圖像生成從三個或更多個視點觀看的圖像，並且所述第二數據結構在 所述第一數據結構的L圖像或R圖像被用作所述二維圖像時至少包括與所述深度圖像相對 應的圖像數據，所述再現方法包括以下步驟在使用採用所述第一 3D視頻圖像顯示方式的顯示單元的情況下，再現從所述第一數 據結構的圖像數據中獲得的、與所述L圖像相對應的圖像數據及與所述R圖像相對應的圖 像數據，以及在使用採用所述第二 3D視頻圖像顯示方式的顯示單元的情況下，再現所述第一數據 結構的與所述L圖像或R圖像相對應的圖像數據並且再現所述第二數據結構的深度圖像。
6. 一種使計算機執行控制具有以下數據結構的圖像數據的再現的處理的程序，所述數 據結構包括用在第一 3D(三維)視頻圖像顯示方式中的第一數據結構和用在第二 3D視頻 圖像顯示方式中的第二數據結構，在所述第一 3D視頻圖像顯示方式中使用左眼用的L圖像 和右眼用的R圖像，並且所述第一數據結構包括用於顯示的與所述L圖像相對應的圖像數 據及與所述R圖像相對應的圖像數據，在所述第二 3D視頻圖像顯示方式中至少利用二維圖 像和深度圖像生成從三個或更多個視點觀看的圖像，並且所述第二數據結構在所述第一數 據結構的L圖像或R圖像被用作所述二維圖像時至少包括與所述深度圖像相對應的圖像數 據，所述處理包括以下步驟在使用採用所述第一 3D視頻圖像顯示方式的顯示單元的情況下，再現從所述第一數 據結構的圖像數據中獲得的、與所述L圖像相對應的圖像數據及與所述R圖像相對應的圖 像數據，以及在使用採用所述第二 3D視頻圖像顯示方式的顯示單元的情況下，再現所述第一數據 結構的與所述L圖像或R圖像相對應的圖像數據並且再現所述第二數據結構的深度圖像。
全文摘要
本發明公開了數據結構、再現設備、再現方法和程序，其可適用於各種類型的顯示器並且使在顯示器中執行的信號處理變得容易。在根據本發明的3D視頻格式中，使用並排圖像SbSP的基本信號BS及子圖像SuP的可選信號OS，其中子圖像SuP是通過將下面描述的關於並排圖像SbSP的L圖像LP的三種圖像排列在一起而獲得的。即，子圖像SbP包括L圖像的深度圖像、隱藏在L圖像中包含的物體後面的圖像以及隱藏在物體後面的圖像的深度圖像。本發明適用於3D顯示器。
文檔編號H04N13/04GK102090071SQ20098012676
公開日2011年6月8日 申請日期2009年7月17日 優先權日2008年7月18日
發明者加藤元樹, 米滿潤, 緒形昌美 申請人:索尼公司