能夠顯示立體圖像的數字廣播接收方法和裝置製造方法
2023-05-30 20:45:46 1
能夠顯示立體圖像的數字廣播接收方法和裝置製造方法
【專利摘要】本發明提供數字廣播接收方法，該方法包括以下步驟：接收和解復用包括基準時段視頻流和擴展時段視頻流的數字廣播信號；使用在節目映射表(PMT)、地面虛擬頻道表(TVCT)、服務描述表(SDT)和事件信息表(EIT)中的至少一個中設置的描述符，來確定涉及基準時段視頻流和擴展時段視頻流的右/左信息；對基準時段視頻流和擴展時段視頻流解碼；以及通過使用右/左信息控制解碼後的基準時段視頻流和擴展時段視頻流。
【專利說明】能夠顯示立體圖像的數字廣播接收方法和裝置
【技術領域】
[0001]本公開涉及數字廣播接收方法和裝置，更具體地，涉及能夠顯示立體圖像的數字廣播接收方法和裝置。
【背景技術】
[0002]最近，隨著立體成像服務的關注增加，正在開發用於提供這種立體圖像的裝置。顯示這種立體圖像的方法可以包括立體方案、體積方案、全息方案等。
[0003]立體方案的基本原理是向用戶的左眼和右眼單獨地提供彼此垂直地排列的圖像，並且通過在大腦中組合向相應的左眼和右眼提供的圖像產生立體圖像。在此，正交排列的圖像可以變為左視圖圖像和右視圖圖像。當左視圖圖像和右視圖圖像分別被左眼和右眼通過偏振眼鏡或者顯示裝置觀看時，用戶可以識別立體圖像效果。
[0004]然而，相關技術數字廣播是基於二維(2D)圖像提供的。因此，為了在數字廣播中有效地實現立體成像服務，可以考慮有效地檢查和處理立體圖像信號的方法。
【發明內容】
[0005]技術問題
[0006]因此，為了減輕這些問題，具體描述的方面是提供能夠檢查和處理用於立體圖像的信號的數字廣播接收方法，以及使用該方法的數字廣播接收裝置。
[0007]具體描述的另一個方面是提供數據配置方法和輸出控制方法，以允許能夠顯示立體(或者3D)圖像的接收裝置和能夠僅顯示二維(2D)圖像的接收裝置正確地處理信號。
[0008]具體描述的另一個方面是提供能夠通過以各種級別檢查和處理右視圖圖像和左視圖圖像而支持3D圖像顯示的數字廣播發送和接收方法以及裝置。
[0009]具體描述的另一個方面是提供在基於MVC立體編碼的3D廣播的準備中接收裝置的相關操作和進一步要求的約束或控制。
[0010]技術方案
[0011]為了實現這些和其它優點，並且根據本發明的目的，如這裡所具體實施和廣泛描述的，提供了一種數字廣播接收方法，該方法包括以下步驟:接收和解復用步驟，接收並解復用包括基本視圖視頻流和擴展視圖視頻流的數字廣播信號；確定步驟，使用在節目映射表PMT、地面虛擬頻道表TVCT、服務描述表SDT和事件信息表EIT中的至少一個中設置的描述符，來確定與所述基本視圖視頻流和所述擴展視圖視頻流相關的右/左信息；解碼步驟，對所述基本視圖視頻流和所述擴展視圖視頻流解碼；以及控制步驟，使用所述右/左信息來控制解碼後的基本視圖視頻流和擴展視圖視頻流。
[0012]根據此處公開的一個示例性實施方式，所述基本視圖視頻流和所述擴展視圖視頻流可以被設置有彼此不同的視點的視頻流區段。所述描述符可以以節目級別、事件級別和幀級別中的至少一個指示不同視點的所述視頻流區段的所述右/左信息。可以根據設定的優先級來處理關於所述節目級別、所述事件級別和所述幀級別的所述右/左信息。[0013]根據此處公開的另一個示例性實施方式，所述解碼步驟還可以包括使用補充增強信息SEI消息來確定與對應的流相關的視點信息。所述基本視圖視頻流和所述擴展視圖視頻流可以被設置有不同的視點的視頻流區段，並且所述視點信息使用幀單位、圖片單位和序列單位中的至少一個指示所述視頻流區段的視點。
[0014]為了實現這些和其它優點，並且根據本發明的目的，如這裡所具體實施和廣泛描述的，還提供了一種數字廣播接收裝置，該裝置包括:調諧器，其被構造為接收包括基本視圖視頻流和擴展視圖視頻流的數字廣播信號；解復用器，其被構造為從所述數字廣播信號解復用所述基本視圖視頻流和所述擴展視圖視頻流；PSI/PSIP處理器，其被構造為使用在節目映射表PMT、地面虛擬頻道表TVCT、服務描述表SDT和事件信息表EIT中的至少一個中包括的描述符，來確定與所述基本視圖視頻流和所述擴展視圖視頻流相關的右/左信息；解碼器，其被構造為對所述基本視圖視頻流和所述擴展視圖視頻流解碼；以及3D視頻處理器，其被構造為使用所述右/左信息來控制解碼後的基本視圖視頻流和擴展視圖視頻流。
[0015]為了實現這些和其它優點，並且根據本發明的目的，如這裡所具體實施和廣泛描述的，還提供了一種用於接收數字廣播的方法，該方法包括:提取接收到的多視圖視頻編解碼器MVC立體流的PID值，並且向解碼器輸出所述MVC立體流；根據基本視圖和擴展視圖將所述MVC立體流分配到所述解碼器的AVC層和MVC擴展層；以及通過所述AVC層和所述MVC擴展層處理在GOP中包括的接入單元，並且對基本視圖視頻數據和擴展視圖視頻數據解碼。
[0016]根據此處公開的另一個示例性實施方式，在2-PID復用模式下，所述擴展視圖視頻數據可以具有編碼片段擴展的NAL類型或者IDR圖片片段或非IDR圖片片段的NAL類型。
[0017]根據此處公開的另一個示例性實施方式，在1-PID復用模式下，根據是否存在前綴NAL單元，所述擴展視圖視頻數據可以具有不同的NAL類型。
[0018]有益效果
[0019]根據具體描述，可以按照不同方式提供與立體圖像相關的信息，並且立體圖像信息可以被檢查和處理。這可以允許輸出立體圖像。
[0020]根據具體描述，廣播接收器可以識別接收到的視頻流中包括的圖像的視點，以控制立體圖像的輸出。
[0021]根據具體描述，可以根據每個級別限定應用視圖信息的範圍，使得可在每個級別提供與左視圖圖像和右視圖圖像相關的信息。另外，可以在描述符中指示信息和對應信息的準確性。這可以允許以頻道/節目/服務/幀為單位設定在視頻流與左視圖圖像和右視圖圖像之間的關係。
【專利附圖】
【附圖說明】
[0022]圖1a和圖1b是例示根據此處公開的一個示例性實施方式的發送3D (內容)視頻流的方法的圖。
[0023]圖2是例示根據此處公開的一個示例性實施方式的處理包括補充增強信息(SEI)消息的視頻流的順序步驟的流程圖。
[0024]圖3是例示根據此處公開的一個示例性實施方式的包括視圖(點)信息元數據的SEI消息的句法結構的圖。[0025]圖4是例示根據此處公開的一個示例性實施方式的view_info_SEI_data的句法結構的圖。
[0026]圖5是例不view_info_descriptor的句法結構的圖。
[0027]圖6是例示解析信令數據的處理的概念圖。
[0028]圖7是例示使用圖6的方法來獲取視(點)信息的處理的流程圖。
[0029]圖8是例示視圖切換的各個示例性實施方式的圖。
[0030]圖9是例示針對事件邊界檢測的信令建議的概念圖。
[0031]圖10是例示使用視點信息來控制編碼圖片的3D輸出的接收裝置的結構的圖。
[0032]圖11是例示使用視點信息的解碼器和格式化器的構造的一個示例性實施方式的概念圖。
[0033]圖12是示出MVC編碼的NAL單元的類型的表。
[0034]圖13是例示2-PID模式的MVC立體廣播中的接收裝置的結構的圖。
[0035]圖14a是例示AVC層中處理基本視圖流(PID_A)的一個示例性實施方式的圖。
[0036]圖14b和圖14c是例示MVC擴展層中處理擴展視圖流(PID_B)的示例性實施方式的圖。
[0037]圖15是例示1-PID模式的MVC立體廣播中的接收裝置的圖。
[0038]圖16是例示在1-PID模式的針對GOP中包括的每個接入單元的處理順序的圖。
[0039]圖17是例示用於在2-PID模式發送3D廣播的發送裝置的數據處理過程的圖。
[0040]圖18是例示用於接收和輸出3D廣播的接收裝置的結構的圖。
【具體實施方式】
[0041]術語3-D或者3D用於說明用於再現立體圖像(或者三維圖像；在下文稱為「3D圖像」)的視覺表示或者顯示技術，其提供光學深度幻覺。相對於左視圖圖像和右視圖圖像，觀看者的視覺皮質將該兩個圖像解釋為一個3D圖像。
[0042]3D顯示技術針對可顯示3D圖像的裝置採用3D圖像處理和顯示技術。可選地，可顯示3D圖像的裝置可以要求特定觀看裝置以向觀看者有效地提供3D圖像。
[0043]3D圖像處理和顯示的示例可以包括立體圖像/視頻拍攝、使用多個相機的多視點圖像/視頻拍攝、處理2D圖像和深度信息等。可顯示3D圖像的裝置的示例可以包括液晶顯示器(IXD)、顯示器TV屏幕、計算機監視器等，全部這些設置有支持3D圖像顯示技術的適當的硬體和/或軟體。特定觀看裝置的示例可以包括特殊眼鏡、目鏡、頭盔、護目鏡等。
[0044]具體地，3D圖像顯示技術可以包括浮雕3D (通常與無源紅藍眼鏡一起使用)，偏振3D (通常與無源偏振眼鏡一起使用)、交替幀序列(通常與有源快門眼鏡/頭盔一起使用)、使用光柵或者柵欄屏幕的自動立體顯示器。此處描述的各個範圍和特徵將可應用於這些3D圖像顯示技術。
[0045]一些3D圖像顯示技術可以使用可旋轉或者可交替操作的光學裝置，例如，附接到濾色器輪的分片偏振片，並且在此情況下，要求之間的同步。其它3D圖像顯示技術可以使用基於數字微鏡器件(DMD)的數字光處理器(DLP)，DMD使用按照與要顯示的圖像的像素對應的矩形形式排列的可旋轉的微型反射鏡。
[0046]在很多公司、共同體和組織正在開發與3D圖像潤飾和顯示技術(具體地，3DTV)有關的新類型的規格，其示例包括電影電視工程師協會(SMPTE)、消費電子產品協會(CEA)、3d@Home共同體、國際電信聯盟(ITU)等。另外，諸如DVB、BDA、ARIB、ATSC、DVD論壇和IEC等的其它標準組織也參與其中。移動圖像專家組(MPEG)在參加多視圖圖像、立體圖像和具有深度信息的2D圖像的3D編碼。針對MPEG-4先進視頻編碼(AVC)的多視圖圖像編解碼器擴展的標準化正在進行中。立體圖像編碼和立體分配格式涉及顏色移位(補色立體圖)、像素次採樣(並行、棋盤、五點等)和增強視頻編碼(2D+德爾塔、2D+元數據和具有深度信息的2D)。此處描述的範圍和特徵將可應用於這些規格。
[0047]並且，此處公開的本公開的範圍和特徵的至少一部分涉及3D圖像顯示技術，其在數字圖像和3D TV的圖像再現和顯示環境的方面中描述。然而，細節不意在限制此處描述的各個特徵此處描述的各種特徵，並且可應用於各種類型的其它顯示技術和裝置。例如，3DTV技術可以不僅僅應用於TV廣播，而且應用於Blu-ray?、遊戲機臺、有線、IPTV傳輸、行動電話內容傳遞等。在此情況下，3D TV可以與其它類型的TV、機頂盒、Blu-ray裝置(例如，Blu-ray?盤(BD)播放器)、DVD播放器和TV內容分配器兼容。
[0048]在下文，將給出3D圖像處理和呈現方法的描述。立體圖像/視頻拍攝也被稱為立體成像方案，其中考慮兩個視點。使用多個相機的多視圖圖像/視頻拍攝稱為多視圖成像方案，其中考慮三個或者更多個視點。
[0049]立體成像方案設計成使用一對左右視圖圖像，其通過使用左手相機和右手相機拍攝相同目標對象獲得。多視圖成像方案設計成使用三個或者更多個圖像，所述圖像通過使用隔開預設距離或者角度的三個或者更多個相機拍攝相同目標對象獲得。通過將三個圖像中的兩個設定成左視圖圖像和右視圖圖像，多視圖成像方案可以顯示立體(3D)圖像。然而，本公開可以不限於此，而是使用三個或者更多個圖像(例如，積分成像)可以實現其它類型的3D成像方案。
[0050]立體圖像或者多視圖圖像根據包括運動圖像專家組(MPEG)在內的多種方法可以被壓縮並且被編碼，接著發送到目的地。例如，立體圖像或者多視圖圖像可以根據H.264/先進視頻編碼(AVC)被壓縮和編碼。在此，接收系統通過按照H.264/AVC的相反順序對接收到的數據解碼可以獲得3D圖像。
[0051]立體圖像或者多視圖圖像中的一個被指派成基本層的圖像，並且另一個圖像被指派成擴展層(或者延展層)的圖像。基礎層的圖像按照與單視場成像相同方式編碼。與擴展層圖像關聯，僅可以編碼和發送基礎層圖像和擴展層圖像之間的關係。針對基礎層的圖像的示例性壓縮編碼方法可以包括JPEG、MPEG-2、MPEG-4、H.264/AVC等。擴展層圖像的壓縮和編碼可以通過使用H.264/MVC(多視圖視頻編碼)來實現。
[0052]當MVC方案附加地應用於AVC方案或者僅僅使用AVC對右/左圖像序列編碼以實現立體顯示時，針對廣播相應3D內容的考慮之一是與傳統(或者相關技術)2D廣播接收裝置(或者接收器，在下文稱為「接收裝置」)的兼容。當根據後向兼容方法來對右和左圖像中的一方編碼和發送時，2D廣播接收裝置僅僅識別並且輸出對應的信號。因此，可以通過2D接收裝置觀看對應的內容。
[0053]在3D內容傳輸的一個示例性實施方式中，視圖圖像中的一個被編碼成2D兼容信號，使得2D兼容信號被發送。在此，考慮到製造商的意圖，要作為在相同內容內2D圖像發送的視頻流可以被編輯成在不同區段具有不同視點的視頻幀，使得視頻幀可被發送。在下文，參照圖1a和圖1b描述這個示例性實施方式。圖1a是例示根據此處公開的一個示例性實施方式的發送3D(內容)視頻流的方法的圖。
[0054]如圖1a所例示，其中左視圖視頻流區段和右視圖視頻流區段順序排列的視頻流是作為向後兼容編碼視頻流(或者針對2D廣播接收裝置的視頻流)的AVC編碼的視頻流(在下文，稱為第一視頻流120)。在此，視頻流區段指示不同視點的視頻流中包含的視頻流區段，並且可以按照視頻幀、圖片或者序列為單位構建這個區段。針對3D廣播接收裝置(或者接收器，在下文，稱為接收裝置)的附加視頻幀(在下文，稱為第二視頻幀130)可以按照AVC或者MVC方式編碼，並且發送。
[0055]參照圖la，左視圖圖像序列110和右視圖圖像序列140是在左視圖圖像和右視圖圖像捕捉並且編輯的圖像序列，使得製造3D內容。為了實現針對2D廣播接收裝置的顯示功能，傳輸系統選擇左視圖圖像序列110和右視圖圖像序列140中的一方，並且發送所選擇的一方。然而，如所例示的，通過選擇和排列左視圖圖像和右視圖圖像獲得的第一視頻流120和第二視頻流130可以被編碼和發送。
[0056]在此情況下，2D廣播接收裝置接收、解碼並且輸出第一視頻流120。然而，如果3D廣播接收裝置接收第一視頻流120和第二視頻流130並且在不做任何改變的情況下輸出它們，則可能產生不期望的區段，其中左視圖圖像和右視圖圖像彼此代替。也就是說，如所例示的，當在編碼後的視頻流中視點改變時，3D圖像可能不被正常輸出，除非響應於對應的視點正確地控制了 3D輸出。另外，由於支持3D輸出的準確控制，即使在2D廣播接收裝置中，也可能可以連續地輸出左視圖圖像和右視圖圖像中的僅僅一方。
[0057]問題還可能存在於例如頻道/節目/事件級別。
[0058]如圖1b所例示，當按照第一事件到第三事件的順序處理事件時，會產生根據製造商的意圖，第一視頻流120在第一事件中是左視圖圖像而在第二事件中是右視圖圖像的情況。在此情況下，第二視頻流130在第一事件中是右視圖圖像，而在第二事件中是左視圖圖像。按此方式，如果甚至在事件級別提供了用於根據編碼後的視頻流內對應的視點準確控制3D輸出的裝置，左視圖和右視圖彼此代替的信號會被處理。
[0059]本公開提出用於根據視點來準確地控制3D輸出的信號處理方法。在下文，將描述:作為信令數據的視頻信息元數據的配置和處理，該信令數據用於相對於編碼後的圖像序列以圖片、幀或者序列為單位通知對應圖像的視點；以及用於以頻道/節目/事件為單位來通知視點的描述符的配置和處理。
[0060]首先，將給出此處公開的用於在視頻基礎流(ES)中包括視圖信息數據並且發送得到的視頻ES的方法的一個示例性實施方式的描述。
[0061 ] 在使用H.264 (或者AVC)視頻數據和MVC擴展視頻數據的情況下，視頻ES可以包括補充增強信息(SEI)消息。SEI消息指示在編碼處理中是不必要的附加信息。SEI消息可以包括涉及與假設基準編碼器(HRD)相關聯的每個圖片的定時信息、涉及筆/掃描功能(讀取和顯示解碼後圖像的一些部分的功能)的信息、用於執行隨機接入而要求的信息、由用戶單獨定義的信息等。
[0062]圖2是例示根據此處公開的一個示例性實施方式的處理包括SEI消息的視頻流的順序的流程圖，以及圖3是例示根據此處公開的一個示例性實施方式的包括視圖(點)信息元數據的句法結構的圖。[0063]在附圖中例示的視頻流的處理順序中的處理接入單元的方法將描述如下。
[0064]首先，可以檢查接入單元定界符網絡提取層(NAL)單元是否存在(S210)。如果存在，則可以是第一 NAL單元。
[0065]當SEI NAL單元存在時(S220)，接下來可以是主編碼圖片。並且，當存在包括緩衝周期SEI消息的SEI NAL單元時，該緩衝周期SEI消息可以是接入單元內的第一 SEI NAL單兀的第一 SEI消息載荷。
[0066]主編碼圖片接下來可以是對應的冗餘編碼圖片。當冗餘編碼圖片存在時(S240)，可以按照redundant_pic_cnt的值的升序排列。
[0067]當序列參數集合(SPS)擴展NAL單元存在時，可以是SPS NAL單元之後的NAL單元，其具有與SPS擴展NAL單元內的seq_parameter_set_id的值相同的值。
[0068]當在不分割NAL單元的情況下存在輔助編碼圖片的一個或者更多個編碼片段時(S250)，可以跟隨主編碼圖片和全部冗餘編碼圖片。
[0069]當序列NAL單元的序列的末尾存在時，它可以跟隨主編碼圖片和全部冗餘編碼圖片，或者在不分割NAL單元的情況下跟隨輔助編碼圖片的全部編碼片段。當流NAL單元的流的末尾存在時(S270)，可以是最後NAL單元。
[0070]根據視頻解碼器處理視頻流內的SEI消息的順序，傳輸系統可以將視頻分支數據，例如，視圖信息元數據，包括在視頻ES的SEI區域中，並且發送該視頻ES，以按照圖片、幀或者序列為單位通知對應的圖像的視點。這可以得到通過視頻級別元數據實現傳輸。
[0071]針對H.264 (或者AVC)和MVC擴展視頻數據，傳輸系統通過將附加信息包括在SEI區域中可以發送附加信息。在圖3中，傳輸系統通過使用user_data_registered_itu_t_t35 O中包括的user_identifier和user_structure可以發送用於廣播應用而要求的附加信息，其中在SEI消息中SEI載荷類型值被設定為4。
[0072]ATSC_user_data可以位於user_structure內，並且傳輸系統通過參照user_data_type_code欄位可以識別對應的數據是view_info_SEI_data。接收裝置通過使用user_data_type_structure中包括的視圖分支數據句法，例如，view_info_SEI_data中包括的欄位，可以識別視圖中的哪一個被包含在對應的圖片中。
[0073]圖4是例示根據此處公開的一個示例性實施方式的view_info_SEI_data的句法結構的圖。在下文，將描述配置圖4中例示的view_info_SEI_data的各欄位。為了簡要描述，將按照原樣使用並且使用雙括號來區分配置句法的欄位的英文術語。
[0074]「left_VieW_flag」是指示包括SEI消息的圖片(或者在SEI消息之後緊接著接收到的圖片)是左視圖圖像還是右視圖圖像的欄位。如果「left_VieW_flag」被設定成「I」該圖片可以是左視圖圖像，如果「left_VieW_flag」被設定為「O」可以是右視圖圖像。
[0075]「viewjd」是指示SEI消息被應用到的相應視頻ID的欄位，並且使用相同值作為在MVC的圖片參數集合(PPS)或者序列參數集合(SPS)中設定的view_id的值，也就是說，該欄位可以用於識別SEI消息的內容應用於MVC流的哪個視點。換句話說，View_id通知與左視圖圖像和右視圖圖像匹配的數字(在下文，此處描述的視圖信息指示涉及右/左視圖圖像的信息，除非單獨說明並且通過view_id信息來區分)。
[0076]在此，本公開不限於該句法。例如，view_id欄位可以省略。當View_id欄位省略時，可以允許其中在view_info_SEI_data中設定的left_view_flag值無條件地針對基本視圖分量設定的實施方式。在此情況下，當基本視圖是左視圖圖像時，對應的視圖可以被設定成右視圖圖像。相反地，當基本視圖是右視圖圖像時，對應的視圖可以被設定成左視圖圖像。
[0077]另外，可以使得發送視圖信息元數據的方法在以下描述的各個示例性實施方式中可用。
[0078]在一個示例性實施方式中，可以在指示圖像序列的報頭圖片的瞬時解碼刷新(IDR)圖片的位置發送視圖信息元數據。與IDR圖片關聯地，因為H.264/AVC方案一般允許幀間預測，指示位於I圖片之後的P圖片引用在該I圖片前面的其它圖片，所以僅僅使用一般I圖片難以對狀態進行完全初始化，使得使用了 IDR圖片來解決這個問題。
[0079]在另一個示例性實施方式中，可以在每個圖片位置發送視圖信息元數據。或者，可以在各序列的開始位置發送視圖信息元數據。在此情況下，可以維持涉及先前視圖信息元數據的信息直至接收到新的視圖信息元數據為止。作為另一個示例性實施方式，可以在各圖片位置發送視圖信息元數據，並且對應的值在一個序列內可以被保持在相同值。也就是說，如果在針對2D視頻序列的特定區段選擇了一個視點，則視頻序列可以被編碼使得在一個序列內維持相同視點。
[0080]另外，當作為多個流發送視頻數據時，視圖信息元數據可以基本上通過被包括在基本視圖視頻流中來發送。另外，甚至對於處理擴展視圖(擴展視圖或者依存視圖(dependent view))視頻流,涉及基本視圖視頻流中包括的視點的信息可以被使用。例如，對於立體視頻流，擴展視圖視頻流的視點可以與基本視圖視頻流的視點相反。因此，甚至在處理擴展視圖視頻流的情況下，可以使用涉及基本視圖視頻流中包括的視點的信息。作為另一個示例，基本視圖視頻流還可以通過甚至包括與擴展視圖視頻流的視點有關的信息來發送。另外，視圖信息元數據可以通過被包括在擴展視圖視頻流中或者被包括在基本視頻流和依存視頻流這兩者中來發送。
[0081]另外，可以按照將右視點和左視點混合在一個幀中的方式發送立體視頻數據作為一個流。代表示例可以包括並排、上下、棋盤、水平/垂直交錯格式等。甚至在此情況下，可發送視圖SEI數據。在以2D模式輸出時，基於視圖SEI數據信息使用右視圖圖像和左視圖圖像，可以重構(重配置)2D序列，並且可以顯示2D序列。在此，使用view_id欄位的區分方法可以用於上下格式。例如，如果view_id = 「O」則可以是上方，並且如果view_id =「I」則可以是下方。
[0082]根據這裡公開的一個示例性實施方式，通過被構建成單獨分組基礎流(PES)分組，可以發送視圖信息元數據。也就是說，不同於如上所述將視圖信息元數據包括在視頻流中，如上所述，除了針對視頻流和音頻流之外，傳輸系統可以構建視圖信息元數據作為單獨獨立PES分組。
[0083]以上給出了作為用於以圖片、幀或者序列為單位通知編碼後圖像序列的視點的信令數據的視圖信息元數據的配置(構建)和處理的描述。
[0084]這種方法可以擴展到以頻道/節目/事件為單位通知視點的句法。也就是說，可以針對每個級別限定應用視點信息的範圍，使得可在每個級別提供涉及右視圖圖像和左視圖圖像的信息。在一個示例中，可以採用用於在節目專用信息(PSI)的節目映射表(PMT)中包括新描述符並且用信號通知該描述符的方法。然而，本公開可以不限於此。可以以表信息提供該描述符，諸如事件信息表(EIT)、地面虛擬頻道表(TVCT)、服務描述表(SDT)等。
[0085]作為這種描述符的句法結構，圖5例示view_info_descriptor的句法結構。
[0086]如圖5所例示,view_info_descriptor可以包括指示與視圖信息有關的信息以及對應信息的準確性的元素。
[0087]「program_level」是指示與left_view_flag中包括的對應的視頻流有關的視圖信息直到哪個級別有效的欄位。當program_level欄位被設定為「 I」時,其指示left_view_flag中包括的視圖信息被以頻道/節目/服務為單位固定，與其它欄位的值無關。也就是說，「program_level 」欄位指示視圖信息以節目級別改變。
[0088]「event_level」是指示與left_view_flag中包括的對應的視頻流有關的視圖信息直到哪個級別有效的欄位。當event_level欄位被設定成「I」時(在此,program_level欄位被設定成「O」)，其指示left_VieW_flag中包括的視圖信息按照事件為單位改變，並且可以通過與「frame_level」欄位的組合來用信號通知視圖信息是否在事件內改變。
[0089]「frame_level」是指示與left_view_flag中包括的對應的視頻流有關的視圖信息直到哪個級別有效的欄位。當frame_level欄位被設定成「I」時(在此,program_level欄位和event_level欄位被設定成「O」)，其指示left_view_flag中包括的視圖信息可以按照幀為單位改變，並且參照以下的表1將理解其細節。
[0090][表 I]
【權利要求】
1.一種數字廣播接收方法，該方法包括以下步驟: 接收和解復用步驟，接收並解復用包括基本視圖視頻流和依存視圖視頻流的數字廣播信號; 確定步驟，使用在節目映射表PMT、地面虛擬頻道表TVCT、服務描述表SDT和事件信息表EIT中的至少一個中設置的描述符，來確定與所述基本視圖視頻流和所述依存視圖視頻流相關的右/左?目息； 解碼步驟，對所述基本視圖視頻流和所述依存視圖視頻流解碼；以及 控制步驟，使用所述右/左信息來控制解碼後的基本視圖視頻流和依存視圖視頻流。
2.根據權利要求1所述的方法，其中，所述基本視圖視頻流和所述依存視圖視頻流被設置有彼此不同的視點的視頻流區段。
3.根據權利要求2所述的方法，其中，所述描述符以節目級別、事件級別和幀級別中的至少一個指示不同視點的所述視頻流區段的所述右/左信息。
4.根據權利要求3所述的方法，其中，根據設定的優先級來處理關於所述節目級別、所述事件級別和所述幀級別的所述右/左信息。
5.根據權利要求2所述的方法，其中，所述基本視圖視頻流和所述依存視圖視頻流的每一個是右視圖圖像或左視圖圖像在不同的視點的所述視頻流區段中切換。
6.根據權利要求1所述的方法，其中，所述解碼步驟還包括使用補充增強信息SEI消息來確定與對應的流相關的視點信息。
7.根據權利要求6所述的方法，其中，所述基本視圖視頻流和所述依存視圖視頻流被設置有不同的視點的視頻流區段，並且所述視點信息使用幀單位、圖片單位和序列單位中的至少一個指示所述視頻流區段的視點。
8.根據權利要求7所述的方法，其中，所述描述符還包括指示所述SEI消息是否被包括的欄位。
9.根據權利要求8所述的方法，其中，如果在所述描述符中包括的內容和在所述SEI消息中包括的內容彼此不同，則所述描述符被優先處理。
10.根據權利要求6所述的方法，其中，所述SEI消息包括通知包括所述SEI消息的圖片是左視圖圖像或右視圖圖像的欄位、和通知所述圖片應用於多視圖視頻編解碼器流的哪個視點的欄位。
11.一種數字廣播接收裝置，該裝置包括: 調諧器，其被構造為接收包括基本視圖視頻流和依存視圖視頻流的數字廣播信號； 解復用器，其被構造為從所述數字廣播信號解復用所述基本視圖視頻流和所述依存視圖視頻流； PSI/PSIP處理器，其被構造為使用在節目映射表ΡΜΤ、地面虛擬頻道表TVCT、服務描述表SDT和事件信息表EIT中的至少一個中包括的描述符，來確定與所述基本視圖視頻流和所述依存視圖視頻流相關的右/左信息； 解碼器，其被構造為對所述基本視圖視頻流和所述依存視圖視頻流解碼；以及 3D視頻處理器，其被構造為使用所述右/左信息來控制解碼後的基本視圖視頻流和依存視圖視頻流。
12.根據權利要求11所述的裝置，其中，所述基本視圖視頻流和所述依存視圖視頻流被設置有彼此不同的視點的視頻流區段，並且 其中，所述描述符以節目級別、事件級別和幀級別中的至少一個指示與不同視點的所述視頻流區段相關的所述右/左信息。
13.一種用於接收數字廣播的方法，該方法包括以下步驟: 提取接收到的多視圖視頻編解碼器MVC立體流的PID值，並且向解碼器輸出所述MVC立體流； 根據基本視圖和依存視圖將所述MVC立體流分配到所述解碼器的AVC層和MVC擴展層；以及 通過所述AVC層和所述MVC擴展層處理在GOP中包括的接入單元，並且對基本視圖視頻數據和依存視圖視頻數據解碼。
14.根據權利要求13所述的方法，其中，在2-PID復用模式下，所述擴展視圖視頻數據具有編碼片段擴展的NAL類型或者IDR圖片片段或非IDR圖片片段的NAL類型。
15.根據權利要求13所述的方法，其中，所述依存視圖的AU定界符具有與所述基本視圖的AU定界符相同的NAL類型,或者nal_unit_type = 18的專用NAL類型。
16.根據權利要求13所述的方法，其中，在1-PID復用模式下，根據是否存在前綴NAL單元，所述依存視圖視頻數據具有不同的NAL類型。
17.根據權利要求16所述的方法，其中，所述基本視圖視頻數據不包括所述前綴NAL單兀以用於向後兼容。
18.根據權利要求13所述的方法，其中，基於I圖片、P圖片和B圖片設定針對所述基本視圖和所述擴展視圖被允許的primary_pic_type和slice_type。
【文檔編號】H04N13/00GK103959768SQ201280059552
【公開日】2014年7月30日 申請日期:2012年12月4日 優先權日:2011年12月4日
【發明者】徐琮烈, 崔智鉉, 洪昊澤, 金鎮泌 申請人:Lg電子株式會社