一種視頻圖像發送方法、裝置及系統的製作方法
2023-05-20 23:30:46
專利名稱：一種視頻圖像發送方法、裝置及系統的製作方法
技術領域：
本發明涉及通信技術領域，尤其涉及一種視頻圖像發送方法、裝置及系統。
背景技術：
隨著網絡技術和視頻編碼技術的進步，具有現實感和立體感的3D顯示技術已經逐漸應用到各種通信終端，如電視、遊戲機、筆記本電腦、視頻播放器，以及手機等。使用3D 視頻播放終端可以發送3D視頻，能夠提高3D視頻業務的用戶體驗。3D視頻播放終端有兩個圖像採集單元(攝像頭)，兩個圖像採集單元同時獲取在不同角度拍攝的兩幅圖像，圖像經編碼後發送給接收方終端。接收方對接收到的圖像進行解碼，用戶感受到具有立體效果的視頻。但是，3D視頻在以某種格式表現時，帶來大量的數據。大量的數據對獲取視頻、編碼、發送，或顯示3D視頻的各個環節都提出了挑戰。在網絡技術，尤其是在無線網絡技術中，不僅帶寬資源非常缺乏，而且無線發送環境中無限終端的功率有限，大量的數據在較窄的帶寬中發送，會引起丟包以及圖像的失真，從而導致無法有效並可靠地發送3D視頻。目前，2D視頻發送過程使用H.324協議簇中的H. 263視頻通信協議進行視頻發送。 H. 263視頻通信協議是在低速率下(幾十Kbps)發送視頻的一種通信標準，使用這種通信協議發送視頻可以最大限度的減少需要發送的視頻的數據量，節省帶寬。由於3D視頻的數據量較大，在現有H. 263所要求的帶寬下，無法有效並可靠地發送3D視頻。
發明內容
本發明實施例提供了一種視頻圖像發送方法、裝置及系統，用以在現有H. 263所要求的帶寬下，可靠有效地發送3D視頻。本發明實施例提供的一種視頻圖像發送方法，應用於視頻播放設備之間的3D視頻圖像發送，包括比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。本發明實施例提供的一種視頻數圖像接收方法，包括接收終端發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。本發明實施例提供的一種視頻圖像發送裝置，包括視頻圖像比較單元，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像發送單元，在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。
4
本發明實施例提供的一種視頻圖像接收裝置，包括視頻圖像接收單元，用於接收來自網絡側的I幀視頻圖像中的與第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像生成單元，用於根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。本發明實施例提供的一種視頻圖像發送系統，包括視頻圖像發送方和視頻圖像接收方；所述視頻圖像發送方，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；以及當發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側；所述視頻圖像接收方，用於接收所述視頻圖像發送方發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。本發明實施例，通過比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；以及當發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側；所述網絡側接收所述I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像，實現了在現有H. 263所要求的帶寬下，可靠有效地發送3D視頻。
圖I為本發明實施例提供的包含遠景和近景的左視圖和右視圖；圖2為本發明實施例提供的一種視頻圖像發送方法總體流程示意圖；圖3為本發明實施例提供的一種視頻圖像接收方法總體流程示意圖；圖4為本發明實施例提供的一種視頻圖像發送方法具體流程示意圖；圖5為本發明實施例提供的H. 263圖像層的編碼結構示意圖；圖6為本發明實施例提供的H. 263塊組層的編碼結構示意圖；圖7為本發明實施例提供的宏塊層的數據結構示意圖；圖8為本發明實施例提供的一種視頻圖像接收方法具體流程示意圖；圖9為本發明實施例提供的一種視頻圖像發送裝置結構示意圖；圖10為本發明實施例提供的一種視頻圖像發送裝置結構示意圖；圖11為本發明實施例提供的一種視頻圖像接收裝置結構示意圖；圖12為本發明實施例提供的一種視頻圖像接收裝置結構示意圖；圖13為本發明實施例提供的一種視頻圖像發送系統結構示意圖。
具體實施例方式本發明實施例提供了一種視頻圖像發送方法、裝置及系統，用以在現有H. 263所要求的帶寬下，可靠有效地發送3D視頻。3D也稱為立體，基本原理為人的左眼和右眼由於觀看景象的位置不同，看到的景象具有一定差別。大腦對接收到的來自左眼和右眼的不同圖像進行處理，人感受到物體的遠近差別，對看到的視頻有了視覺立體感。3D視頻播放終端具有兩個相當於人的左眼和右眼的圖像採集單元，所述圖像採集單元可以為攝像頭。圖像採集單元可以一次採集左眼和右眼兩幅視頻圖像，將採集到的左眼視頻圖像(或左視圖)和右眼視頻圖像(或右視圖)同時傳遞給視頻播放終端的視頻編碼器，由視頻接收方對接收到的視頻圖像進行解碼並顯示3D圖像。根據成像原理得知，物體與鏡頭的距離越近，左右兩個攝像頭成像位置的差異越大。通常情況下，只有距離鏡頭比較近的圖像(也即近景)，左眼視頻圖像和右眼視頻圖像才具有明顯差異，而距離鏡頭比較遠的圖像(也即遠景)在左右眼中成像的位置之間的差距很小，可以忽略。例如參見圖1， 為左眼和右眼成像後的兩幅圖像，每幅圖像包含近景(如樹木)和遠景(如房屋)，由於左右眼觀測角度的不同，兩幅圖像顯示出的樹木與房屋的位置關係是不同的，這也是立體感產生的原因。因此，現有的3D技術設法讓人的左眼和右眼同時看到左右兩個不同的視頻畫面， 以使人感受到立體效果。目前，視頻發送過程中使用H.263通信協議，這種通信協議使用了差量發送、運動預測估計等手段對視頻進行處理，可以最大程度節省帶寬。具體地，通過I幀和P幀交替的方式發送圖像，每幀圖像最終都可以在圖像接收方生成一幅兩幅完整的圖像。所述I幀通常稱為INTRA，用於發送完整的圖像，例如發送2D視頻的一幅完整圖像，或者發送3D視頻的兩幅圖像(左眼圖像和右眼圖像)，1幀作為P幀的基準幀使用。P幀通常稱為INTER，用於發送與上一幀的差量，接收端接收到該P幀的發送的差量值，根據上一幀生成的完整圖像， 得到當前一幀的完整圖像。每間隔多個P幀發送一個I幀，以防止出錯後無基準幀無法恢復圖像。上述P幀使用了預測編碼，圖像接收方和發送方同時針對之前視頻中物體的移動特徵預測下一幅圖像中之前在移動物體的移動地點，如果預測結果正確，那麼發送方不需要發送任何數據，接收方直接根據自己的預測顯示下一幅圖像。如果預測結果不正確，即有差異，圖像發送方只需要向圖像接收方發送圖像中某一部分移動的運動向量，接收方根據自己的預測結果，再根據發送方發送的運動向量調整圖像，就能得到下一幅圖像，最大程度減少了網絡發送的數據量。由於3D視頻發送相比較2D視頻發送，每幀發送的圖像由一幅變成兩幅(左眼視頻圖像和右眼視頻圖像)，圖像的宏塊數據比之前要多一倍，I幀和P幀需都要發送相當於 2D視頻2倍的數據，大大增加了發送數據的帶寬。為了在現有的H. 263通信協議體系以儘量小的改動兼容3D格式的視頻發送，以達到有效並可靠地發送3D視頻數據。本發明實施例通過在已有的圖像編碼器前或圖像編碼器中增加左右視圖比較單元，以及在已有的解碼器後或圖像編碼器中增加左右視圖生成單
J Li ο所述左右視圖比較單元和左右視圖生成單元用於在發送I幀圖像時，只發送其中一幅完整的視圖和另一幅視圖中與所述完整視圖有差異的視圖，無需發送與所述完整圖像相同的圖像，節約帶寬。本發明實施例在發送P幀圖像時，只需要發送一套運動向量給視頻接收方。這是因為，如果視頻中的景象發生運動,左右兩幅視圖中的運動位移是一致的，即運動向量相同，只需發送一個運動向量，接收方可以將所述運動向量同時作用在左右兩幅視圖上。在發送P幀時，相比較現有技術，數據量並沒有增加。因此，本發明在現有H. 263通信協議所要求的帶寬下，就可以高效優質地發送3D視頻。下面通過附圖對本發明實施例提供的技術方案進行說明。參見圖2，本發明實施例提供的一種視頻圖像發送方法，用於發送3D視頻，該方法包括以下步驟SlOU比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；S102、在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。較佳地，在得到所述宏塊之後，發送所述宏塊之前，該方法還包括對所述第一視頻圖像以及所述宏塊進行編碼，將編碼後的視頻圖像發送給網絡側。較佳地，在發送P幀視頻圖像時，向網絡側發送用於表徵所述P幀視頻圖像相對於上一幀視頻圖像的第一視頻圖像或者第二視頻圖像的運動位移。本發明實施例中所述的網絡側為接收視頻的設備。參見圖3，本發明實施例提供的一種視頻數圖像接收方法，具體包括以下步驟S201、接收終端(視頻圖像發送方)發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；S202、根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。較佳地，根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像，具體為將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像。較佳地，所述在接收到第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊之後，生成所述第二視頻圖像之前，該方法還包括對所述第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊進行解碼。較佳地，所述視頻圖像接收方法還包括接收終端發送的P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移；以及根據所述一套運動向量，對上一幀視頻圖像中的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。下面結合附圖分別說明本發明實施例提供的發送視頻圖像的過程和接收視頻圖像的過程。為描述方便，下面提到的發送方為發送視頻圖像終端設備，接收方為網絡側接收視頻圖像的設備，所述發送方設備或接收方設備可以為任何支持3D視頻的視頻播放設備。 以及所提到的左視圖為左眼視頻圖像，右視圖為右眼視頻圖像。當視頻播放設備作為發送方，用於發送視頻圖像時，本發明實施例提供的視頻播放設備發送視頻的方法，具體流程如圖4所示，包括步驟S301、發送方採集左視圖和右視圖。具體地，視頻播放設備上的兩個視頻採集單元，如攝像頭，以不同的角度(一般為左右兩個攝像頭)採集某一時刻的兩幅視頻圖像，圖像A和圖像B，每幅圖像中包括遠景和近景。所述遠景一般為視頻畫面中的背景或者離鏡頭較遠的景象。左右兩個視圖中的遠景在整個視圖中的位置幾乎沒有差異。其中，左右兩個攝像頭成像的位置差異不超過一定像素則認為沒有差異，如不超過2個像素或I個像素為沒有差異。同理，所述近景為視頻畫面中的離鏡頭較近的景象。近景成像的位置差異較大。因此，本發明實施例中視頻圖像的發送過程中，I幀的遠景無需重複發送。S302、比較所述左視圖和右視圖，得到左視圖中與右視圖有差異的圖像的宏塊。所述宏塊為左右視圖中成像位置有差異的宏塊。具體地，視頻播放設備中，置於圖像編碼器中或獨立於所述圖像編碼器的圖像比較單元，對左視圖和右視圖中的宏塊進行匹配，找出左視圖和右視圖中有差異的宏塊。例如，找出左視圖相對於右視圖，與右視圖有差異的宏塊。S303、圖像編碼器對所述宏塊和右視圖進行編碼。如圖5中的H. 263圖像層的編碼結構，當圖像層的編碼結構中用於表示圖像類型的PTYPE中的第九個bit為「I」時，代表該幀圖像為INTRA編碼，即I幀編碼。當PTYPE中的第九個bit為「O」時，代表該幀圖像為INTER編碼，即P幀編碼。I幀編碼在本發明實施例所述的I幀中同時包含了兩幅視圖，一幅為完整的視圖，如所述右視圖，一幅為不完整的視圖，如左視圖中與右視圖有差異的宏塊，也即宏塊。具體地，I幀的塊組(group of blocks)包含了左右兩幅視圖的圖像信息，其中右視圖是完整的圖像，左視圖在實際數據中只包含與右視圖在像素層面有差異的部分。如圖6中H. 263塊組層的編碼結構，在現有的H. 263中，I巾貞中的一個塊組數據(macroblock data)包含一個圖像的所有宏塊。本發明實施例中，一個塊組數據僅包含一幅視圖中的遠景宏塊和近景宏塊，以及另一幅視圖中與近景宏塊有差異的宏塊，省去了對其中一幅視圖的遠景宏塊和該視圖中部分近景宏塊(該部分近景宏塊為與另一視圖中近景宏塊相同的宏塊)。本發明實施例，相比較同時編碼包含有兩幅完整視圖的I幀3D視圖，大大降低了編碼器編碼圖像的數據量，也降低了 3D視頻圖像數據的發送量。相比較編碼一幅圖像的I幀2D視圖，僅僅增加了數據量較小的宏塊，幾乎沒有增加網絡發送的帶寬。圖像編碼技術中，對圖像的編碼包括I巾貞編碼、P巾貞編碼和PB巾貞編碼等。下面簡單說明本發明對P幀編碼的過程。P幀編碼P幀是進行運動預測與差量發送的幀，結合運動預測與補償，只發送每一塊圖像與預測有差異的差量。參見圖7所示的宏塊層的數據結構示意圖，如果某個宏塊預測與實際完全相同， 則在該宏塊層的COD為0，後面不再發送數據。否則，COD為1，並發送運動向量或者發送運動向量與塊數據。本發明實施例在編碼P幀圖像時，當接收到所述宏塊和右視圖時，不進行任何處理。本發明實施例在發送P幀的過程中包括如下兩種情況I、當視頻圖像中的圖像沒有發生運動時，左視圖和右視圖都未發生改變，也即運動預測值正確，與上一幀得到的圖像的差量為零，則發送方不需要發送任何數據，接收方直接根據自己的預測顯示下一幅圖像。2、當視頻圖像中的圖像發生運動時，運動向量與運動預測有所差別，同時，圖像本身並未發生突變，則P幀僅僅發送一套運動向量，該一套運動向量為左視圖的運動向量或者右視圖的運動向量，發送左視圖還是右視圖的運動向量都是一樣的，這是因為，一旦視頻中的景象發生運動，左右兩幅視圖中的運動位移是一致的，運動向量也是相同的，因此只傳
輸一套運動矢量。接收方接收到所述運動向量時，作用在已經解碼的左視圖和右視圖上。S304、將所述編碼後的宏塊和右視圖發送給接收方。該宏塊和右視圖屬於I幀圖像。當視頻播放設備作為接收方，用於接收視頻圖像時，本發明實施例提供的視頻播放設備接收視頻的方法，具體流程如圖8所示，包括步驟S401、接收發送方發送的I幀視頻圖像，具體地，接收所述宏塊和右視圖。S402、對所述I幀視頻圖像進行解碼。具體地，對接收到的完整視圖(如右視圖)和不完整的視圖(如只包含差異宏塊的視圖)按照正常解碼方式進行解碼。S403、生成完整的左視圖。具體地，視頻圖像生成單元通過將解碼後的右視圖中與左視圖相同的宏塊，與所述左視圖與右視圖有差異的宏塊進行拼接，生成一幅完整的左視圖。或者通過將右視圖中與左視圖相同的宏塊添加到所述不完整的左視圖中。需要說明的是，本發明對P幀進行解碼時，具體為當接收到發送方的一套運動向量時，將該運動向量作用到上一幀的左右兩幅視圖上，生成新的完整的左右兩幅視圖。參見圖9，本發明實施例提供的一種視頻發送裝置，包括視頻圖像比較單元11，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像發送單元12，發送I幀視頻時，將所述第一視頻圖像以及所述宏塊發送給網絡側。較佳地，所述視頻圖像發送單元12還用於在發送P幀視頻圖像時，向網絡側發送用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中第一視頻圖像或第二視頻圖像的運動位移。參見圖10,所述裝置還包括視頻圖像編碼單元13，該視頻圖像編碼單元13可以包括在所述視頻圖像比較單元11內，也可以是獨立於所述視頻圖像比較單元11，用於對所述第一視頻圖像以及所述宏塊進行編碼，將所述編碼後的視頻圖像發送給網絡側；視頻圖像接收單元14，用於接收來自網絡側的I幀視頻圖像中的與第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；以及接收P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移；視頻圖像生成單元15，用於根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像，具體地，將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像
9中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像；以及根據所述一套運動向量，對上一幀的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。視頻圖像解碼單元16，用於對所述第一視頻圖像以及所述宏塊進行解碼。參見圖11，本發明實施例提供的一種視頻圖像接收裝置，包括視頻圖像接收單元21，用於接收來自網絡側的I幀視頻圖像中的與第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；以及接收P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移。視頻圖像生成單元22，用於根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像，具體地，將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像；以及根據所述一套運動向量，對上一幀的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。參見圖12，所述視頻圖像發送裝置，還包括視頻圖像解碼單元23，用於對所述第一視頻圖像以及所述宏塊進行解碼。參見圖13，本發明實施例提供的一種視頻圖像發送系統，包括視頻圖像發送方 33和視頻圖像接收方34 ；視頻圖像發送方31，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；以及當發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側；視頻圖像接收方32，用於接收所述視頻圖像發送方發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。本發明實施例提供的發送3D視頻的裝置，可以適用於發送2D視頻，具體地，在進行2D視頻發送的過程中，關閉一個圖像採集單元，同時視頻圖像比較單元11對接收到的2D 視頻圖像不做任何處理，並將所述2D視頻圖像發送給編碼器進行編碼；接收方的視頻圖像生成單元13對接收到的2D圖像不做任何處理，直接顯示2D視頻。本發明實施例提供的3D視頻發送的方法及裝置，在現有的H. 263協議下，能夠兼容2D與3D視頻發送使得用戶能夠相互根據機型特徵發送。需要說明的是，在H. 245 (H. 324協議簇中的通話控制協議)中應添加3D2D或/和 3D視頻播放支持能力，對宏塊的數量進行握手約定，避免通信出錯。當移動終端都支持雙攝像頭3D可視電話時，通過H. 245握手成功，才會啟動3D可視電話。當一方不支持該功能握手失敗時，視頻部分仍然以原有H. 263協議的要求進行編解碼。綜上所述，本發明實施例，通過在已有的圖像編碼器前或圖像編碼器中增加左右視圖比較單元，以及在已有的解碼器後或圖像編碼器中增加左右視圖生成單元。所述左右視圖比較單元和左右視圖生成單元用於在發送I幀圖像時，只發送其中一幅完整的視圖和另一幅視圖中與所述完整視圖有差異的視圖，無需發送與所述完整圖像相同的部分圖像。 在發送P幀圖像時，只需要發送一幀中的一幅視圖的運動向量給視頻接收方。也就是說，發送3D視頻的P幀所耗的數據量與發送2D視頻所耗的數據量完全相同。發送3D視頻的I幀所耗的數據量比發送2D視頻所耗的數據量稍多。在現有H. 263通信協議所要求的帶寬下，最大程度的在保證3D圖像發送的基礎上節省了帶寬，並能高效優質地發送3D視頻。本領域內的技術人員應明白，本發明的實施例可提供為方法、系統、或電腦程式產品。因此，本發明可採用完全硬體實施例、完全軟體實施例、或結合軟體和硬體方面的實施例的形式。而且，本發明可採用在一個或多個其中包含有計算機可用程序代碼的計算機可用存儲吐介質(包括但不限於磁碟存儲器和光學存儲器等)上實施的電腦程式產品的形式。本發明是參照根據本發明實施例的方法、設備(系統)、和電腦程式產品的流程圖和/或方框圖來描述的。應理解可由電腦程式指令實現流程圖和/或方框圖中的每一流程和/或方框、以及流程圖和/或方框圖中的流程和/或方框的結合。可提供這些電腦程式指令到通用計算機、專用計算機、嵌入式處理機或其他可編程數據處理設備的處理器以產生一個機器，使得通過計算機或其他可編程數據處理設備的處理器執行的指令產生用於實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的裝置。這些電腦程式指令也可存儲在能引導計算機或其他可編程數據處理設備以特定方式工作的計算機可讀存儲器中，使得存儲在該計算機可讀存儲器中的指令產生包括指令裝置的製造品，該指令裝置實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能。這些電腦程式指令也可裝載到計算機或其他可編程數據處理設備上，使得在計算機或其他可編程設備上執行一系列操作步驟以產生計算機實現的處理，從而在計算機或其他可編程設備上執行的指令提供用於實現在流程圖一個流程或多個流程和/或方框圖一個方框或多個方框中指定的功能的步驟。顯然，本領域的技術人員可以對本發明進行各種改動和變型而不脫離本發明的精神和範圍。這樣，倘若本發明的這些修改和變型屬於本發明權利要求及其等同技術的範圍之內，則本發明也意圖包含這些改動和變型在內。
1權利要求
1.一種視頻圖像發送方法，應用於視頻播放設備之間的3D視頻圖像發送，其特徵在於，該方法包括比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。
2.根據權利要求I所述的方法，其特徵在於，在得到所述宏塊之後，發送所述宏塊之前，該方法還包括對所述第一視頻圖像以及所述宏塊進行編碼，將編碼後的視頻圖像發送給網絡側。
3.根據權利要求I所述的方法，其特徵在於，該方法還包括在發送P幀視頻圖像時， 向網絡側發送用於表徵所述P幀視頻圖像相對於上一幀視頻圖像的第一視頻圖像或者第二視頻圖像的運動位移。
4.一種視頻數圖像接收方法，其特徵在於，該方法包括接收終端發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。
5.根據權利要求4所述的方法，其特徵在於，根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像，具體為將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像。
6.根據權利要求4或5所述的方法，其特徵在於，所述在接收到第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊之後，生成所述第二視頻圖像之前，該方法還包括對所述第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊進行解碼。
7.根據權利要求4所述的方法，其特徵在於，該方法還包括接收終端發送的P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移。
8.根據權利要求7所述的方法，其特徵在於，該方法還包括根據所述一套運動向量，對上一幀視頻圖像中的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。
9.一種視頻圖像發送裝置，其特徵在於，該裝置包括視頻圖像比較單元，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像發送單元，在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。
10.根據權利要求9所述的裝置，其特徵在於，該裝置還包括視頻圖像編碼單元，用於對所述第一視頻圖像以及所述宏塊進行編碼，將所述編碼後的視頻圖像發送給網絡側。
11.根據權利要求9所述的裝置，其特徵在於，視頻圖像發送單元還用於在發送P幀視頻圖像時，向網絡側發送用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中第一視頻圖像或第二視頻圖像的運動位移。
12.根據權利要求9所述的裝置，其特徵在於，該裝置還包括視頻圖像接收單元，用於接收來自網絡側的I幀視頻圖像中的與第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像生成單元，用於根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。
13.根據權利要求12所述的裝置，其特徵在於，視頻圖像生成單元具體用於將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像。
14.根據權利要求9所述的裝置，其特徵在於，該裝置還包括視頻圖像解碼單元，用於對所述第一視頻圖像以及所述宏塊進行解碼。
15.根據權利要求12所述的裝置，其特徵在於，所述視頻圖像接收單元還用於接收P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移。
16.根據權利要求12所述的裝置，其特徵在於，所述視頻圖像生成單元還用於根據所述一套運動向量，對上一幀的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。
17.—種視頻圖像接收裝置，其特徵在於，該裝置包括視頻圖像接收單元，用於接收來自網絡側的I幀視頻圖像中的與第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；視頻圖像生成單元，用於根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。
18.根據權利要求17所述的裝置，其特徵在於，視頻圖像生成單元具體用於將所述第一視頻圖像中與第二視頻圖像相同的宏塊，與所述第二視頻圖像中與第一視頻圖像有差異的宏塊進行拼接，生成第二視頻圖像。
19.根據權利要求17所述的裝置，其特徵在於，該裝置還包括視頻圖像解碼單元，用於對所述第一視頻圖像以及所述宏塊進行解碼。
20.根據權利要求17所述的裝置，其特徵在於，所述視頻圖像接收單元還用於接收P幀視頻圖像中用於表徵所述P幀視頻圖像相對於上一幀視頻圖像中的第一視頻圖像或第二視頻圖像的運動位移。
21.根據權利要求17所述的裝置，其特徵在於，所述視頻圖像生成單元還用於根據所述一套運動向量，對上一幀的第一視頻圖像與第二視頻圖像進行運動預測補償，生成當前幀的第一視頻圖像與第二視頻圖像。
22.一種視頻圖像發送系統，其特徵在於，包括視頻圖像發送方和視頻圖像接收方； 所述視頻圖像發送方，用於比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；以及當發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側；所述視頻圖像接收方，用於接收所述視頻圖像發送方發送的I幀視頻圖像中的第一視頻圖像以及第二視頻圖像中與第一視頻圖像有差異的宏塊；根據所述第一視頻圖像以及所述宏塊生成所述第二視頻圖像。
全文摘要
本發明公開了一種視頻圖像發送方法、裝置及系統，涉及通信技術領域，用以在現有H.263所要求的帶寬下，可靠有效地發送3D視頻。本發明提供的一種視頻圖像發送方法，應用於視頻播放設備之間的3D視頻圖像發送，包括比較採集到的第一視頻圖像和第二視頻圖像，得到第二視頻圖像中與第一視頻圖像有差異的宏塊；在發送I幀視頻圖像時，將所述第一視頻圖像以及所述宏塊發送給網絡側。
文檔編號H04N7/50GK102595164SQ20121004594
公開日2012年7月18日 申請日期2012年2月27日 優先權日2012年2月27日
發明者房穩 申請人:中興通訊股份有限公司