一種多媒體數據的傳輸方法及電子設備的製作方法
2023-10-22 17:59:37 1
一種多媒體數據的傳輸方法及電子設備的製作方法
【專利摘要】本發明公開了一種多媒體數據的傳輸方法及電子設備，當第一終端向第二終端發送多媒體數據之前，該方法包括：根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據；通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；將所述第三數據和所述第四數據發送到所述第二終端，使第二終端根據與所述劃分策略對應的組合策略將所述第三數據和第四數據組合。本發明公開的方法和裝置在減小傳輸數據量的同時還能夠保持關注區域的視頻質量。
【專利說明】一種多媒體數據的傳輸方法及電子設備
【技術領域】
[0001]本發明涉及電子信息【技術領域】，尤其涉及一種多媒體數據的傳輸方法及電子設備。
【背景技術】
[0002]目前，視頻技術的應用範圍很廣，如網上可視會議、網上可視電子商務、網上政務、網上購物、網上學校、遠程醫療、網上研討會、網上展示廳、個人網上聊天、可視諮詢等業務。
[0003]例如，現有的生活環境中，當用戶A與用戶B進行Mobile或頂視頻通話，在通信帶寬有限的情況下，清晰度越高所需傳輸數據的量越大，從而則會使得傳輸流暢性越差，相同傳輸時長數據量越大。
[0004]現有技術中解決上述問題時，一般會採取降低視頻源解析度，降低清晰度和每幀圖像的數據大小的方法。但是通過上述方法雖然能實現提高多媒體數據的傳輸效率但是接收方接收到數據後的顯示效果會比較差。
【發明內容】
[0005]本發明提供一種多媒體數據的傳輸方法及電子設備，本發明所提供的方法和裝置解決現有技術中多媒體數據的傳輸效率和顯示效果不能同時兼備的問題。
[0006]本發明提供一種多媒體數據的傳輸方法，應用於第一終端，當所述第一終端向第二終端發送多媒體數據之前，該方法包括:
[0007]根據預設的數據劃分策略將待傳輸的多媒體數據劃分為第一數據和第二數據；
[0008]通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，且所述第一處理方式與所述第二處理方式不同；
[0009]將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
[0010]所述第三數據所對應的第三數據量減去所述第一數據對應的第一數據量得到第一差值；所述第四數據所對應的第四數據量減去所述第二數據對應的第二數據量得到第二差值；且所述第一差值大於所述第二差值。
[0011 ] 通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括:
[0012]通過所述第一處理方式對所述第一數據進行處理得到所述第三數據，所述第一數據量與所述第三數據量相等；
[0013]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數
據量小於所述第二數據量。[0014]通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括:
[0015]通過所述第一處理方式對所述第一數據進行處理得到所述第三數據，所述第三數據量小於所述第一數據量；
[0016]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數據量小於所述第二數據量；
[0017]其中，所述第三數據量與所述第一數據量的第一比值大於所述第四數據量與所述第二數據量的第二比值。
[0018]通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括:
[0019]通過所訴第一處理方式對所述第一數據進行處理得到所述第三數據，所述第三數據量大於所述第一數據量；
[0020]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第二數據量大於所述第四數據量；
[0021]其中，所述第三數據量減去所述第一數據量的第一差值小於所述第二數據量減去所述第四數據量的第三差值。
[0022]所述通過第二處理方式對所述第二數據進行處理得到第四數據，所述第二數據的數據量小於所述第四數據的數據量包括:
[0023]根據所述第一差值，確定所述第四數據量的上限閾值；
[0024]根據所述第四數據量上限閾值，通過所述第二處理方式對所述第二數據進行處理得到所述第四數據。
[0025]當所述待傳輸多媒體數據為圖像數據，第一終端根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據包括:
[0026]根據圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
[0027]根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域之前，進一步包括:
[0028]第一終端生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0029]生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息包括:
[0030]接收用戶的輸入信息；
[0031]根據所述輸入信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0032]生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息包括:
[0033]通過圖像識別方式從幀畫面中確定目標區域的邊界信息；
[0034]根據所述邊界信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0035]根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括:
[0036]根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；[0037]所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0038]所述根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括:
[0039]根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；
[0040]確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象；
[0041]將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0042]當所述待傳輸多媒體數據為音頻數據，第一終端根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據包括:
[0043]根據預設的聲音選擇信息，確定所述音頻數據中的通話音數據和背景音數據；
[0044]其中，所述通話音數據對應所述第一數據，所述背景音數據對應所述第二數據。
[0045]—種電子設備，當該電子設備向第二電子設備發送多媒體數據，電子設備包括:
[0046]數據劃分單元，用於根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據；
[0047]數據轉換單元，用於通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；
[0048]數據傳輸單元，用於將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
[0049]當所述待傳輸多媒體數據為圖像數據，則所述數據劃分單元還用於將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
[0050]則所述數據劃分單元還用於生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0051]該裝置還包括:
[0052]第二圖像劃分信息生成單元，用於接通過圖像識別方式從幀畫面中確定目標區域的邊界信息；根據所述邊界信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信
肩、O
[0053]將該裝置還包括:
[0054]第二圖像劃分信息生成單元，用於通過數據傳輸通道接收第二終端發送來的將待傳輸圖像數據中的幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0055]則所述數據劃分單元還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0056]則所述數據劃分單元還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象；將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0057]上述技術方案中的一個或兩個，至少具有如下技術效果:
[0058]本發明實施例所提供的方法和裝置通過根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據；通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；將所述第三數據和所述第四數據發送到所述第二終端，使第二終端根據與所述劃分策略對應的組合策略將所述第一數據和第二數據組合的方式；在減小傳輸數據量的同時還能夠保持關注區域的視頻質量。
【專利附圖】
【附圖說明】
[0059]圖1為本發明實施例一種多媒體數據的傳輸方法的流程圖；
[0060]圖2為本發明實施例中通過用戶數據的圖像劃分信息對圖像數據進行劃分的方法流程圖；
[0061]圖3為本發明實施例中通過圖像識別方式對圖像數據進行劃分的方法流程圖；
[0062]圖4為本發明實施例中對音頻數據進行劃分的方法流程圖；
[0063]圖5為本發明實施例(一)將所述圖像數據中的幀畫面劃分為第一區域和第二區域；
[0064]圖6為本發明實施例(二)將所述圖像數據中的幀畫面劃分為第一區域和第二區域；
[0065]圖6A為本發明實施例中圖像劃分的示意圖；
[0066]圖7為本發明實施例一種電子設備的結構示意圖。
【具體實施方式】
[0067]本發明實施例提供一種多媒體數據的傳輸方法，應用於第一終端，其當所述第一終端向第二終端發送多媒體數據之前，該方法包括:根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據；通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；將所述第三數據和所述第四數據發送到所述第二終端，使第二終端根據與所述劃分策略對應的組合策略將所述第一數據和第二數據組合。
[0068]如圖1所示，本發明實施例提供一種多媒體數據的傳輸方法，下面結合說明書附圖對本發明的【具體實施方式】進行詳細說明:
[0069]隨著電子設備的智能化的提高以及手機功能的多樣化，使得網絡數據傳輸的數據量大幅度增加，為了達到數據傳輸穩定性的同時減少數據量的傳輸，本發明實施例提供以下方案:
[0070]在本發明實施例中，需要減少整個傳輸數據的數據量，所以啟動數據分塊壓縮的方式，需要首先判定當前系統的是否滿足預訂條件。具體的預定條件可以是:用戶手動觸發某一物理鍵，或者電子設備的通信質量下降，或者確定電子設備的通信費用超過閾值。
[0071]應用於第一終端，當所述第一終端向第二終端發送多媒體數據之前，該方法包括:
[0072]步驟101，根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據；
[0073]因為具體的實現環境中，會存在大量數據傳輸的情況一般是圖像數據、視頻數據和音頻數據。其中所述視頻數據則可視為圖像數據和音頻數據的集合，所以本發明實施例中將圖像數據和音頻數據劃分為第一數據和第二數據的具體實現方式可以包括:
[0074]對於圖像數據:
[0075]接收用戶輸入的圖像劃分信息；根據所述圖像劃分信息，將所述圖像數據中幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應第一數據，所述第二區域的圖像數據對應第二數據(在該實施例中可以是第一數據對應目標數據，第二數據對應背景數據)。
[0076]對於音頻數據:
[0077]根據預設的聲音選擇信息，確定所述音頻數據中的目標音數據和背景數據，其中，目標數據對應第一數據，背景數據對應第二數據。
[0078]例如:若第一終端與第二終端正在進行視頻通話，則兩個正在進行通話的用戶所產生的通話音為目標音頻數據，而除開目標用戶通話音的音頻數據，則可被定義為背景音數據。則在該實施例中通話音數據和背景音數據分別對應第一數據和第二數據。
[0079]步驟102，通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；
[0080]在本發明實施例中，所述第一處理方式和第二處理方式分別對應調整所述第一數據和第二數據的數據量。在本發明實施例中對於背景數據的處理方式可以是直接丟棄。
[0081]步驟103，將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
[0082]因為在本發明實施例中，將原來完整的數據進行劃分後生成了第一數據和第二數據，所以為了使第二終端接收到處理後的第三數據和第四數據後根據與所述劃分策略對應的組合策略將所述第三數據和第四數據組合形成完整的能夠進行播放的多媒體數據，在該實施例中以圖像數據為例，第二終端組合第三數據和第四數據的方式可以是:
[0083]第一終端向第二終端發送數據時，以幀畫面為單位將每幀圖像對應的所述第三數據和所述第四數據進行組合發送到第二終端；
[0084]第二終端接收到所述第三數據和第四數據後以幀畫面為單位將每幀圖像的第三數據和第四數據進行組合形成完整的幀圖像數據。
[0085]在該實施例中，如果在步驟102中將第二數據丟棄，則在第二終端則可以調用預設的圖像數據填充幀圖像中第二數據所佔區域。為了便於實現還可以在幀圖像中第二數據所佔區域填充默認顏色。
[0086]如果將音頻數據劃分為了目標數據和背景數據兩個部分，為了在第二終端能夠將兩部分數據組合，則在該實施例中還可以分別根據目標數據和背景數據的生成時間，將待傳輸的目標數據和背景數據分成多塊。然後第二終端接收到傳輸數據後根據目標數據和背景數據的時間，將時間相同的目標數據和背景數據合併在一起形成完整的數據。
[0087]在該實施例中，如果在步驟102中將第二數據丟棄，則在第二終端則可以調用預設的背景音數據與目標數據結合播放；也可以直接播放目標數據。
[0088]在本發明實施例中，通過預設的數據劃分策略將待傳輸的數據分成兩部分(一部分為目標數據，一部分為背景數據等輔助數據)後，對兩部分數據分別進行處理使得一部分數據的數據量小於原始採集來的數據(在具體實現時，可以利用數據壓縮的方式對輔助數據進行壓縮，使得輔助數據的數據量明顯減小)。
[0089]本發明實施例中，總體要達的目的是將待傳輸數據的總體數據量減小，並且在數據量減小時，需要根據用戶對數據的不同需求，減小背景數據對應的數據量，並且保證目標數據能夠高保真的傳輸，即使目標數據在傳輸時需要壓縮，該目標數據的壓縮量也小於背景數據的壓縮量。
[0090]在本發明實施例中，目標數據和背景數據的劃分可以是根據用戶對數據的關注度確定的，目標數據可以是用戶關注度高的數據，背景數據為用戶關注度低的數據，且所述第一差值大於所述第二差值，所述第三數據所對應的第三數據量減去所述第一數據對應的第一數據量得到第一差值；所述第四數據所對應的第四數據量減去所述第二數據對應的第二數據量得到第二差值，具體實現包括以下三種方式:
[0091]a，根據用戶對待傳輸數據的不同關注度，可以對第一數據和第二數據中的任一部分數據的數據量進行調整，該處以第一數據為用戶關注度高的數據為例，則實現數據量改變的方法包括:
[0092]通過所述第一處理方式對所述第一數據進行處理得到所述第三數據，所述第一數據量與所述第三數據量相等；
[0093]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數
據量小於所述第二數據量。
[0094]在該實施例中，第二處理方式可以是數據壓縮方式，因為用戶對第二數據的關注度比第一數據的要低，所以採用數據壓縮方式對第二數據進行壓縮(若第二數據量為10單位，經過壓縮過後的第四數據量可以是6單位)。使得第一終端向第二終端發送數據時，所傳送的第三數據和第四數據對應的第三數據量(可取值10單位)與第四數據量(可取值6單位)的總和(16單位)比第一數據量(可取值10單位)與第二數據量(可取值10單位)的總和(20單位)要小。
[0095]b，根據用戶關注度對數據的不同關注度，可以對第一數據和第二數據的數據量都調小，該處以第一圖像數據為用戶關注度高的數據為例，則實現數據量改變的方法包括:
[0096]通過所述第一處理方式對所述第一數據進行處理得到所述第三數據，所述第三數據量小於所述第一數據量；
[0097]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數據量小於所述第二數據量；[0098]其中，所述第三數據量與所述第一數據量的第一比值大於所述第四數據量與所述第二數據量的第二比值。
[0099]在該實施例中，第二處理方式和第一處理方式可是採用數據壓縮，因為用戶對第二數據的關注度比第一數據的要低，所以第二處理方式和第一處理方式可以採用不同數據壓縮比對第二數據和第一數據進行壓縮(若第一數據量為10單位，經過壓縮過後的第三數據量可以是8單位；第二數據量為10單位，經過壓縮過後的第四數據量可以是6單位)。使得第一終端向第二終端發送數據時，所傳送的第三數據量(8單位)與第四數據量出單位)的總和(14單位)比第一數據量(10單位)與第二數據量(10單位)的總和(20單位)要小；而且在該實施例中第一數據的數據壓縮比(第三數據量/第一數據量=8/10)要小於第二數據的數據壓縮比(第四數據量/第二數據量=6/10)。
[0100]C，根據用戶關注度對數據的不同關注度，可以對第一數據和第二數據中一份數據的數據量增加，另外一份數據的數據量減小，該處以第一圖像數據為用戶關注度高的數據為例，則實現數據量改變的方法包括:
[0101]通過所訴第一處理方式對所述第一數據進行處理得到所述第三數據，所述第三數據量大於所述第一數據量；
[0102]在具體的實施過程中，在確定第一數據為用戶關注度高的數據後，如果第一處理方式是為了增加第一數據的播放效果而增加一些附加信息到第一數據中，則第一數據經過第一處理方式處理後生成的第三數據的數據量會大於第一數據量。
[0103]通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第二數據量大於所述第四數據量；
[0104]其中，所述第三數據量減去所述第一數據量的第一差值小於所述第二數據量減去所述第四數據量的第三差值。
[0105]在該實施例中，第一處理方式可以是對第一數據進行效果處理(防止數據丟失將關注數據傳送兩份，或者額外增加校驗數據，或者發送冗餘數據)，則通過第一方式對第一數據進行處理後得到的第三數據的第三數據量會大於第一數據量，則所述第一數據量可以是10單位，則第三數據量可以是12單位。另外，為了實現整個待傳輸數據的數據量不增加，則第二處理方式對第二數據進行處理後得到的第四數據的數據量則需要減小，即所述第二數據量可以是10單位，則第四數據量可以是8單位(或者是小於8單位)。
[0106]為了不增加傳輸過程中的數據量，則在第三數據的數據量相對於第一數據的第一數據量增加的基礎上，對應的需要將第二數據的數據量減小生成第四數據。
[0107]針對上述c方式在第一數據的數據量增加和第二數據的數據量減小時，可以通過以下方式實現數據量增加和減少的平衡:
[0108]確定第三數據的第三數據與第一數據的第一數據量的數據量差值；
[0109]根據所述數據量差值，確定所述第四數據的數據量的上限閾值；
[0110]根據所述數據量上限閾值，通過第二處理方式對第二數據進行處理得到第四數據。
[0111]在本發明實施例中針對圖像數據和音頻數據在劃分第一數據和第二數據時通過不同的方式實現。本發明實施例中對於步驟101根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據可以是:[0112]根據圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
[0113]如圖2所示，在本發明實施例中，根據圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域的具體實現方式包括:
[0114]步驟201，第一終端生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息；
[0115]在本發明實施例中，通過第一終端生成圖像劃分信息還是通過第二終端生成圖像劃分信息，都可以通過以下兩種具體的方式實現:
[0116]A，接收用戶的輸入信息；根據所述輸入信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0117]例如:若第一終端與第二終端正在進行視頻通話，在確定啟用數據分塊壓縮的方式後，則
[0118]如圖3所示，檢測是否接收到用戶輸入的在當前圖像顯示的區域(區域A)的光標移動軌跡，並根據所述移動軌跡確定圖像劃分信息。如果所述移動軌跡圈定了一個封閉區域(區域B)，則確定所述封閉區域為第一區域，封閉區域外的區域為第二區域(區域C，圖中陰影部分)。則可以確定區域B為第一區域，區域C為第二區域。
[0119]B，通過預設的默認區域選擇信息確定區域選擇信息，確定圖像劃分信息。
[0120]例如:若第一終端與第二終端正在進行視頻通話，在確定啟用數據分塊壓縮的方式後，則
[0121]獲取預設的默認區域選擇信息，根據默認的區域選擇信息從顯示圖像的區域中確定一設定面積的區域。例如，可以預先設置以整個圖像顯示區域的中心點為中心設置一個面積為S的區域(區域的形狀可以是三角、方形、以及圓形)為選中區域。
[0122]例如:若第一終端與第二終端正在進行視頻通話，在確定啟用數據分塊壓縮的方式後，則
[0123]因為視頻通話的過程中，通話雙方關注度比較高的一般是用戶的頭像，所以通過圖像識別用戶的頭像也可以確定圖像劃分信息。
[0124]通過圖像識別方式確定用戶頭像所佔顯示區域的邊界信息，確定頭像所在的區域為第一區域，則顯示區域中除開頭像的區域為第二區域。
[0125]在本發明實施例中，因為不一定都是對用戶的頭像關注度高，所以在實施該實施例的方法時，還可以根據用戶輸入的選擇信息確定圖像識別後需要關注的圖像類別。
[0126]步驟202，根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
[0127]步驟201中的圖像劃分信息，可以用於確定每幀圖像區域劃分。但是為了使得該實施例所提供方法的使用度更高，則可以通過上述方式A、B、C所提供的方式確定第一幀的幀畫面中的第一區域和第二區域，後續幀畫面中第一區域和第二區域的確定，則可以通過以下方式實現:
[0128]實施例一、如圖4所示，根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括:[0129]步驟401，根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；
[0130]步驟402，所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為
第二區域。
[0131]該實施例中，將第一幀的幀畫面中所確定的第一區域的邊界信息作為一個選擇第一數據的選擇框，則當後續幀圖像的傳輸過程中，則將顯示在所述選擇框中的圖像數據作為第一數據；選擇框外的圖像數據作為第二數據。
[0132]實施例二、如圖5所示，根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括:
[0133]步驟501，根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；
[0134]步驟502，確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象；
[0135]步驟503，將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0136]在該實施例中，該實施例中，將第一幀的幀畫面中所確定的第一區域中的圖像數據作為模板(即圖像數據對象)。後續幀圖像的傳輸過程中，則將該圖像數據對象與顯示的內容進行比對，那部分的圖像數據與所述圖像數據對象相似(即相似度大於一預設閾值)或相同，則確定相同或相似的圖像數據為第一數據。
[0137]如圖6所示，因為音頻數據在收集的過程中會收集到一定的背景音數據，因為在大部分情況下用戶比較關注的數據一般都是目標數據，所以在本發明實施例中還可以通過確定音頻數據中目標數據和背景數據後對兩部分數據分別進行處理，具體實現包括:
[0138]步驟601，根據預設的聲音選擇信息，確定所述音頻數據中的目標數據和背景數據；
[0139]在本發明實施例中，因為大部分時間用戶比較關注的都是用戶的通話音數據，所以在音頻數據的劃分中，則可將音頻數據中的通話音數據設置為目標數據，而採集到的背景音數據設置為背景數據。
[0140]在本發明實施例中為了實現通話音和背景音的識別，可以在電子設備中設置兩個收音裝置。設置其中一個為主收音裝置(主收音裝置正面朝向用戶，主要接收用戶通話時候的聲音信息)，則主收音裝置所收集到的大部分聲音信息被確定為通話音；另外一個收音裝置為從收音裝置，該從收音裝置的背面朝向用戶，則從收音裝置所收集到的大部分聲音信息被確定為背景音。當主從收音裝置都接收到聲音信息後，則將主從收音裝置接收到的數據進行互相關從而確定收集到的聲音信息中的通話音和背景音。
[0141]步驟602，目標數據對應第一數據，所述背景音數據對應第二數據。
[0142]在本發明實施例中，因為視頻數據是圖像數據和音頻數據的結合，則本發明實施例所提供的方法中，在確定關注度高的圖像數據和音頻數據時，可以將兩者結合考慮。
[0143]在本發明實施例中，在採集圖像的採集區域確定的情況下，將採集到的圖像畫面劃分為多個子圖像區域，並每個子圖像區域對應多個不同的方位信息。則在該實施例中，可以在確定目標圖像數據後，確定目標圖像數據對應的方位信息，然後根據聲音定位方式確定所述方位信息對應方位的聲音數據，並將確定的聲音數據確定為目標聲音數據。
[0144]另外，還可以在確定目標聲音數據後，根據聲音定位方式確定所述目標聲音數據所對應的聲源位置，並根據所述聲源位置與所述方位信息進行比較，如果某一方位信息與所述聲源位置匹配，則將所述某一方位信息所對應子圖像區域，確定為目標區域，並將目標區域中的數據確定為目標圖像數據。
[0145]在該實施例中，第目標圖像數據和目標聲音數據對應第一數據。
[0146]例如:若第一終端與第二終端正在進行視頻通話，在確定啟用數據分塊壓縮的方式後，如果第一終端通過圖像採集裝置採集到的圖像，則根據方位的不同可以對圖像進行劃分(如圖6A所示)，生成的子圖像區域包括a，b，c和d區域。其中當用戶設定為對人的通話音作為目標數據，即確定c區域為目標區域。則聲音採集裝置則對應的採集c區域所在方位的聲音數據。然後將c區域的圖像數據和c區域的聲音數據結合之後形成第一數據。
[0147]如圖7所示，根據圖1所示的方法本發明還提供一種電子設備，當該電子設備向第二電子設備發送多媒體數據，電子設備包括:
[0148]數據劃分單元701，用於根據預設的數據劃分策略將待傳輸多媒體數據劃分為第
一數據和第二數據；
[0149]因為具體的實現環境中，會存在大量數據傳輸的情況一般是圖像數據、視頻數據和音頻數據。其中所述視頻數據則可視為圖像數據和音頻數據的集合，所以本發明實施例中數據劃分單元701將圖像數據和音頻數據劃分為第一數據和第二數據可以是:
[0150]當所述待傳輸多媒體數據為圖像數據，則所述數據劃分單元701還用於將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。和/或
[0151]該數據劃分單元701還用於生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息
[0152]當所述待傳輸多媒體數據為音頻數據，則所述數據劃分單元701還用於根據預設的聲音選擇信息，確定所述音頻數據中的通話音數據和背景音數據；其中，所述通話音數據對應所述第一數據，所述背景音數據對應所述第二數據。
[0153]數據轉換單元702，用於通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同；
[0154]數據傳輸單元703，用於將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
[0155]在本發明實施例中，可以通過不同的方式生成圖像劃分信息，則該電子設備還可以包括:
[0156]第一圖像劃分信息生成單元704，用戶接收用戶的輸入信息；根據所述輸入信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
[0157]第二圖像劃分信息生成單元705，通過圖像識別方式從幀畫面中確定目標區域的邊界信息；根據所述邊界信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。[0158]上述三種實現方式可以單獨實現也可以三者結合在一起使用。
[0159]為了使得該實施例所提供方法的使用度更高，則可以通過上述方式第一圖像劃分信息生成單元704和第二圖像劃分信息生成單元705所提供的方式確定第一幀的幀畫面中的第一區域和第二區域，數據劃分單元701在確定後續幀畫面中第一區域和第二區域時，包括:
[0160]所述數據劃分單元701還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0161]所述數據劃分單元701還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象；將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
[0162]本申請實施例中的上述一個或多個技術方案，至少具有如下的技術效果:
[0163]本發明實施例所提供給的方法，可以定義當前傳輸畫面的關注區域，數據源方，在進行視頻傳輸之前，將整幀畫面中除關注區域和非關注區域進行區別處理，在減小傳輸數據量的同時還能夠保持關注區域的視頻質量。使用靈活方便，效果明顯。
[0164]本發明所述的方法並不限於【具體實施方式】中所述的實施例，本領域技術人員根據本發明的技術方案得出其它的實施方式，同樣屬於本發明的技術創新範圍。
[0165]顯然，本領域的技術人員可以對本發明進行各種改動和變型而不脫離本發明的精神和範圍。這樣，倘若本發明的這些修改和變型屬於本發明權利要求及其等同技術的範圍之內，則本發明也意圖包含這些改動和變型在內。
【權利要求】
1.一種多媒體數據的傳輸方法，應用於第一終端，其特徵在於，當所述第一終端向第二終端發送多媒體數據之前，該方法包括: 根據預設的數據劃分策略將待傳輸的多媒體數據劃分為第一數據和第二數據； 通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，且所述第一處理方式與所述第二處理方式不同；將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
2.如權利要求1所述的方法，其特徵在於，所述第三數據所對應的第三數據量減去所述第一數據對應的第一數據量得到第一差值；所述第四數據所對應的第四數據量減去所述第二數據對應的第二數據量得到第二差值；且所述第一差值大於所述第二差值。
3.如權利要求2所述的方法，其特徵在於，通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括: 通過所述第一處理方式對所述第一數據進行處理得到所述第三數據，所述第一數據量與所述第三數據量相等； 通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數據量小於所述第二數據量。
4.如權利要求2所述的方法，其特徵在於，通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括: 通過所述第一處理方式對所 述第一數據進行處理得到所述第三數據，所述第三數據量小於所述第一數據量； 通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第四數據量小於所述第二數據量； 其中，所述第三數據量與所述第一數據量的第一比值大於所述第四數據量與所述第二數據量的第二比值。
5.如權利要求2所述的方法，其特徵在於，通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據包括: 通過所訴第一處理方式對所述第一數據進行處理得到所述第三數據，所述第三數據量大於所述第一數據量； 通過所述第二處理方式對所述第二數據進行處理得到所述第四數據，所述第二數據量大於所述第四數據量； 其中，所述第三數據量減去所述第一數據量的第一差值小於所述第二數據量減去所述第四數據量的第三差值。
6.如權利要求5所述的方法，其特徵在於，所述通過第二處理方式對所述第二數據進行處理得到第四數據，所述第二數據的數據量小於所述第四數據的數據量包括: 根據所述第一差值，確定所述第四數據量的上限閾值； 根據所述第四數據量上限閾值，通過所述第二處理方式對所述第二數據進行處理得到所述第四數據。
7.如權利要求1-6任一權項所述的方法，其特徵在於，當所述待傳輸多媒體數據為圖像數據，第一終端根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據包括: 根據圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
8.如權利要求7所述的方法，其特徵在於，根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域之前，進一步包括: 第一終端生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
9.如權利要求8所述的方法，其特徵在於，生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息包括: 接收用戶的輸入信息； 根據所述輸入信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
10.如權利要求8所述的方法，其特徵在於，生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息包括: 通過圖像識別方式從幀畫面中確定目標區域的邊界信息； 根據所述邊界信息生成將幀 畫面劃分為第一區域和第二區域的圖像劃分信息。
11.如權利要求8-10任一權項所述的方法，其特徵在於，根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括: 根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區； 所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
12.如權利要求8-10任一權項所述的方法，其特徵在於，所述根據所述圖像劃分信息，將所述圖像數據中的幀畫面劃分為第一區域和第二區域包括: 根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區； 確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象； 將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
13.如權利要求1-6任一權項所述的方法,其特徵在於，當所述待傳輸多媒體數據為音頻數據，第一終端根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據包括: 根據預設的聲音選擇信息，確定所述音頻數據中的通話音數據和背景音數據； 其中，所述通話音數據對應所述第一數據，所述背景音數據對應所述第二數據。
14.一種電子設備，其特徵在於，當該電子設備向第二電子設備發送多媒體數據，電子設備包括: 數據劃分單元，用於根據預設的數據劃分策略將待傳輸多媒體數據劃分為第一數據和第二數據； 數據轉換單元，用於通過第一處理方式對所述第一數據進行處理得到第三數據，並通過第二處理方式對所述第二數據進行處理得到第四數據，其中，所述第三數據和所述第四數據的總數據量小於所述第一數據和所述第二數據的總數量，所述第一處理方式與所述第二處理方式不同； 數據傳輸單元，用於將所述第三數據和所述第四數據發送到所述第二終端，使所述第二終端能播放組合多媒體數據，所述組合多媒體數據是所述第二終端根據與所述劃分策略對應的組合策略組合所述第三數據和所述第四數據而得到的數據。
15.如權利要求14所述的電子設備，其特徵在於，當所述待傳輸多媒體數據為圖像數據，則所述數據劃分單元還用於將所述圖像數據中的幀畫面劃分為第一區域和第二區域，所述第一區域的圖像數據對應所述第一數據，所述第二區域的圖像數據對應所述第二數據。
16.如權利要求15所述的電子設備，其特徵在於，則所述數據劃分單元還用於生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息，或者接收第二終端生成的將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
17.如權利要求16所述的電子設備，其特徵在於，該裝置還包括: 第二圖像劃分信息生成單元，用於接通過圖像識別方式從幀畫面中確定目標區域的邊界信息；根據所述邊界信息生成將幀畫面劃分為第一區域和第二區域的圖像劃分信息。
18.如權利要求15所述的電子設備，其特徵在於，將該裝置還包括: 第二圖像劃分信息生成單元，用於通過數據傳輸通道接收第二終端發送來的將待傳輸圖像數據中的幀畫面劃分為第一區域和第二區域的圖像劃分信息。
19.如權利要求16-18任一所述的電子設備，其特徵在於，則所述數據劃分單元還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；所述圖像數據選擇區對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
20.如權利要求16-18任一所述的電子設備，其特徵在於，則所述數據劃分單元還用於根據所述圖像劃分信息，在顯示所述圖像數據的顯示單元中確定圖像數據選擇區；確定當前幀圖像數據中所述圖像數據選擇區對應圖像數據為圖像數據對象；將所述圖像數據對象與所述圖像數據中的每幀圖像數據進行匹配，與所述圖像數據對象匹配的區域對應第一區域，每幀圖像中去除第一區域的部分為第二區域。
【文檔編號】H04N7/14GK103581603SQ201210258688
【公開日】2014年2月12日 申請日期:2012年7月24日 優先權日:2012年7月24日
【發明者】謝元睿 申請人:聯想(北京)有限公司