視頻流傳輸的方法、裝置和系統的製作方法

2023-07-21 21:10:11

專利名稱：視頻流傳輸的方法、裝置和系統的製作方法
技術領域：
本發明涉及網絡技術，尤其涉及一種視頻流傳輸的方法、裝置和系統。
背景技術：
隨著網絡技術的快速發展，網絡通信業務日益豐富，如VoIP (Voice over IP，基於 IP的語音)、IPTV(Internet Protocol Television, IP電視)、HIS(High Speedlnte潔t， 高速上網)等業務都在大規模開展。用戶規模的迅速增加，帶來了巨大的網絡帶寬需求，服 務提供商的承載網特別是匯集網絡，不可避免地出現擁塞。當前用於IP QoS(Quality of Service，服務質量)算法的丟棄機制採用隨機丟棄方案，在選擇丟棄哪些擁塞的報文時並 不考慮丟棄的報文對接收端的具體影響。 對於部分數據傳輸協議，如TCP(Real-time Transport Protocol,實時傳輸協 議)，丟棄報文將會導致接收端請求對丟失的報文進行重傳，然而這種機制對於音頻或視頻 這樣的實時流進行多播的網絡卻不太可行，因為接收端的緩衝器空間有限，對於實時性很 高的業務沒有足夠的時間用於請求和接受重傳的分組。 在IPTV的視頻傳輸中，不同IPTV數據包的丟失對用戶視覺體驗存在很大的差異， 即不同IPTV數據包丟棄後，終端用戶視覺敏感度差別非常大。有的IPTV數據包丟棄後，對 畫面衝擊很小，終端用戶不會感覺到差異；有的IPTV數據包丟失後，對畫面衝擊較大，比如 出現花屏等異常現象，終端用戶立即就能感受到。傳統的網絡設備擁塞處理時採用的隨機 丟棄方案沒有考慮到不同的IPTV數據包對終端接收端畫面的影響的差異。
—個視頻流由一系列GOP (Group of Pictures,圖像組)組成。 一個GOP中，包含一 個I幀、多個P幀以及多個B幀。針對基於H. 264的IPTV系統，現有技術已經提出了基於業 務感知的智能丟幀策略在網絡出現擁塞不得不丟棄部分數據包時，網絡設備有選擇性的丟 棄不同幀類型的數據包。首先在DSLAM(Digital Subscriber Line Access Multiplexer,數 字用戶線路接入復用器)上檢測H,264的NAL層(Network Abstraction Layer,網絡提取層) 報文頭的欄位NRI ;然後基於NRI作出丟棄判斷，若NRI為0時，表示視頻幀為非參考幀，DSLAM 網絡節點在擁塞時，進行優先丟棄處理；丟棄時優先丟棄B幀，然後依次是P幀、I幀，若各幀 中有一個對應的IP報文被丟棄，整個幀的IP報文都將丟棄。這種丟棄方案有如下缺點
(1)受限於編碼機制必須使用H. 264編碼，不支持MPEG-2編碼；
(2)受限於封裝機制只支持RTP封裝的H. 264視頻流，不支持RTP封裝MPEG2和 MPEG2-TS封裝的視頻流； (3)NRI標記的是幀類型， 一個幀對應多個IP包，多個IP包中並不是每個包的丟失 都會對終端畫面有影響的，因此，根據NRI標記作為丟棄的判斷依據時，丟棄時是將整個幀 進行丟棄，不能滿足網絡設備逐包調度和轉發的處理從而引起接收端的用戶體驗的下降。

發明內容
本發明的實施例提供一種視頻流傳輸的方法，能夠對不同編碼和封裝機制的視頻流根據視覺敏感度進行差異化處理。 為達到上述目的，本發明的實施例採用如下技術方案
—種視頻流傳輸的方法，包括 評估視頻數據包，獲得所述視頻數據包的視覺敏感度標識信息；
將所述視覺敏感度的標識信息攜帶在視頻數據包中； 將所述視頻數據包進行傳輸，傳輸時根據所述視覺敏感度標識信息對所述視頻數 據包進行處理。 本發明的實施例視頻流傳輸的方法通過評估視頻數據包，獲得所述視頻數據包的 視覺敏感度標識信息，將所述視覺敏感度的標識信息攜帶在視頻數據包中，並將所述視頻 數據包進行傳輸，在傳輸時根據所述標識信息對所述視頻數據包進行處理，從而能夠實現 對不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。 本發明的另一實施例提供了一種視頻流傳輸的網絡設備，能夠對不同編碼和封裝
機制的視頻流根據視覺敏感度進行差異化處理。 為達到上述目的，本發明的實施例採用如下技術方案 —種視頻流傳輸的網絡設備，包括 獲取單元，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息； 攜帶單元，用於將所述視覺敏感度標識信息攜帶在視頻數據包中； 傳輸單元，用於傳輸所述視頻數據包，傳輸時根據所述視覺敏感度標識信息對所
述視頻數據包進行處理。 本發明的實施例視頻流傳輸的網絡設備通過獲取單元評估視頻數據包並獲得所 述視頻數據包的視覺敏感度標識信息，攜帶單元將所述視覺敏感度標識信息攜帶在視頻數 據包中，傳輸單元用於傳輸所述視頻數據包，根據所述標識信息對所述視頻數據包進行差 異化處理，從而實現了在網絡擁塞時能夠對不同編碼和封裝機制的視頻流根據視覺敏感度 進行智能化處理。 本發明實施例還提供了一種視頻流傳輸的系統，包括 視頻源端，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息， 將所述標識信息攜帶在視頻流的視頻數據包中並傳輸給網絡設備； 網絡設備，用於接收來自所述視頻源端的視頻數據包並根據所述視覺敏感度標識 信息對所述視頻數據包進行處理。 本發明的實施例還提供了另一種視頻流傳輸的系統，包括
視頻源端，用於將視頻數據包傳輸給網絡設備； 網絡設備，用於接收來自所述視頻源端的視頻數據包，評估視頻數據包並獲得所 述視頻數據包的視覺敏感度標識信息，將所述標識信息攜帶在視頻流的視頻數據包中並根 據所述視覺敏感度標識信息對所述視頻數據包進行處理。 本發明實施例提供的視頻流傳輸的系統，通過設置視頻源端和網絡設備，由視頻 源端或網絡評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息，將所述標識信 息攜帶在視頻流的視頻數據包中，或者視頻源端僅發布視頻數據包，而由網絡設備通過分 析在所述視頻數據包上攜帶視覺敏感度標識信息，網絡設備再根據所述視覺敏感度標識信 息對所述視頻數據包進行處理，能夠實現對不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。


圖1為本發明實施例視頻流傳輸的方法的流程圖； 圖2為本發明另一實施例視頻流傳輸的方法的示意圖； 圖3為本發明再一實施例視頻流傳輸的方法的示意圖； 圖4為本發明實施例一種標識信息攜帶示意圖 圖5為本發明實施例一種標識信息攜帶示意圖 圖6為本發明實施例一種標識信息攜帶示意圖 圖7為本發明實施例一種標識信息攜帶示意圖 圖8為本發明實施例一種標識信息攜帶示意圖 圖9為本發明實施例視頻流傳輸的網絡設備的示意圖； 圖10為本發明另一實施例視頻流傳輸的網絡設備的示意圖,
具體實施例方式
下面結合附圖對本發明實施例視頻流傳輸的方法、裝置和系統進行詳細描述。
應當明確，所描述的實施例僅僅是本發明一部分實施例，而不是全部的實施例。基 於本發明中的實施例，本領域普通技術人員在沒有作出創造性勞動前提下所獲得的所有其 他實施例，都屬於本發明保護的範圍。 如圖1所示，本發明的實施例視頻流傳輸的方法，包括 S101、評估視頻數據包，獲得所述視頻數據包的視覺敏感度標識信息； S102、將所述視覺敏感度的標識信息攜帶在視頻數據包中； S103、將所述視頻數據包進行傳輸，傳輸時根據所述標識信息對所述視頻數據包 進行處理。 評估視頻數據包具體為根據視頻畫面的運動矢量、幀類型、所述視頻數據包位於 畫面中的位置、以及色彩和亮度等中的一項或多項組合進行評估，根據評估的結果獲得視 頻數據包的視覺敏感度標識信息。所述視覺敏感度標識信息用於標識該視頻數據包丟失後 對終端畫面的影響程度。可以在視頻源端，也可以在邊緣網絡設備上對視頻數據包進行評 估，並獲得相應的視覺敏感度標識信息。 本發明的實施例視頻流傳輸的方法通過評估視頻數據包，獲得所述視頻數據包的
視覺敏感度標識信息，將所述視覺敏感度的標識信息攜帶在視頻數據包中，將所述視頻數
據包進行傳輸，在傳輸時根據所述標識信息對所述視頻數據包進行差異化處理，從而實現
了在傳輸時能夠對不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。 如圖2、圖3所示，在本發明另一實施例中，視頻流傳輸的方法包括 S201、在視頻源端對視頻數據流中的視頻數據包逐包評估視覺敏感度，並將所述
視覺敏感度標識信息攜帶在視頻數據包中。 所述視覺敏感度標識信息標識該視頻數據包丟失後對終端畫面的影響程度。影響 視覺敏感度因素包括視頻畫面的運動矢量、幀類型、所述視頻數據包位於畫面中的位置、以 及色彩和亮度等。最重要的影響因素是視頻畫面的運動矢量，幀類型次之。
本發明並不局限於此，還可以在靠近視頻源端的邊緣網絡設備上對視頻數據流中 的視頻數據包逐包評估視覺敏感度並攜帶視覺敏感度標識信息。例如，先由視頻源端把數 據包傳輸到靠近視頻源端的邊緣網絡設備，並在邊緣網絡設備上獲取數據包的視覺敏感度 標識信息並攜帶到視頻數據包中。 把視覺敏感度標識信息通過以下任一種方式攜帶在視頻數據包中
(1)如圖4所示，通過IPv4報文頭中的T0S(Type of Service,服務類型)欄位或 IPv6報頭中的TC(Traffic Class，通信級別)欄位中未使用的欄位攜帶所述標識信息。ToS 欄位為IPv4的服務類型欄位，和IPv6中的TC欄位代表著相同的功能。視頻數據報文的視 覺敏感度經過評估量化後，所述標識信息即可以攜帶在ToS和TC未使用的後兩個比特欄位 中，網絡節點在擁塞時，可以通過檢查該欄位攜帶的信息，進行選擇性的丟棄處理，在緩解 擁塞壓力的同時，確保用戶的視覺體驗。其中標記為6、7的兩位即為未使用的欄位。
(2)如圖5所示，通過DSCP(Differentiated Services Code Point，差分服務點) 中未使用的兩個比特位攜帶所述標識信息。將所述標識信息由IPv4或IPv6中的欄位DSCP 中未用的比特位攜帶，例如圖5中，所述DSCP中後兩個比特位，S卩，標記為6、7的兩位。
DSCP是IETF (The Internet Engineering Task Force,網際網路工程任務組)關於 QoS的一個分類標準，DSCP利用了 IPv4中的TOS欄位或IPv6中的TC欄位。這些欄位目前 只使用了前六位比特，後兩位目前雖然在最新的IETF的擁塞通告中有定義使用，但是現網 支持的網絡設備很少，因而可以利用起來攜帶所述標識信息。 (3)如圖6所示，通過IPv4新增選項頭攜帶所述標識信息。在IPv4的報文頭中有
可變長度的選項欄位，即圖6中所示的options欄位可以攜帶多個選項頭。定義新的選項
頭，具體的選項頭的格式可以是TLV格式，也可以是其他的數據格式。在新定義的選項頭中
攜帶所述視覺敏感度標識信息，任何支持該信息的網絡節點，均可以在網絡擁塞的時候，進
行選擇性的丟棄處理，或其他的差分服務處理。該選項頭的內容作為一個靈活的定義，還可
以在後續的視頻處理中添加新的定義，如視頻幀、視頻流等標識信息，提高功能覆蓋範圍。 (4)如圖7所示，通過定義新的IPv6的擴展頭攜帶所述標識信息。 業務分類標識擴展頭可以包含兩個部分profile ID和profile內容，分類可以定
義多個profile，每個profile是一個分類空間；不同的分類空間，編碼可以重複；同一個分
類空間，編碼不可以重複；視頻應用可以作為一個分類空間存在，又可以根據需要定義其他
分類空間，提高擴展性。 具體為定義新的IPv6擴展頭，類型為Service Class,在該擴展頭的內容中攜帶 所述標識信息，網絡節點在擁塞時，可以首先逐個檢查IPv6報文頭的下一個擴展頭類型， 若檢查到類型為Service Class的擴展頭，則獲取該擴展頭的內容，通過對內容的解析，得 到數據包中攜帶的視覺敏感度標識信息，即可優先選擇對用戶視覺體驗沒有影響或影響小 的數據包進行丟棄，緩解擁塞壓力，網絡節點還可以根據該信息進行其他的差分服務處理。
(5)如圖8所示，通過RTP協議中的擴展頭攜帶量化信息。 本實施例中的視覺敏感度標識信息也可以通過RTP協議中的擴展欄位攜帶。如圖 8所示的RTP的報文頭中的比特位X如果設置為l，表示RTP的固定頭之後有且只有一個擴 展頭。 基於約定的信息，可以在RTP的擴展報頭中攜帶所述標識信息，網絡中任意可以解析該擴展報頭的設備，均可以在網絡出現擁塞時，根據該信息內容，對視頻數據報文進行 選擇性的差異化處理。 S202、將攜帶標識信息的數據包從視頻源端傳輸到網絡設備l，這裡的網絡設備可
以是任意支持網絡擁塞管理的節點，如核心網路由器、匯聚網路由器等。 S203、在網絡擁塞時，網絡設備1根據所述標識信息對所述視頻數據包進行丟棄
遇到網絡擁塞時，網絡設備根據視頻數據包中攜帶的標識信息，判斷數據包的視覺敏感度
程度，優先將低視覺敏感度數據包丟棄。設定視覺敏感度閾值，如果視覺敏感度低於閾值，
則認為這樣的數據包視覺敏感度過低，因而優先丟棄。可以根據視頻源端在評估並獲取視
覺敏感度標識信息時，所定義的視覺敏感度閾值進行判斷。 這樣做，在緩解擁塞壓力的同時，確保丟棄的數據包對用戶的體驗影響最小化或 沒有影響。 S204、將攜帶著標識信息、且部分丟棄的數據包從網絡設備1傳輸到網絡設備2。
S205、在網絡擁塞時，網絡設備2根據所述標識信息對所述視頻數據包進行丟棄。 遇到網絡擁塞時，網絡設備2將低視覺敏感度數據包優先丟棄，在緩解擁塞壓力的同時，確 保丟棄的數據包對用戶的體驗影響最小化或沒有影響。 需要說明的是，步驟S204、 S205應當依據網絡中的網絡設備的個數進行確定，因 而為可選步驟。如果網絡中有多個網絡設備，並且這些設備都具有根據視頻數據包的視覺 敏感度標識信息進行選擇性丟棄的功能，則重複執行這兩個步驟。當然，如果網絡中只有網 絡設備l，則跳過這些步驟執行以下步驟。 S206、將攜帶著標識信息、且部分丟棄的數據包從網絡設備2傳輸到解碼端。
S207 、解碼端對接收到的視頻數據包進行解碼。
S208、解碼端發出重傳請求。 具體為解碼端根據解碼特性判斷發現有一些報文丟失，因而向視頻源端發出重 傳請求。在本實施例中視頻源端為重傳伺服器。 在其它的實施例中，也可以是具有重傳功能的網絡設備作為重傳伺服器。如圖3 所示，網絡設備2具有代理重傳功能。 S209、圖2中的視頻源端接收到重傳請求，判斷請求重傳數據包的視覺敏感度標 識信息，選擇出視覺敏感度高的重要數據包。 在本發明其它的實施例中，如圖3所示，具有代理重傳功能的網絡設備2捕獲解碼 端的重傳請求，判斷請求重傳數據包的視覺敏感度標識信息，選擇出視覺敏感度高的數據 包，並將這些視覺敏感度高的視頻數據包進行傳輸。 S210、圖2為視頻源端將在S209中得到的重要數據包重傳給解碼端；圖3為網絡
設備2將S209中得到的重要數據包重傳給解碼端。 S211、接收端接收到重傳的數據包後，繼續進行解碼播放。 以上步驟並不局限於上述實施例，在不同的情況下可以採用不同的順序對視頻數 據包進行傳輸。本發明實施例視頻流傳輸的方法可以由視頻源端或網絡設備來實現。
本發明的實施例視頻流傳輸的方法在出現網絡擁塞時根據視覺敏感度標識信息 確定視頻數據包對視覺敏感度重要性，採取智能化性丟棄，或者根據所述標識信息對請求 重傳的丟失的視頻數據包進行選擇性重傳，從而實現了不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。本發明實施例解決了通用性的問題，適用於MPEG-2編碼格 式、H. 264甚至VC-1編碼格式；適用於MPEG2-TS封裝格式和H. 264NAL over RTP封裝格式。
本發明的實施例能夠實現在緩解擁塞壓力的同時，確保丟棄的數據包對用戶的體 驗影響最小化或沒有影響。 本發明實施例還提供了一種視頻流傳輸的網絡設備，能夠對不同編碼和封裝機制 的視頻流根據視覺敏感度進行丟棄。 如圖9所示，本發明實施例視頻流傳輸的網絡設備，包括 獲取單元100，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信 息。具體可以根據運動矢量、幀類型、畫面位置、色彩或亮度的一種或多種的任意組合評估 視頻數據包。 攜帶單元200，用於將所述視覺敏感度標識信息攜帶在視頻數據包中。具體為將 視覺敏感度標識信息攜帶在與各個視頻數據包相應的報文中的空餘欄位、未使用欄位、新 增選項頭或擴展頭的任意一種中。 傳輸單元300，用於傳輸所述視頻數據包，傳輸時根據所述視覺敏感度標識信息對 所述視頻數據包進行處理。 本發明實施例視頻流傳輸的網絡設備可以應用於視頻源端，也可以應用於邊緣網 絡設備或其它網絡設備。 本發明的實施例視頻流傳輸的網絡設備通過獲取單元評估視頻數據包並獲得所 述視頻數據包的視覺敏感度標識信息，攜帶單元將所述視覺敏感度標識信息攜帶在視頻數 據包中，傳輸單元用於傳輸所述視頻數據包，根據所述標識信息對所述視頻數據包進行差 異化處理，從而實現了在網絡擁塞時能夠對不同編碼和封裝機制的視頻流根據視覺敏感度 進行智能化處理。 如圖IO所示，在本發明一較佳實施例中視頻流傳輸的網絡設備包括獲取單元 100、攜帶單元200和傳輸單元300。 獲取單元IOO，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息。 攜帶單元200，用於將所述視覺敏感度標識信息攜帶在視頻數據包中。 所述獲取單元100和攜帶單元200可以設置於視頻源端，也可以設置於靠近視頻
源端的邊緣網絡設備上。 傳輸單元300包括數據包傳輸模塊310、丟棄模塊320和選擇性重傳模塊330。 數據包傳輸模塊310，用於將視頻數據包傳輸給丟棄模塊320。 丟棄模塊320，用於在網絡擁塞時根據所述標識信息對視頻數據包進行丟棄。丟棄
模塊通常設置於網絡設備上，例如圖2、圖3中所示的網絡設備1和網絡設備2。 選擇性重傳模塊330，用於在接收到重傳請求時根據所述標識信息對視頻數據包
進行選擇性重傳。重傳請求通常由解碼端發出。 選擇性重傳模塊一般設置於提供重傳視頻數據包功能的網絡設備上，如視頻服務 器或一些特殊的網絡設備，如代理伺服器等。本實施例中選擇性重傳模塊330可以設置於 如圖3所示的網絡設備2，或者是圖2中所示的視頻源端。 本發明的實施例視頻流傳輸的網絡設備中也可以只包括丟棄模塊320或重傳模塊330中的任一個。本發明實施例視頻流傳輸的網絡設備可以應用於視頻源端。 本發明的實施例視頻流傳輸的網絡設備通過獲取單元評估並獲取視頻數據包的
視覺敏感度標識信息，攜帶單元將視覺敏感度標識信息攜帶在與各個視頻數據包中，在傳
輸過程中如果遇上網絡擁塞，則通過網絡設備對不同標識信息的數據包進行丟棄，如果網
絡設備接收到重傳請求則根據視覺敏感度標識信息進行視頻數據包的選擇性重傳，從而實
現了不同編碼和封裝機制的視頻流根據視覺敏感度進行差異化處理。 本發明實施例解決了通用性的問題，適用於MPEG-2編碼格式和H. 264甚至VC-1
編碼格式；同時還適用於MPEG2-TS封裝格式和H. 264NAL over RTP封裝格式。 本發明的實施例能夠實現在緩解擁塞壓力的同時，確保丟棄的數據包對用戶的體
驗影響最小化或沒有影響。 本發明實施例還提供了一種視頻流傳輸的系統，包括 視頻源端，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息， 將所述視覺敏感度標識信息攜帶在視頻流的視頻數據包中並傳輸給網絡設備，參照圖2所 示的視頻源端； 網絡設備，用於接收來自所述視頻源端的視頻數據包並根據所述視覺敏感度標識 信息對所述視頻數據包進行處理。其中，網絡設備包括 第一網絡設備，用於接收所述視頻數據包並根據所述視覺敏感度標識信息對所述 視頻數據包進行丟棄，參照圖2所示的網絡設備1 ;禾口 第二網絡設備，用於接收所述視頻數據包，並在接收到重傳請求時，根據所述標識
信息對請求重傳的視頻數據包進行選擇性重傳，參照圖3所示的網絡設備2。 第一網絡設備和第二網絡設備還可以擇一設置。另外，第一網絡設備還可以有多
個，那麼在數據流傳輸時，多次根據視覺敏感度標識信息將視頻數據包進行丟棄。並且，第
二網絡設備也可以設置於第一網絡設備之前。 在本發明的較佳實施例中，視頻源端也可以用於在接收到重傳請求時，根據所述 標識信息對請求重傳的視頻數據包進行選擇性重傳，參照圖2所示的視頻源端。
本發明的實施例還提供了另一種視頻流傳輸的系統，包括
視頻源端，用於將視頻數據包傳輸給網絡設備； 網絡設備，用於接收來自所述視頻源端的視頻數據包，評估視頻數據包並獲得所 述視頻數據包的視覺敏感度標識信息，將所述視覺敏感度標識信息攜帶在視頻流的視頻數 據包中，並根據所述視覺敏感度標識信息對所述視頻數據包進行處理。
其中網絡設備包括 第一網絡設備，用於接收所述視頻數據包，評估視頻數據包並獲得所述視頻數據 包的視覺敏感度標識信息，將所述標識信息攜帶在視頻流的視頻數據包中。在本發明的一 較佳實施例中，第一 網絡設備還用於並根據所述視覺敏感度標識信息對所述視頻數據包進 行丟棄。第一網絡設備可以不只一個。 第二網絡設備，用於接收所述視頻數據包，並在接收到重傳請求時，根據所述視覺 敏感度標識信息對請求重傳的視頻數據包進行選擇性重傳。 在本發明的另一較佳實施例中，視頻源端也可以用於在接收到重傳請求時，根據 所述視覺敏感度標識信息對請求重傳的視頻數據包進行選擇性重傳。
本發明實施例提供的視頻流傳輸的系統，通過設置視頻源端和網絡設備，能夠實 現對不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。可以由視頻源端或網 絡設備獲取視覺敏感度標識信息並攜帶在視頻數據包中，可以由網絡設備根據所述標識信 息對所述視頻數據包進行丟棄，可以由網絡設備或視頻源端根據所述標識信息進行數據包 的選擇性重傳，因而本發明的實施例能夠實現對各種不同的編碼和封裝機制的視頻數據包 進行智能處理，並且將對接收端畫面的影響降到最低或沒有影響。 本領域普通技術人員可以理解實現上述實施例方法中的全部或部分流程，是可以 通過電腦程式來指令相關的硬體來完成，所述的程序可存儲於一計算機可讀取存儲介質 中，該程序在執行時，可包括如上述各方法的實施例的流程。其中，所述的存儲介質可為磁 碟、光碟、只讀存儲記憶體(Read-0nly Memory, ROM)或隨機存儲記憶體(Random Access Memory,廳)等。 以上所述，僅為本發明的具體實施方式
，但本發明的保護範圍並不局限於此，任何 熟悉本技術領域的技術人員在本發明揭露的技術範圍內，可輕易想到的變化或替換，都應 涵蓋在本發明的保護範圍之內。因此，本發明的保護範圍應以權利要求的保護範圍為準。
權利要求
一種視頻流傳輸的方法，其特徵在於，包括評估視頻數據包，獲得所述視頻數據包的視覺敏感度標識信息；將所述視覺敏感度的標識信息攜帶在視頻數據包中；將所述視頻數據包進行傳輸，傳輸時根據所述標識信息對所述視頻數據包進行處理。
2. 根據權利要求1所述的視頻流傳輸的方法，其特徵在於，所述視覺敏感度標識信息 用於標識該視頻數據包丟失後對終端畫面的影響程度。
3. 根據權利要求1所述的視頻流傳輸的方法，其特徵在於，將所述視覺敏感度標識信 息攜帶在視頻數據包中的步驟具體為將視覺敏感度標識信息攜帶在與各個視頻數據包相應的報文中的空餘欄位、未使用字 段、新增選項頭或擴展頭的任意一種中。
4. 根據權利要求1所述的視頻流傳輸的方法，其特徵在於，所述傳輸時根據所述視覺 敏感度標識信息對所述視頻數據包進行處理的步驟進一步包括在出現網絡擁塞時，網絡設備接收所述數據包，並根據所述視覺敏感度標識信息，將視 覺敏感度低於設定閾值的數據包優先丟棄。
5. 根據權利要求1所述的視頻流傳輸的方法，其特徵在於，所述傳輸時根據所述視覺 敏感度標識信息對所述視頻數據包進行處理的步驟，包括在接收到重傳請求時，根據所述視覺敏感度標識信息對請求重傳的視頻數據包進行選 擇性重傳。
6. 根據權利要求1所述的視頻流傳輸的方法，其特徵在於，所述評估視頻數據包的步 驟具體為根據運動矢量、幀類型、畫面位置、色彩或亮度的一種或多種的任意組合評估視頻數據包。
7. 根據權利要求1至6任一項所述的視頻流傳輸的方法，其特徵在於，所述視頻流傳輸 的方法由視頻源端或網絡設備來實現。
8. —種視頻流傳輸的網絡設備，其特徵在於，包括獲取單元，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息； 攜帶單元，用於將所述視覺敏感度標識信息攜帶在所述視頻數據包中； 傳輸單元，用於傳輸所述視頻數據包，傳輸時根據所述視覺敏感度標識信息對所述視 頻數據包進行處理。
9. 根據權利要求8所述的視頻流傳輸的網絡設備，其特徵在於，所述視覺敏感度標識 信息用於標識該視頻數據包丟失後對終端畫面的影響程度。
10. 根據權利要求8所述的視頻流傳輸的網絡設備，其特徵在於，所述傳輸單元包括 數據包傳輸模塊，用於將視頻數據包傳輸給丟棄模塊；所述丟棄模塊，用於在網絡擁塞時根據所述視覺敏感度標識信息對視頻數據包進行丟棄。
11. 根據權利要求io所述的視頻流傳輸的網絡設備，其特徵在於，所述傳輸單元還包括選擇性重傳模塊，用於在接收到重傳請求時根據所述視覺敏感度標識信息對請求重傳 的視頻數據包進行選擇性重傳。
12. 根據權利要求8或9所述的視頻流傳輸的網絡設備，其特徵在於， 所述視頻流傳輸的網絡設備應用於視頻源端。
13. —種視頻流傳輸的系統，其特徵在於，包括視頻源端，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息，將所 述視覺敏感度標識信息攜帶在視頻流的視頻數據包中並傳輸給網絡設備；所述網絡設備，用於接收來自視頻源端的視頻數據包並根據所述視覺敏感度標識信息 對所述視頻數據包進行處理。
14. 根據權利要求13所述的視頻流傳輸的系統，其特徵在於，所述網絡設備包括 第一網絡設備，用於接收所述視頻數據包並根據所述視覺敏感度標識信息對所述視頻數據包進行丟棄；和/或第二網絡設備，用於接收所述視頻數據包，並在接收到重傳請求時，根據所述視覺敏感 度標識信息對請求重傳的視頻數據包進行選擇性重傳。
15. 根據權利要求13所述的視頻流傳輸的系統，其特徵在於，所述視頻源端還用於在 接收到重傳請求時，根據所述視覺敏感度標識信息對請求重傳的視頻數據包進行選擇性重 傳。
16. —種視頻流傳輸的系統，其特徵在於，包括 視頻源端，用於將視頻數據包傳輸給網絡設備；所述網絡設備，用於接收所述視頻數據包，評估視頻數據包並獲得所述視頻數據包的 視覺敏感度標識信息，將所述視覺敏感度標識信息攜帶在視頻流的視頻數據包中並根據所 述視覺敏感度標識信息對所述視頻數據包進行處理。
17. 根據權利要求16所述的視頻流傳輸的系統，其特徵在於，所述網絡設備包括 第一網絡設備，用於接收所述視頻數據包，評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息，將所述視覺敏感度標識信息攜帶在視頻流的視頻數據包中；第二網絡設備，用於接收所述視頻數據包，並在接收到重傳請求時，根據所述視覺敏感 度標識信息對請求重傳的視頻數據包進行選擇性重傳。
18. 根據權利要求17所述的視頻流傳輸的系統，其特徵在於，所述第一網絡設備還用 於根據所述視覺敏感度標識信息對所述視頻數據包進行丟棄。
19. 根據權利要求16所述的視頻流傳輸的系統，其特徵在於，所述視頻源端還用於在 接收到重傳請求時，根據所述視覺敏感度標識信息對請求重傳的視頻數據包進行選擇性重
全文摘要
本發明公開了一種視頻流傳輸的方法、裝置和系統，能夠對不同編碼和封裝機制的視頻流根據視覺敏感度進行智能化處理。視頻流傳輸的方法包括評估視頻數據包，獲得所述視頻數據包的視覺敏感度標識信息；將所述視覺敏感度的標識信息攜帶在視頻數據包中；將所述視頻數據包進行傳輸，傳輸時根據所述視覺敏感度標識信息對所述視頻數據包進行處理。視頻流傳輸的網絡設備包括獲取單元，用於評估視頻數據包並獲得所述視頻數據包的視覺敏感度標識信息；攜帶單元，用於將所述視覺敏感度標識信息攜帶在視頻數據包中；傳輸單元，用於傳輸所述視頻數據包，傳輸時根據所述視覺敏感度標識信息對所述視頻數據包進行處理。本發明還提供了視頻流傳輸的系統。本發明適用於網絡視頻流傳輸。
文檔編號H04N7/24GK101741752SQ20081017654
公開日2010年6月16日 申請日期2008年11月17日 優先權日2008年11月17日
發明者秦霞, 荀永生, 鄭合文 申請人:華為技術有限公司