顯示多方視頻通話的移動通信終端及其顯示方法

2023-05-14 13:40:11

專利名稱：顯示多方視頻通話的移動通信終端及其顯示方法
技術領域：
本發明涉及一種移動通信終端，尤其涉及一種可進行多方視頻通話的移動通信終端及其 方法。
背景技術：
H.323是國際電信聯盟(ITU)多媒體通信系列標準H. 32x的一部份，該系列標準使得在 現有通信網絡上進行視頻會議成為可能，其中，H. 320是在窄帶綜合業務服務網(N-ISDN) 上進行多媒體通信的標準，H. 321是在寬帶綜合業務服務網(B-ISDN)上進行多媒體通信的 標準，H. 322是在有服務質量保證的區域網(LAN)上進行多媒體通信的標準，H. 324是在公 共電話交換網(GSTN)和無線網絡上進行多媒體通信的標準，H.323為現有的分組網絡( PBN)如IP網絡提供多媒體通信標準。H.323為基於網絡的多媒體通信系統定義了四個主要的組件終端(Terminal)、網關 (Gageway)、關守(Gageke印er)、多點控制單元(MCU)。終端是分組網絡中能提供實時 、雙向通信的節點設備，也是一種終端用戶設備，可以和網關、多點控制單元通信。所有終 端都必須支持語音通信，但視頻和數據通信是可選的。H.323規定了不同的音頻、視頻或數 據終端協同工作所需的操作模式。它將是下一代網際網路電話、音頻會議終端和視頻會議技術 的主要標準。進行多媒體通信時，在發射端，從輸入設備獲取的視頻和音頻信號，經編碼器 壓縮後，按照一定格式打包，通過網絡發送出去。在接收端，來自網絡的數據包首先被解包 ，獲得的視頻、音頻壓縮數據經解碼後送入輸出設備，用戶數據和控制數據也得到了相應的 處理。目前的移動通信終端如手機中通常內置有攝像頭和視頻捕捉卡，具有視頻通話的功能， 但是只能在一地手機屏幕上顯示視頻通信的對方畫面，並不知道自己的視頻狀態，可能發送 給對方的畫面並不理想。為解決上述問題出現了一種同時在屏幕上顯示對方視頻與本機視頻 的手機與方法，如中國專利申請公開第CN1805534號就提供了一種可顯示多個視頻畫面的手 機與方法。其將本機獲取的視頻數據與來自遠端的視頻數據置於不同的視頻通道內，通過設 置視頻通道的參數確定通道顯示的順序，區分前景與背景，從而可同時在手機屏幕上顯示本 機視頻與遠端視頻。這種手機在一對一的視頻通話條件下可以很好的應用，然而在用手機進 行多方視頻通話時，不僅僅需要了解本機的視頻與某一個遠端終端的視頻，還需要了解其它
參加視頻通話的遠端終端發送的視頻。 發明內容有鑑於此，有必要提供一種在屏幕上顯示多個視頻畫面的方法以及一種特別適用於進行 多方視頻通話的移動通信終端，其可進行多方視頻通話，並同時顯示多個遠端移動通信終端 發送的視頻畫面。一種顯示多方視頻通話的方法，其包括以下步驟將顯示視頻畫面的窗口劃分成多個區 域/子窗口，使每個遠端移動通信終端對應一個區域/子窗口；從解碼器處獲取每個遠端移動 通信終端發送的視頻音頻信號，並作如下判斷，如果其中包括視頻信號，則接下來判斷其中 是否包括音頻信號，如果包括音頻信號則在與該遠端移動通信終端對應的區域/子窗口中顯 示該移動通信終端的視頻信號並將該區域/子窗口突出顯示，否則在與該遠端移動通信終端 對應的區域/子窗口內以普通方式顯示視頻信號；如果其中不包括視頻信號則接下來判斷其 中是否包括音頻信號，如果包括音頻信號，則在與該遠端移動通信終端對應的區域/子窗口 內顯示存儲在本機上的圖標並將該區域/子窗口突出顯示，如果不包括音頻信號則在與該遠 端移動通信終端對應的區域/子窗口內以普通方式顯示存儲在本機上的圖標。一種顯示多方視頻通話的移動通信終端，其包括中央處理器、信號部分、多路解碼器、 顯示裝置，所述中央處理器與信號部分、多路解碼器及顯示裝置相連，用於控制所述信號部 分、多路解碼器、及顯示裝置工作，所述信號部分用於發送本機的信號與接收多個遠端移動 通信終端發送的視頻語音信號，所述多路解碼器用於對多路視頻語音信號進行解碼，所述中 央處理器按照所述顯示多方視頻通話的方法控制顯示裝置顯示所述多個遠端移動通信終端發 送的視頻畫面。所述在移動通信終端顯示裝置上顯示多個視頻畫面的方法及移動通信終端中，可將參加 多方視頻通話的各個移動通信終端所傳送的視頻信號同時顯示在顯示裝置上，並且突出標示 出正在發言的移動通信終端，使得用戶可看到所有通話者的視頻畫面，並可輕易獲取視頻通 話的狀態，增強了視頻通話的溝通能力，視頻通話過程更加人性化、舒適。


圖l是第一實施例的可顯示多方視頻畫面的移動通信終端硬體結構示意圖。 圖2是第一實施例顯示多方視頻通話畫面方法的流程圖。 圖3是第一實施例顯示多方視頻通話畫面方法劃分區域/子窗口示意圖。 圖4是第一實施例顯示多方視頻通話畫面方法顯示效果示意圖。 圖5是第一實施例顯示多方視頻通話畫面方法顯示效果示意圖。
圖6是第二實施例顯示多方視頻通話畫面方法顯示效果示意圖。
具體實施方式
圖1是第一實施例的移動通信終端的硬體結構示意圖。所述移動通信終端包括中央處理 器、信號部分、多路解碼器、存儲裝置、視頻輸入裝置、顯示裝置。中央處理器分別與信號 部分、多路解碼器、存儲裝置、視頻輸入裝置及顯示裝置連接以控制其工作。信號部分可包 括天線、信號接收與發射裝置、信號調製與解調裝置。信號部分主要用於接收和發射無線電 信號。多路解碼器用於對接收的多路視頻音頻信號進行解碼處理。存儲裝置包括隨機存儲器(RAM)與靜態存儲器如硬碟(HDD)、快閃記憶體(FLASH)等。視頻輸入裝置一般為攝像頭，用 於捕捉視頻畫面。顯示裝置可為液晶顯示裝置(LCD)。本實施例的移動通信終端進行多方視頻通話過程如下，首先，建立多方視頻通話連接。 接下來中央處理器控制多路解碼器對接收到的來自多個遠端移動通信終端的視頻語音信號進 行解碼，並分別將每個遠端移動通信終端的視頻畫面顯示在顯示裝置上對應的區域/子窗口 中，同時標示出正在發言的遠端使用者的移動通信終端所發送的視頻畫面，因此使用者可清 楚了解所有視頻通話參與者的狀況。具體的顯示過程可參見以下顯示方法的實施例。圖2是第一實施例的顯示多方視頻通話畫面方法的流程圖。圖2所示的步驟是在已經建立 多方視頻通話連接後進行的。首先，將顯示視頻畫面的窗口劃分成多個區域/子窗口，使每 個遠端移動通信終端對應一個區域/子窗口 。接下來從解碼器處獲取每個遠端移動通信終端 用戶處獲取每個遠端移動通信終端發送的視頻語音信號，並作如下判斷，如果其中包括視頻 信號，則接下來判斷其中是否包括音頻信號，如果包括音頻信號則在與該遠端移動通信終端 對應的區域/子窗口中顯示該移動通信終端的視頻信號並將該區域/子窗口突出顯示，否則在 與該遠端移動通信終端對應的區域/子窗口內以普通方式顯示視頻信號。如果其中不包括視 頻信號則接下來判斷其中是否包括音頻信號，如果包括音頻信號，則在與該遠端移動通信終 端對應的區域/子窗口內顯示存儲在本機上的圖標並將該區域/子窗口突出顯示。如果不包括 音頻信號則在與該遠端移動通信終端對應的區域/子窗口內以普通方式顯示存儲在本機上的 圖標。在上述方法中，在劃分區域/子窗口之前可以通過向MCU發出控制指令査詢得到遠端移動 通信終端的數目。再將顯示視頻畫面的窗口劃分成相應數目的區域/子窗口。參閱圖3，顯示 視頻畫面的窗口被劃分成6個區域/子窗口 。每個區域/子窗口對應一個遠端移動通信終端。 例如，子窗口10對應遠端移動通信終端12，其使用者為14。將多個視頻畫面同時顯示在對應的區域/子窗口的方式可為以下兩種，第一種是通過處
理器對多個視頻進行處理，將多個視頻畫面合成一個視頻畫面，顯示在播放視頻的播放器中 。第二種是建立多個視頻播放器的子窗口，每個子窗口對應一個視頻畫面。但無論哪種方法 ，均要求解碼器具有同時對多路視頻音頻信號進行解碼的能力。將區域/子窗口突出顯示的方式包括給該區域/子窗口加邊框、改變其背景顏色、大小、 使其閃爍、在其上顯示標識性文字或者圖標或者將其全屏顯示。由於將區域/子窗口全屏顯 示時需將其放大，為避免給人生硬的感覺，這一過程可以通過一段時間，例如一秒的漸變過 程實現。當前已經全屏顯示某個遠端移動終端的視頻畫面的情況下，如果要切換成另一個遠 端終端的視頻畫面，也可採用漸變的過程。具體的，當前的視頻畫面逐漸變成透明而消失， 而要切換的畫面逐漸變的清晰。在本實施例中，參閱圖4，當檢測到使用者14正在發言時， 在子窗口10上顯示出表示正在發言的圖標102。當某個遠端移動通信終端發送的信號中不包括視頻信號時，在與其對應的區域/子窗口 中顯示的圖標可為文字圖標、靜態或動態的圖片及事先錄製的視頻等。參閱圖5，優選的，除顯示遠端移動通信終端的視頻畫面外，還可在對應的區域/子窗口 內顯示聯繫人信息，如姓名，職務等等，聯繫人信息可以從移動通信終端的聯繫人資料庫査 詢得到。例如顯示在子窗口 10上的聯繫人信息104。在本實施例的多方視頻通話方法中，可將參加多方視頻通話的各個移動通信終端所傳送 的視頻信號同時顯示在顯示裝置上，並且突出標示出使用者正在發言的移動通信終端傳送的 視頻畫面，使使用者可看到所有通話者的視頻畫面，並能清楚了解是誰在發言。參閱圖6，第二實施例的顯示多方視頻通話畫面的方法與第一實施例的相似，其不同之 處在於除了顯示每個遠端移動通信終端的視頻畫面外，還在每個區域/子窗口中顯示菜單 206。通過對上述菜單上選項的選擇，可以實現對於視頻通話的控制。菜單206可以直接顯示 每個區域/子窗口中，也可以在選定該區域/子窗口時顯示，還可以在選定該區域/子窗口後 按下某個按鍵，或者點擊觸控螢幕之後再顯示相應的菜單206。對於具有不同控制權的使用者 菜單206的內容可以不同，例如對於多方視頻通話的控制者，菜單206的內容可包括掛斷某個 遠端移動通信終端、給予某個具移動通信終端發言權、對某個具移動通信終端進行靜音處理 等。對於一般的參加者，菜單206的內容可包括退出視頻通話，請求發言等。本實施當中， 子窗口20中顯示的菜單206內容包括掛斷與靜音。本實施例的顯示多方視頻通話畫面的方法與第一實施例相比，進一步在與每個遠端移動 通信終端相對應的區域/子窗口內顯示菜單206，可更加方便的對視頻通話進行控制。另外，本領域技術人員還可在本發明精神內做其它變化。當然，這些依據本發明精神所
做的變化，都應包含在本發明所要求保護的範圍之內。
權利要求
1. 一種顯示多方視頻通話的方法，其包括以下步驟將顯示視頻畫面的窗口劃分成多個區域/子窗口，使每個遠端移動通信終端對應一個區域/子窗口；從解碼器處獲取每個遠端移動通信終端發送的視頻音頻信號，並作如下判斷，如果其中包括視頻信號，則接下來判斷其中是否包括音頻信號，如果包括音頻信號則在與該遠端移動通信終端對應的區域/子窗口中顯示該移動通信終端的視頻信號並將該區域/子窗口突出顯示，否則在與該遠端移動通信終端對應的區域/子窗口內以普通方式顯示視頻信號；如果其中不包括視頻信號則接下來判斷其中是否包括音頻信號，如果包括音頻信號，則在與該遠端移動通信終端對應的區域/子窗口內顯示存儲在本機上的圖標並將該區域/子窗口突出顯示，如果不包括音頻信號則在與該遠端移動通信終端對應的區域/子窗口內以普通方式顯示存儲在本機上的圖標。
全文摘要
本發明涉及一種顯示多方視頻通話的移動通信終端及其顯示方法。所述的方法中，將多個遠端的視頻畫面同時顯示在一顯示裝置上對應的區域/子窗口中，並且突出標示出正在發言的移動通信終端，使得用戶可看到所有通話者的視頻畫面，並可輕易獲取視頻通話的狀態，增強了視頻通話的溝通能力，視頻通話過程更加人性化、舒適。
文檔編號H04Q7/32GK101212751SQ20061020141
公開日2008年7月2日 申請日期2006年12月26日 優先權日2006年12月26日
發明者陳杰良 申請人:鴻富錦精密工業(深圳)有限公司;鴻海精密工業股份有限公司