用遠程攝像機控制在多點控制單元上實現附加功能的方法
2023-09-16 05:00:15
專利名稱：用遠程攝像機控制在多點控制單元上實現附加功能的方法
技術領域：
本發明涉及數據通信技術領域，特別是指用遠程攝像機控制在多點控制單元上實現附加功能的方法。
背景技術：
多點控制單元(MCU)是寬帶網絡上為不限於一個企業或機構的眾多用戶，提供多點視頻會議服務的關鍵設備。在一個MCU上能同時召開幾十個、甚至幾百個獨立的多點視頻會議，這些會議的使用者可能隸屬不同的行業、不同的機構。
圖1所示為多點控制單元集中式控制網絡上多點視頻會議系統的結構示意圖。MCU101通過IP網絡102與視頻會議終端103相連。對於有一定級別的會議終端，可通過遠程攝像機104參與會議的控制，即有權利應用遠程攝像機控制功能(FECC)。
通常，MCU有兩種工作模式一種是單畫面工作模式，即每個終端僅顯示一個遠端畫面；另一種是四畫面工作模式，即每個終端同時顯示四個畫面，對於顯示四畫面的終端，其屏幕上可以看到三個遠端畫面和一個本地畫面。在單畫面工作模式下，採用CIF(Common Intermediate Format)圖像格式，CIF格式的圖像解析度是352×288，它由12個塊組(GOB)組成，遠程攝像機控制功能發生在相互可視的兩個視頻會議終端之間。在四畫面工作模式下，採用QCIF(Quarter CIF)圖像格式，QCIF格式的圖像解析度是176×144，它由3個塊組(GOB)組成。MCU支持四畫面合成的工作原理是在ITU-T H.261(VIDEO CODEC FOR AUDIOVISUAL SERVICES ATP×64KBIT/S)視頻格式下，可以將四路QCIF的視頻圖像合成一路CIF視頻圖像，在終端上解碼就形成了四畫面。即MCU在接收多路由各個會場傳送來的視頻數據中同時選出其中的四路視頻，進行壓縮域內合成，形成一條視頻流，再將合成後的視頻流發送給所有與會者，使每個與會者能同時看到4個會場的圖像，從而實現可以同時看到四路視頻圖像。
在實際應用中，會議的控制權利大都集中在MCU上，視頻會議終端的遠程攝像機控制的權限非常有限。目前市場上幾大流行的視頻終端產品裡，僅有個別產品支持單畫面工作模式下的遠程攝像機控制功能或者申請發言的功能，但此兩項功能只能應用其一，不能同時實現。而在多點視頻會議中經常會有通過終端實現請求發言、申請主席、主席指定某終端發言或指定下一輪主席等功能需求，以及在四畫面工作模式下，如何實現遠端攝像機控制和切換四畫面等功能需求。所以單純依靠多點視頻終端本身已有的遠程攝像機控制功能已經遠遠不能滿足新一代視頻會議的需求，迫切需要一種能夠利用已有的遠端攝像機控制功能在MCU上實現上述多項附加控制功能的方法。
發明內容
有鑑於此，本發明提供一種用遠程攝像機控制在多點控制單元上實現附加功能的方法。利用遠程攝像機控制協議，在MCU上實現主席選擇聽眾、主席選擇下一輪主席、一般聽眾申請發言、選中聽眾申請主席以及四畫面工作模式下的遠端攝像機控制和四畫面的切換等問題。
為達到上述目的本發明的技術方案是這樣實現的一種用遠程攝像機控制在多點控制單元上實現附加功能的方法，該方法包括以下步驟a、與會終端利用遠端攝像機控制功能向多點控制單元發送申請控制信號；b、多點控制單元收到該信號後，判斷發送申請控制信號的與會終端的身份是一般聽眾、選中聽眾還是主席，並動態生成與該身份的控制要求相應的字幕圖標，將該字幕圖標經編碼後插入到發往相應目的終端的視頻流上並替換該目的終端圖像的一個塊組；c、目的終端的屏幕上顯示經解碼後的多點控制單元發來的字幕圖標，並將帶有其選擇確認信息的字幕圖標再次發送給多點控制單元，使多點控制單元依據該選擇確認信息，控制相關終端畫面，實現附加功能。
較佳地，步驟a所述利用遠端攝像機控制功能是通過遠端攝像機控制界面或視頻終端的遙控器，採用組合鍵方式向多點控制單元發送申請控制信號。
較佳地，該方法進一步包括步驟b所述的多點控制單元判斷與會終端的身份之前，先根據自身設置畫面個數的參數判斷與會終端的畫面模式，如果是單畫面模式，則執行單畫面模式下與會終端相應身份的多點控制單元附加功能的處理步驟，如果是四畫面模式，則執行四畫面模式下與會終端相應身份的多點控制單元附加功能的處理步驟。
較佳地，所述步驟b為單畫面模式下一般聽眾發送申請控制信號，則相關字幕圖標為該一般聽眾的用戶名加申請發言的字幕圖標，目的終端為主席；四畫面模式下一般聽眾發送申請控制信號，則相關字幕圖標為該一般聽眾的用戶名加申請加入四畫面的字幕圖標，目的終端為主席；所述步驟c為單畫面模式下，主席終端收到該字幕圖標後，進入控制狀態並確認是否接受該申請，如果接受，則多點控制單元向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾切換為選中聽眾，否則，多點控制單元向該一般聽眾發送拒絕申請的字幕圖標；四畫面模式下，主席終端收到該字幕圖標後，進入控制狀態並確認是否接受該申請，如果接受，則在確定被替換畫面後，多點控制單元向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾切換為選中聽眾，否則，多點控制單元向該一般聽眾發送拒絕申請的字幕圖標。
較佳地，所述步驟c進一步包括單畫面模式下，主席終端收到該字幕圖標後，多點控制單元判斷主席終端的響應時間是否超時，如果是，則多點控制單元直接向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾終端切換為選中聽眾終端，否則按主席終端的意圖執行；四畫面模式下，主席終端收到該字幕圖標後，多點控制單元判斷主席終端的響應時間是否超時，如果是，則多點控制單元向該一般聽眾發送接受申請的字幕圖標後，按預定策略將該一般聽眾終端切換為選中聽眾終端，否則按主席終端的意圖執行。
較佳地，所述步驟b為單畫面模式下選中聽眾發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制和申請主席的字幕圖標，目的終端分別為選中聽眾本身和主席終端；四畫面模式下選中聽眾發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制的字幕圖標，目的終端為選中聽眾本身；所述步驟c為單畫面模式下，若選中聽眾選擇遠端攝像機控制，則多點控制單元根據選中聽眾所發的控制消息實現對遠端攝像機的控制，若選中聽眾選擇申請主席，則多點控制單元向主席終端發送該選中聽眾的用戶名加申請主席的字幕圖標，並判斷主席終端是否接受該申請，如果接受，則向該選中聽眾發送接受申請的字幕圖標，並將該選中聽眾切換為主席，將主席切換為選中聽眾，否則，向該選中聽眾發送拒絕申請的字幕圖標；四畫面模式下，選中聽眾首先確定被控畫面，然後向多點控制單元發送控制消息實現對遠端攝像機的控制。
較佳地，所述步驟c進一步包括單畫面模式下，多點控制單元判斷主席終端響應時間是否超時，如果是，則多點控制單元直接向該選中聽眾發送接受申請的字幕圖標，並將該選中聽眾終端切換為主席，將主席切換為選中聽眾，否則按主席終端的意圖執行。
較佳地，所述步驟b為單畫面模式主席發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制、切換選定聽眾和指定下一輪主席的字幕圖標，目的終端為主席終端；四畫面模式主席發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制和邀請一般聽眾進入四畫面的字幕圖標，目的終端為主席終端。
所述步驟c為單畫面模式下，若主席選擇遠端攝像機控制，則多點控制單元根據主席所發的控制消息實現對遠端攝像機的控制，若主席選擇切換選定聽眾，則多點控制單元將一般聽眾的註冊信息依次顯示給主席終端，主席確定其所要選擇的一般聽眾，多點控制單元依據主席終端所發的確認信息，將主席所選的一般聽眾切換為選中聽眾，若主席選擇指定下一輪主席，則多點控制單元向選中聽眾發送你被指定為主席的字幕圖標，並將該選中聽眾切換為主席，將主席切換為選中聽眾；四畫面模式下，若主席選擇遠端攝像機控制，則確定被控畫面後，向多點控制單元發送控制消息實現對遠端攝像機的控制，若主席選擇邀請一般聽眾進入四畫面，則確定被替換畫面後，多點控制單元將一般聽眾的註冊信息依次顯示給主席終端的被指定畫面上，主席確定其所要選擇的一般聽眾後，多點控制單元依據主席終端所發的確認信息，將所選的一般聽眾切換為選中聽眾。
較佳地，所述步驟c進一步包括，四畫面模式下，多點控制單元判斷主席終端選擇被替換畫面的響應時間是否超時，如果是，則多點控制單元直接按預定策略替換滿足條件畫面，否則按主席的意圖執行。
較佳地，所述預定策略是用一般聽眾替換掉未發言時間最長的選中聽眾，或最先進入四畫面的選中聽眾。
較佳地，所述步驟c在四畫面模式下所確定的被替換畫面是除去主席畫面的其它三個畫面。
較佳地，步驟c所述多點控制單元將一般聽眾的註冊信息依次顯示給主席終端的顯示方式為將一般聽眾的畫面顯示給主席終端，或將列有一般聽眾特徵的列表顯示給主席終端。
較佳地，所述步驟b是根據與會終端的註冊信息判斷發送申請控制信號的與會終端身份。
較佳地，所述註冊信息至少包括用戶名、別名、終端IP位址、終端型號及屬性和和當前狀態。
較佳地，所述步驟b是替換相應目的終端圖像的所有第一個塊組；所述步驟c是在屏幕的左上角顯示該字幕圖標。
應用本發明，可使與會終端通過遠端攝像機的控制界面或遙控器上的組合按鈕對遠端攝像機進行控制，利用遠程攝像機控制協議，使MCU根據用戶的註冊信息，為每一個與會終端製作會議控制所需的各種「字幕圖標」，然後將其進行編碼，轉換成壓縮域圖標後插入到發往目的終端的視頻流上並替換相應目的終端圖像的所有第一個塊組，目的終端在接收到的圖標中選擇主席選擇聽眾、主席選擇下一輪主席、一般聽眾申請發言、選中聽眾申請主席以及四畫面工作模式下的遠端攝像機控制和四畫面的切換等所要實現的附加功能。
應用本發明，利用遠程攝像機控制等協議，通過與會終端與MCU互發信息，使得任何一組會議的與會終端通過上述附加的會議控制功能實現了自我管理自我控制，這對於公眾的視訊業務的開展是必不可少的。這些附加會議控制功能的實現，可以幫助會議的組織者或使用者能更加快捷、自主地召開和組織多點會議。
圖1為多點控制單元集中式控制網絡上多點視頻會議系統示意圖；圖2為終端向MCU發送的控制遠端攝像機的控制消息結構圖；圖3為視頻會議終端和MCU處理會議附加控制功能的流程圖；圖4為圖3中(2)的後續流程圖；圖5為圖3中(1)的後續流程圖；圖6為圖5中(3)的後續流程圖；圖7為編碼後製作成的H.261圖像組塊；圖8為所製作的字幕圖標與視頻圖像組合後經解碼的圖像；
圖9為單畫面模式下申請發言的字幕圖標；圖10為單畫面模式下申請主席或遠端攝像機控制的字幕圖標；圖11為單畫面模式下申請主席的字幕圖標；圖12為單畫面模式下申請遠端攝像機控制或切換選中聽眾或指定下一輪主席的字幕圖標；圖13為四畫面模式下申請發言的字幕圖標；圖14為四畫面模式下本畫面被替換的字幕圖標；圖15為四畫面模式下申請遠端攝像機控制或邀請一般聽眾進入四畫面的字幕圖標；圖16為四畫面模式下申請遠端攝像機控制的字幕圖標。
具體實施例方式
為使本發明的目的、技術方案及優點更加清楚明白，以下參照附圖並舉實施例，對本發明做進一步詳細說明。
在本實施例中，規定主持會議方為主席並進入視頻畫面，在視頻畫面內除去主席畫面的其它畫面為選中聽眾，所有未進入畫面的與會者為一般聽眾。在單畫面模式下，一般聽眾所看到的是主席終端的畫面，主席看到的是選中聽眾終端的畫面；在四畫面模式下，一般聽眾所看到的是主席終端和三個選中聽眾終端的畫面，選中聽眾看到的是主席終端、本地終端和兩個選中聽眾終端的畫面，主席看到的是本地終端和三個選中聽眾終端的畫面。
MCU依據基於分組交換的多媒體通信標準(ITU-TH.323 Annex Q)和遠程攝像機控制協議(ITU-TH.281)可以與標準H.323終端之間進行遠端攝像機控制。當終端用戶按下遠端攝像機的控制界面或終端遙控器上的遠控按鈕「FAR」以及控制攝像機上下左右旋轉按鈕中的任意一個時，終端在承載ITU-TH.281信息的ITU-TH.224通道(A DATA LINK LAYER FOR SIMPLEXAPPLICATION USING THE H.221 LSD/HSD/MLP CHANNELS)中向MCU發送H.281控制遠端攝像機的控制消息(H.281 FECC Action Message)。MCU捕獲每個與會終端發來的遠端攝像機控制消息，並動態生成與控制要求相關的字幕圖標，將該字幕圖標插入到發往目的終端的視頻流上並替換發往目的終端圖像的所有第一個塊組。當終端接收到MCU發來的編碼視頻流後，按照ITU-T H.261格式對其解碼，字幕圖標被復原為原有的字幕圖像格式顯示在屏幕的左上角，與動態的視頻圖像組成一個完整的CIF格式的視頻圖像，目的終端依據視頻圖像的提示做出選擇，並將該信息發送到MCU上，從而利用遠程攝像機控制協議在MCU上實現多項附加功能。
圖2所示為終端向MCU發送的控制遠端攝像機的控制消息結構圖。在該消息結構圖中，P(Pan)即盤，表示控制攝像頭底盤左右轉，T(Tilt)即傾斜，表示控制攝像頭上下轉，Z(Zoom)即縮放表示控制鏡機縮放，調節遠近，F(Focus)即聚焦，表示控制攝像機調節聚焦遠近，不同的取值組合成不同的控制消息，每個消息對應著攝像機的一個活動，如上轉，下轉等。Reserved和Timeout為保留部分。
在MCU啟動後，操作員根據每個終端用戶提供的註冊信息在MCU上為每個視頻會議終端進行註冊。註冊表的信息主要包括用戶名、別名、終端IP位址、終端型號及屬性和呼叫帶寬等。註冊完畢後，MCU根據用戶的註冊信息及控制會議的需要動態生成各種字幕圖標。例如，將「用戶名」+「申請發言」的文本格式信息，分別用H.261編碼算法進行編碼，製作成H.261的圖像組塊(見圖7)，當終端接收到MCU發來的編碼視頻流後，按照H.261格式對其解碼，圖標被復原為原有的字幕圖像格式顯示在屏幕的左上角，並與動態的視頻圖像組成一個完整的CIF格式的視頻圖像(見圖8)。一個字幕圖標的大小為一個組塊，其解析度為176×48像數。如果使用24×24的點陣漢字，一個組塊內可以容納14個漢字，如果使用16×16的西文，一個組塊內可以容納33個西文。
基於上述原理，並結合流程圖具體說明實現MCU的附加功能的方法。
圖3所示為視頻會議終端和MCU處理會議附加控制功能的流程圖。
步驟301，任一與會終端向MCU發送遠程攝像機控制信號，其具體操作為先按鍵「FAR」，再按上移鍵「↑」、下移鍵「↓」、左移鍵「←」或右移鍵「→」的其中之一；步驟302，MCU收到該信號後，根據自身設置畫面個數的參數判斷該與會終端是單畫面還是四畫面，如果是單畫面，執行步驟303，如果是四畫面，執行步驟337(見圖5)；步驟303，MCU依據終端的註冊信息判斷發控制信號者的身份，如果是一般聽眾發出的控制信號，則執行步驟304，如果是選中聽眾發出的控制信號，則執行步驟313，如果是主席發出的控制信號，則執行步驟326(見圖4)；由於遠程攝像機控制只能發生在相互可視的終端之間，在單畫面模式下，即在主席終端和選中聽眾終端之間。一般聽眾只能看到主席，而沒有哪一個聽眾能夠看到他，因此，一般聽眾不具有遠端攝像機控制能力。所以，一般聽眾發控制信息，只能是申請發言並成為選中聽眾，如果是一般聽眾申請主席，該聽眾必須先申請為選中聽眾，再申請主席。選中聽眾發控制信息，可以申請遠端攝像機控制或申請主席。主席發控制信息可能是申請遠端攝像機控制，或申請切換選中聽眾，或指定下一輪主席。
步驟304，MCU向該一般聽眾終端發送「中請發言」的字幕圖標；步驟305，MCU收到該一般聽眾的確認反饋信息後，將申請發言字幕與該一般聽眾的用戶名合成的新字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，主席終端彈出「***申請發言(Yes/No)」的字幕圖標(見圖9)；步驟306，在預先設置的時間N秒內，MCU判斷主席終端是否超時，如果是執行步驟311，否則執行步驟307；步驟307，主席終端向MCU發進入控制狀態信號，其具體操作為主席按鍵「FAR」進入控制狀態；
步驟308，主席按左移鍵「←」或右移鍵「→」來選擇是否接受該請求，按上移鍵「↑」或下移鍵「↓」確定所選信息，同時將選定信息發到MCU上；步驟309，MCU判斷主席終端是否接受該申請，如果接受執行步驟311，否則執行步驟310；步驟310，MCU將拒絕申請發言的字幕圖標按H.261編碼後，插入到發往該一般聽眾終端的視頻流上，向該一般聽眾終端發送「拒絕申請發言」的字幕圖標，主席和申請發言的一般聽眾按鍵「NEAR」，結束此控制過程；步驟311，MCU將接收申請發言的字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，向該一般聽眾終端發送「接受申請發言」字幕圖標；步驟312，MCU將該申請發言的一般聽眾切換為選定聽眾，主席和該申請發言的一般聽眾按鍵「NEAR」，結束此控制過程；至此，在單畫面模式下，一般聽眾申請發言過程結束。
步驟313，MCU向該選中聽眾終端發送選擇「1、遠端攝像機控制，2、申請主席」的字幕圖標(見圖10)；步驟314，該選中聽眾收到多點控制單元發來的上述字幕圖標後，向多點控制單元發選擇信息，其具體操作為該選中聽眾按左移鍵「←」或右移鍵「→」來選擇所要申請的功能；步驟315，該選中聽眾按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定的信息發到MCU上；步驟316，MCU判斷該選中聽眾終端所選功能，如果選擇「1、遠端攝像機控制」則執行步驟317，如果選擇「2、申請主席」則執行步驟318；步驟317，該選中聽眾收到多點控制單元發來的「遠端攝像機控制」的字幕圖標後，通過上移鍵「↑」、下移鍵「↓」、左移鍵「←」、右移鍵「→」和縮放鍵「Zoom」實現對遠端攝像機的控制，按鍵「NEAR」，結束此控制過程；步驟318，MCU將申請主席字幕與該選中聽眾的用戶名合成的新字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，主席終端彈出「***申請主席(Yes/No)」的字幕圖標(見圖11)；步驟319，在預先設置的時間N秒內，MCU判斷主席終端是否超時，如果是執行步驟324，否則執行步驟320；步驟320，主席終端向MCU發進入控制狀態信號，其具體操作為主席按鍵「FAR」進入控制狀態；步驟321，主席按左移鍵「←」或右移鍵「→」來選擇是否接受該請求，按上移鍵「↑」或下移鍵「↓」確定所選信息，同時將選定信息發到MCU上；步驟322，MCU判斷主席終端是否接受該申請，如果接受執行步驟324，否則執行步驟323；步驟323，MCU將拒絕申請主席的字幕圖標按H.261編碼後，插入到發往該選中聽眾終端的視頻流上，向該選中聽眾終端發送「拒絕申請主席」的字幕圖標，主席和申請主席的選中聽眾按鍵「NEAR」，結束此控制過程；步驟324，MCU向該選中聽眾終端發送「接受申請主席」的字幕圖標；步驟325，MCU將該選中聽眾切換為主席，而原來的主席切換為選中聽眾，主席和該申請主席的選中聽眾按鍵「NEAR」，結束此控制過程；至此，在單畫面模式下，選中聽眾終端申請遠端攝像機控制或申請主席的過程結束。
圖4為圖3中(2)的後續流程圖。
步驟326，MCU向主席終端發送選擇「1、遠端攝像機控制，2、切換選中聽眾，3、指定下一輪主席」的字幕圖標(見圖12)；步驟327，主席收到多點控制單元發來的上述字幕圖標後，向多點控制單元發選擇信息，其具體操作為主席按左移鍵「←」或右移鍵「→」選擇所需要的功能；步驟328，主席按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定信息發到MCU上；步驟329，MCU判斷主席終端所選功能，如果選擇「1、遠端攝像機控制」則執行步驟330，如果選擇「2、切換選中聽眾」，則執行步驟331，如果選擇「3、指定下一輪主席」則執行步驟335；步驟330，主席收到多點控制單元發來的「遠端攝像機控制」的字幕圖標後，通過上移鍵「↑」、下移鍵「↓」、左移鍵「←」、右移鍵「→」和縮放鍵「Zoom」實現對遠端攝像機的控制，按鍵「NEAR」，結束此控制過程；步驟331，MCU按照終端註冊的先後順序，將一般聽眾以圖像的方式或列表的方式切換為選中聽眾，顯示給主席；步驟332，主席確定是否指定該一般聽眾為選中聽眾，如果是執行步驟334，否則執行步驟333；步驟333，主席按左移鍵「←」或右移鍵「→」選擇下一個一般聽眾；步驟334，主席按上移鍵「↑」或下移鍵「↓」確認上述選擇，同時發送信息給MCU，該一般聽眾被切換為選中聽眾，主席按鍵「NEAR」結束此控制過程；步驟335，MCU向新指定的主席終端即選定聽眾終端發送「你被指定為主席」字幕圖標；步驟336，MCU將新指定的主席終端即選中聽眾終端切換為主席終端，將原來的主席終端切換為選中聽眾終端，原主席按鍵「NEAR」，結束此控制過程；至此，在單畫面模式下，主席終端申請遠端攝像機控制，或切換選中聽眾，或指定下一輪主席的控制過程結束。
圖5為圖3中(1)的後續流程圖。
步驟337，MCU依據終端的註冊信息判斷發控制信號者的身份，如果是一般聽眾發出的控制信號，則執行步驟338，如果是主席發出的控制信號，則執行步驟349，如果是選中聽眾發出的控制信號，則執行步驟363；在四畫面模式下，主席終端始終位於四畫面之一，且不參與切換。遠端攝像機控制發生在相互可視的終端之間，即主席終端和選中聽眾終端之間，一般聽眾只能看到主席和選中聽眾，而沒有哪一個聽眾能夠看到他，因此，一般聽眾發控制信息，只能是申請進入四畫面並成為選中聽眾，選中聽眾發控制信息，只能是申請遠端攝像機控制，主席發控制信息可能是申請遠端攝像機控制，或邀請一般聽眾進入四畫面，進行選中聽眾控制。
步驟338，MCU向該一般聽眾終端發送「申請進入四畫面」字幕圖標；步驟339，MCU收到該一般聽眾的確認反饋信息後，將申請加入的字幕與該一般聽眾的用戶名合成的新字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，主席終端彈出「***申請加入(Yes/No)」的字幕圖標(見圖13)；步驟340，在預先設置的時間N秒內，MCU判斷主席終端是否超時，如果是執行步驟341，否則執行步驟342；步驟341，按預定條件替換滿足條件的畫面，該預定條件可以是最久未發言者所在的畫面被替換，或是最先進入四畫面者所在的畫面被替換，主席和申請進入四畫面的一般聽眾按鍵「NEAR」，結束此控制過程；步驟342，主席終端向MCU發進入控制狀態信號，其具體操作為主席按鍵「FAR」進入控制狀態；步驟343，主席按左移鍵「←」或右移鍵「→」來選擇是否接受該請求，按上移鍵「↑」或下移鍵「↓」確定所選信息，同時將選定信息發到MCU上；步驟344，MCU判斷主席終端是否接受該申請，如果接受執行步驟346，否則執行步驟345；
步驟345，MCU將拒絕加入的字幕圖標按H.261編碼後，插入到發往該一般聽眾終端的視頻流上，向該一般聽眾終端發送「拒絕加入」的字幕圖標，主席和申請進入四畫面的一般聽眾按鍵「NEAR」，結束此控制過程；步驟346，在主席終端除了主席畫面的其它三個畫面之一上彈出「本畫面被替換」字幕圖標(見圖14)，主席按左移鍵「←」或右移鍵「→」移動該字幕圖標，選擇被替換的視頻畫面；步驟347，主席終端按上移鍵「↑」或下移鍵「↓」確定所選信息，同時將選定信息發到MCU上；步驟348，MCU將該一般聽眾終端加入到四畫面中，該一般聽眾被切換為選中聽眾並替換主席指定的視頻畫面，該選中聽眾和主席按鍵「NEAR」，結束此控制過程；至此，在四畫面模式下，一般聽眾申請加入四畫面過程結束。
步驟349，MCU向主席終端發送選擇「1、遠端攝像機控制，2、邀請一般聽眾進入四畫面」的字幕圖標(見圖15)；步驟350，主席收到多點控制單元發來的上述字幕圖標後，向多點控制單元發選擇信息，其具體操作為主席按左移鍵「←」或右移鍵「→」選擇所需要的功能，按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定信息發到MCU上；步驟351，MCU判斷主席終端所選功能，如果選擇「1、遠端攝像機控制」則執行步驟352，如果選擇「2、邀請一般聽眾進入四畫面，則執行步驟356；步驟352，MCU將「遠端攝像機控制」的字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，在主席終端的第一分屏上閃爍顯示「遠端攝像機控制」的字幕圖標(見圖16)；步驟353，主席按左移鍵「←」或右移鍵「→」移動上述字幕圖標到被控遠端攝像機的視頻畫面；
步驟354，主席按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定信息發到MCU上；步驟355，主席通過上移鍵「↑」、下移鍵「↓」、左移鍵「←」、右移鍵「→」和縮放鍵「Zoom」實現對遠端攝像機的控制，按鍵「NEAR」，結束此控制過程；步驟356，MCU將「本畫面被替換」的字幕圖標按H.261編碼後，插入到發往主席終端的視頻流上，在除了主席終端畫面的其它三個畫面的任一畫面中顯示「本畫面被替換」字幕圖標(見圖14)；步驟357，主席按左移鍵「←」或右移鍵「→」移動上述字幕圖標到被替換的視頻畫面；步驟358，主席按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定信息發到MCU上；步驟359，MCU按照終端註冊的先後順序，將一般聽眾以圖像的方式或列表的方式切換為選中聽眾，顯示給主席；步驟360，主席根據所顯示的一般聽眾確定是否指定該一般聽眾為選中聽眾，如果是執行步驟362，否則執行步驟361；步驟361，主席按左移鍵「←」或右移鍵「→」選擇下一個一般聽眾；步驟362，主席按上移鍵「↑」或下移鍵「↓」確認上述選擇，同時發送信息給MCU，MCU將該一般聽眾切換為選中聽眾，即被邀請該一般聽眾進入四畫面，主席按鍵「NEAR」結束此控制過程；至此，在四畫面模式下，主席申請遠端攝像機控制，或主席邀請一般聽眾進入四畫面的過程結束。
圖6為圖5中(3)的後續流程圖。
步驟363，MCU將「遠端攝像機控制」的字幕圖標按H.261編碼後，插入到發往該選中聽眾終端的視頻流上，在選中聽眾終端的第一分屏上閃爍、顯示「遠端攝像機控制」的字幕圖標；
步驟364，該選中聽眾按左移鍵「←」或右移鍵「→」移動上述字幕圖標到被控遠端攝像機的視頻畫面；步驟365，該選中聽眾按上移鍵「↑」或下移鍵「↓」確定所選功能，同時將選定信息發到MCU上；步驟366，該選中聽眾通過上移鍵「↑」、下移鍵「↓」、左移鍵「←」、右移鍵「→」和縮放鍵「Zoom」實現對遠端攝像機的控制，按鍵「NEAR」，結束此控制過程；至此，在四畫面模式下，選中聽眾申請對遠端攝像機控制的過程結束。
本發明所提出的方法適用於具有遠端攝像機控制功能的所有H.323視頻會議系統。
以上所述僅為本發明的較佳實施例而已，並不用以限制本發明，凡在本發明的精神和原則之內，所作的任何修改、等同替換、改進等，均應包含在本發明的保護範圍之內。
權利要求
1.一種用遠程攝像機控制在多點控制單元上實現附加功能的方法，其特徵在於該方法包括以下步驟a、與會終端利用遠端攝像機控制功能向多點控制單元發送申請控制信號；b、多點控制單元收到該信號後，判斷發送申請控制信號的與會終端的身份是一般聽眾、選中聽眾還是主席，並動態生成與該身份的控制要求相應的字幕圖標，將該字幕圖標經編碼後插入到發往相應目的終端的視頻流上並替換該目的終端圖像的一個塊組；c、目的終端的屏幕上顯示經解碼後的多點控制單元發來的字幕圖標，並將帶有其選擇確認信息的字幕圖標再次發送給多點控制單元，使多點控制單元依據該選擇確認信息，控制相關終端畫面，實現附加功能。
2.根據權利要求1所述的方法，其特徵在於步驟a所述利用遠端攝像機控制功能是通過遠端攝像機控制界面或視頻終端的遙控器，採用組合鍵方式向多點控制單元發送申請控制信號。
3.根據權利要求1所述的方法，其特徵在於該方法進一步包括步驟b所述的多點控制單元判斷與會終端的身份之前，先根據自身設置畫面個數的參數判斷與會終端的畫面模式，如果是單畫面模式，則執行單畫面模式下與會終端相應身份的多點控制單元附加功能的處理步驟，如果是四畫面模式，則執行四畫面模式下與會終端相應身份的多點控制單元附加功能的處理步驟。
4.根據權利要求3所述的方法，其特徵在於，所述步驟b為單畫面模式下一般聽眾發送申請控制信號，則相關字幕圖標為該一般聽眾的用戶名加申請發言的字幕圖標，目的終端為主席；四畫面模式下一般聽眾發送申請控制信號，則相關字幕圖標為該一般聽眾的用戶名加申請加入四畫面的字幕圖標，目的終端為主席；所述步驟c為單畫面模式下，主席終端收到該字幕圖標後，進入控制狀態並確認是否接受該申請，如果接受，則多點控制單元向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾切換為選中聽眾，否則，多點控制單元向該一般聽眾發送拒絕申請的字幕圖標；四畫面模式下，主席終端收到該字幕圖標後，進入控制狀態並確認是否接受該申請，如果接受，則在確定被替換畫面後，多點控制單元向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾切換為選中聽眾，否則，多點控制單元向該一般聽眾發送拒絕申請的字幕圖標。
5.根據權利要求4所述的方法，其特徵在於所述步驟c進一步包括單畫面模式下，主席終端收到該字幕圖標後，多點控制單元判斷主席終端的響應時間是否超時，如果是，則多點控制單元直接向該一般聽眾發送接受申請的字幕圖標，並將該一般聽眾終端切換為選中聽眾終端，否則按主席終端的意圖執行；四畫面模式下，主席終端收到該字幕圖標後，多點控制單元判斷主席終端的響應時間是否超時，如果是，則多點控制單元向該一般聽眾發送接受申請的字幕圖標後，按預定策略將該一般聽眾終端切換為選中聽眾終端，否則按主席終端的意圖執行。
6.根據權利要求3所述的方法，其特徵在於，所述步驟b為單畫面模式下選中聽眾發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制和申請主席的字幕圖標，目的終端分別為選中聽眾本身和主席終端；四畫面模式下選中聽眾發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制的字幕圖標，目的終端為選中聽眾本身；所述步驟c為單畫面模式下，若選中聽眾選擇遠端攝像機控制，則多點控制單元根據選中聽眾所發的控制消息實現對遠端攝像機的控制，若選中聽眾選擇申請主席，則多點控制單元向主席終端發送該選中聽眾的用戶名加申請主席的字幕圖標，並判斷主席終端是否接受該申請，如果接受，則向該選中聽眾發送接受申請的字幕圖標，並將該選中聽眾切換為主席，將主席切換為選中聽眾，否則，向該選中聽眾發送拒絕申請的字幕圖標；四畫面模式下，選中聽眾首先確定被控畫面，然後向多點控制單元發送控制消息實現對遠端攝像機的控制。
7.根據權利要求6所述的方法，其特徵在於，所述步驟c進一步包括單畫面模式下，多點控制單元判斷主席終端響應時間是否超時，如果是，則多點控制單元直接向該選中聽眾發送接受申請的字幕圖標，並將該選中聽眾終端切換為主席，將主席切換為選中聽眾，否則按主席終端的意圖執行。
8.根據權利要求3所述的方法，其特徵在於，所述步驟b為單畫面模式主席發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制、切換選定聽眾和指定下一輪主席的字幕圖標，目的終端為主席終端；四畫面模式主席發送申請控制信號，則相關字幕圖標為申請遠端攝像機控制和邀請一般聽眾進入四畫面的字幕圖標，目的終端為主席終端。所述步驟c為單畫面模式下，若主席選擇遠端攝像機控制，則多點控制單元根據主席所發的控制消息實現對遠端攝像機的控制，若主席選擇切換選定聽眾，則多點控制單元將一般聽眾的註冊信息依次顯示給主席終端，主席確定其所要選擇的一般聽眾，多點控制單元依據主席終端所發的確認信息，將主席所選的一般聽眾切換為選中聽眾，若主席選擇指定下一輪主席，則多點控制單元向選中聽眾發送你被指定為主席的字幕圖標，並將該選中聽眾切換為主席，將主席切換為選中聽眾；四畫面模式下，若主席選擇遠端攝像機控制，則確定被控畫面後，向多點控制單元發送控制消息實現對遠端攝像機的控制，若主席選擇邀請一般聽眾進入四畫面，則確定被替換畫面後，多點控制單元將一般聽眾的註冊信息依次顯示給主席終端的被指定畫面上，主席確定其所要選擇的一般聽眾後，多點控制單元依據主席終端所發的確認信息，將所選的一般聽眾切換為選中聽眾。
9.根據權利要求8所述的方法，其特徵在於所述步驟c進一步包括，四畫面模式下，多點控制單元判斷主席終端選擇被替換畫面的響應時間是否超時，如果是，則多點控制單元直接按預定策略替換滿足條件畫面，否則按主席的意圖執行。
10.根據權利要求5或9所述的方法，其特徵在於所述預定策略是用一般聽眾替換掉未發言時間最長的選中聽眾，或最先進入四畫面的選中聽眾。
11.根據權利要求4或8所述的方法，其特徵在於，所述步驟c在四畫面模式下所確定的被替換畫面是除去主席畫面的其它三個畫面。
12.根據權利要求8所述的方法，其特徵在於，步驟c所述多點控制單元將一般聽眾的註冊信息依次顯示給主席終端的顯示方式為將一般聽眾的畫面顯示給主席終端，或將列有一般聽眾特徵的列表顯示給主席終端。
13.根據權利要求1所述的方法，其特徵在於，所述步驟b是根據與會終端的註冊信息判斷發送申請控制信號的與會終端身份。
14.根據權利要求12或13所述的方法，其特徵在於，所述註冊信息至少包括用戶名、別名、終端IP位址、終端型號及屬性和和當前狀態。
15.根據權利要求1所述的方法，其特徵在於，所述步驟b是替換相應目的終端圖像的所有第一個塊組；所述步驟c是在屏幕的左上角顯示該字幕圖標。
全文摘要
本發明提供了一種用遠程攝像機控制在多點控制單元上實現附加功能的方法，該方法包括以下步驟a、與會終端利用遠端攝像機控制功能向多點控制單元發送申請控制信號；b、多點控制單元收到該信號後，判斷發送申請控制信號的與會終端的身份是一般聽眾、選中聽眾還是主席，並動態生成與該身份的控制要求相應的字幕圖標，將該字幕圖標經編碼後插入到發往相應目的終端的視頻流上並替換該目的終端圖像的一個塊組；c、目的終端的屏幕上顯示經解碼後的多點控制單元發來的字幕圖標，並將帶有其選擇確認信息的字幕圖標再次發送給多點控制單元，使多點控制單元依據該字幕圖標信息，控制相關終端畫面，實現附加功能。
文檔編號H04N7/14GK1522070SQ0310236
公開日2004年8月18日 申請日期2003年2月10日 優先權日2003年2月10日
發明者朱志祥, 汪陳伍, 龍豔, 李燕 申請人:西安西郵雙維通信技術有限公司