網絡影像合成顯示系統的製作方法

2023-10-11 16:09:49 1

專利名稱：網絡影像合成顯示系統的製作方法
技術領域：
本發明涉及使利用與網絡連接的多個照相機攝影的影像顯示在與網絡連接的多個顯示裝置上的網絡影像合成顯示系統。
背景技術：
作為具有用於顯示使用遠距離的照相機攝影的影像的功能的裝置，包括電視等存在多種。另夕卜，近年來，伴隨網際網路等網絡的發展，使利用與網絡連接的照相機攝影的影像顯示在個人計算機中的技術
也得到了普及。另外，還提出了如下的顯示系統通過合成使用多個照相機攝影的影像，顯示比可以使用 一 個照相機攝影的範圍更寬範圍的影像(例如專利文獻1)。另外，為了顯示大的影像而連接多個顯示處理裝置的影像以作為一個大的影像進行顯示的多重大畫面裝置也得到了產品化。
專利文獻1:日本特開2002 - 244683號〃>才艮
但是，在從使用多個照相機攝影的影像製作一個合成影像，並經由網絡向遠距離地設置的顯示裝置發送該合成影像，且顯示裝置顯示所接收到的合成影像的系統中，伴隨照相機臺數的增加，影像合成處理的負荷變大，所以影像合成處理成為系統動作的瓶頸。即，存在可以同時處理的照相機影像的數量受到影像合成的處理能力的限制這樣的i果題。
另外，由於伴隨照相機臺數的增加而合成影像的數據量也增加，所以還存在合成影像的網絡發送時的網絡負荷增大這樣的課題。另外，顯示裝置由多個顯示裝置構成，在組合多個顯示裝置的顯示影像來顯示一個合成影像的情況下，各顯示裝置還需要與自己的顯示區域對應地分割/選擇所接收到的合成影像的一部分的處理，還存在顯示裝置的處理負荷也變高這樣的課題。

發明內容
本發明是為了解決上述課題而完成的，其目的在於提供一種網絡影像合成顯示系統，可以消除由於照相機臺數的增加而引起的影像合成處理的瓶頸，並且可以降低影像傳送中的網絡的通信業務量。
本發明的網絡影像合成顯示系統使用多個發送裝置經由網絡組
播(multicast)發送使用多個照相機攝影的照相機影像，合成參數計算裝置使用上述照相機影像，與影像處理裝置對應地計算出為了合成顯示在各顯示裝置中的顯示影像而所需的合成參數，向各影像處理裝置發送該合成參數，影像處理裝置根據該合成參數，從照相機影像合成顯示影像。
根據本發明的網絡影像合成顯示系統，具有如下效果各影像處理裝置僅對顯示在一個顯示裝置上的顯示影像進行合成處理，所以與使用一個影像處理裝置對顯示在所有顯示裝置上的影像進行合成處理的情況相比，處理負荷不會集中，而不發生合成處理的瓶頸。另外，由於無需在網絡上發送合成影像，所以還具有可以降低網絡負荷這樣的效果。


圖1是本發明的實施方式1的網絡影像合成顯示系統的結構圖。圖2是示出使用多個照相機攝影的照相機影像的相互關係的圖。圖3是示出本發明的實施方式1的合成參數計算裝置的動作流程的圖。
圖4是示出影像校正處理後的各照相機的照相機影像的圖。圖5是示出各照相機影像的共同影像區域的圖。圖6是示出影像區域的設定例子的圖。圖7是示出影像區域的分割例子的圖。
圖8是示出顯示區域與照相機影像的對應關係的一個例子的圖。
5圖9是示出合成參數的設定內容的圖。 圖IO是示出影像處理裝置的動作流程的圖。 圖ll是示出影像處理裝置中的影像合成方法的圖。 圖12是示出在顯示裝置上顯示的合成後的所有影像的圖。 圖13是示出本發明的實施方式2的合成參數計算裝置的動作流 程的圖。
圖14是本發明的實施方式3的網絡影像合成顯示系統的結構圖。 (附圖標記說明) 101、 102、 103照相才幾 104網絡
105合成參數計算裝置
106、 107、 108、 109影像處理裝置
110、 111、 112發送裝置
113、 114、 115、 116顯示裝置
具體實施方式
實施方式1
根據圖1對本發明的實施方式1的網絡影像合成顯示系統的結構 進行說明。該網絡影像合成顯示系統包括用於攝影影像的照相機 101、 102、 103;將利用這些照相機攝影的影像經由網絡104組播發 送到合成參數計算裝置105以及影像處理裝置106、 107、 108、 109 的發送裝置110、 111、 112;計算出在合成多個照相機影像時使用的 合成參數，並將所計算出的合成參數經由網絡104發送到影像處理裝 置106、 107、 108、 109的合成參數計算裝置105;根據從發送裝置 110、 111、 112接收到的照相機影像以及從合成參數計算裝置105接 收到的合成參數，合成顯示影像的影像處理裝置106、 107、 108、 109; 以及顯示所合成的顯示影像的顯示裝置113、 114、 115、 116。
另外，網絡104是支持組播傳送的網絡，也可以是網際網路、專用 通信線路、LAN等中的任意一個。另外，在圖l中使用了三臺照相機和四臺顯示裝置，但照相機的臺數以及顯示裝置的臺數不限於此。
接下來，對實施方式1的網絡影像合成顯示系統的動作進行說
明。圖2是示出利用三臺照相機101、 102、 103攝影了風景201而得 到的影像的相互關係的例子。在圖2(a)中，將照相機101攝影而得 到的影像設為照相機影像202，將照相機102攝影而得到的影像設為 照相機影像203,將照相機103攝影而得到的影像設為照相機影像 204。如圖2 (a)所示，照相機影像202、 203、 204具有部分地與其 他照相機影像重合的影像區域，進行攝影以整體上含蓋風景201。但 是，在照相機的設置中難以嚴密地對準照相機間相互的位置姿勢，所 以一般如圖所示各照相機影像具有不同的傾斜、尺度(scale)。因此， 在使照相機影像202、 203、 204顯示於顯示裝置113、 114、 115、 116 上時，即使單純地使照相機影像並排顯示，也如圖2(b)所示，各顯 示影像的邊界區域不連續。另外，在實施方式l中，固定設置照相機 101、 102、 103，並在攝影期間內不變動照相機的角度等的設定。
照相機101向發送裝置110輸出照相機影像202。同樣地，照相 機102向發送裝置111輸出照相機影像203，照相機103向發送裝置 112輸出照相機影像204。
發送裝置110將由照相機101攝影而得到的照相機影像202變換 成適合於網絡發送的形式，經由網絡104組播發送給合成參數計算裝 置105以及影像處理裝置106、 107、 108、 109。同樣地，發送裝置 111、 112將由照相機102、 103分別攝影而得到的照相機影像203、 204組播發送給合成參數計算裝置105以及影像處理裝置106、 107、 108、 109。
合成參數計算裝置105計算出在使用照相機影像202、 203、 204 來合成由影像處理裝置106、 107、 108、 109使顯示裝置113、 114、 115、 116顯示的顯示影像時使用的合成參數後，向影像處理裝置106、 107、 108、 109發送該計算出的合成參數。另外，合成參數是與各影 像處理裝置對應地計算出的，對各影像處理裝置僅分別發送對應的合 成參數。圖3是示出合成參數計算裝置105的動作流程的圖。以下，根據附圖對合成參數計算裝置105的動作進行說明。
合成參數計算裝置105首先從發送裝置110、 111、 112中接收照 相機影像202、 203、 204 (影像接收處理步驟S301)。接下來，對 所接收到的照相機影像202、 203、 204進行比較，檢測各照相機影像 間的共同部分(影像比較處理步驟S302 )。此處，對檢測各照相機 影像間的共同部分的方法沒有限定，作為一般的手法之一，有抽取各 影像的特徵性的點，並檢查該特徵點是否共同存在於各影像中的方 法。作為具體的手法，有SIFT ( Scale Invariant Feature Transform )。
接下來，求出用於校正各影像間的偏差以使所接收到的照相機影 像的共同部分不產生偏差而重合的影像校正參數(影像校正參數生成 處理步驟S303)。
此處，對影像校正參數的作用進行說明。照相機影像202、 203、 204由於是由不同的照相機101、 102、 103攝影而得到的，所以影像 的比例尺、傾斜、照相機的視點等不同，即使將照相機影像直接重合， 也產生偏差。因此，需要校正照相機影像202、 203、 204以使各照相 機影像的共同部分不產生偏差而重合。圖4示出對照相機影像202、 203、 204進行影像校正而得到的校正影像401、 402、 403，示出各校 正影像內的共同的物體具有相同的傾斜、相同的大小的狀態。影像校 正參數是指定這樣的與照相機影像對應的影像校正量的參數。
另外，在本實施方式中，對影像校正參數的具體的形式、導出手 法沒有限定，通常公知的是，例如在攝影遠景的情況下，如果在各影 像間可以檢測四個點以上的共同點，則求出平面射影變換 (Homography )而作為校正參數。
接下來，生成用於調整亮度、顏色等畫質的畫質調整參數(畫質 調整參數生成處理步驟S304)。圖5示出重合了圖4所示的校正影 像的樣子。在圖5中與圖4相同的部分用同一標號表示。共同影像區 域501表示在重合校正影像401與校正影像402時共同的影像區域， 共同影像區域502表示在重合校正影像402與校正影像403時共同的 影像區域。在圖像合成時，共同影像區域501、 502部分被相加兩個校正影像，從而亮度與單獨的影像區域部分不同，所以需要調整亮度。 另外，當由於光的反射、照相機參數的差異而共同影像區域部分的顏 色在影像間不同的情況下，還需要調整顏色成分。畫質調整參數用於 規定畫質調整量，該畫質調整量用於在如上所述重合各校正影像時在 影像間的畫質中不產生不均勻。畫質調整參數的生成處理還被稱為顏
色校正、混合(blending)，作為影像合成時的調整手法，提出了各 種手法。
接下來，設定在顯示裝置113、 114、 115、 116中顯示的影像區 域(顯示區域設定處理步驟S305)。如圖5所示，步驟S304結束 時的由校正影像401、 402、 403構成的合成影像整體的區域形狀一般 是凹凸形狀。因此，該形狀與將顯示影像的顯示裝置113、 114、 115、 116的各顯示區域合起來的顯示區域整體的形狀通常不同。因此，需 要與顯示裝置的顯示區域整體的形狀對應地，設定所顯示的影像區 域。
此處，設為將顯示裝置113、 114、 115、 116的顯示區域合起來 的整體形狀為長方形而進行說明。在圖6中，作為影像區域的設定例 子，示出影像區域601和影像區域602這兩個情況。由於顯示裝置113、 114、 115、 116的顯示區域整體的形狀為長方形，所以影像區域601、 602的形狀都為長方形。在影像區域601的情況下，由於在其區域內 存在不包含於校正影像401、 402、 403中的任意一個影像中的區域， 所以這樣的區域需要用黑色等預定的顏色塗滿等處理。與其相對，影 像區域602是將該區域內部被包含於校正影像401、 402、 403中的任 意一個中那樣的最大長方形設定成影像區域的例子。在以後的說明 中，將影像區域602設定成顯示區域而進行說明。
接下來，設定向影像處理裝置106、 107、 108、 109發送的合成 參數(合成參數設定處理步驟S306)。在步驟S306中，首先，與 顯示裝置113、 114、 115、 116的各顯示區域的形狀對應地分割通過 顯示區域設定處理S305設定的影像區域602。此處，如圖7所示，將 影像區域602分割成四個疊合的長方形的區域，分別設成在顯示裝置
9113、 114、 115、 116中顯示的顯示區域702、 703、 704、 705。
接下來，決定各顯示區域702、 703、 704、 705與校正影像401、 402、 403的合成的對應關係。圖8是示出該對應關係的一個例子的圖。 在該例子中，首先顯示區域702中顯示的影像由校正影像401和402 合成，顯示區域703中顯示的影像由校正影像402和403合成，顯示 區域704中顯示的影像由校正影像401和402合成，顯示區域705中 顯示的影像由校正影像402和403合成。然後，決定為了合成各顯示 區域而所需的從各校正影像中切出的部分區域。例如，作為顯示區域 702的合成用，將作為顯示區域702與校正影像401的共同部分的部 分區域702a、以及作為顯示區域702與校正對象402的共同部分的部 分區域702b這兩個部分區域設定成從校正影像401和402中抽取的 部分區域。此處，如圖8所示，部分區域702a和702b具有重疊的區 域。另外，還計算出部分區域702a、 702b各自在顯示區域702中的 顯示位置。
接下來，使用到此為止求出的各值，設定在影像處理裝置106、 107、 108、 109進行影像合成處理時使用的合成參數。合成參數包括 指定發送應接收的照相機影像的發送裝置的"影像選擇參數，，；以及指 定從所接收到的照相機影像合成顯示影像時的影像合成處理內容的 "影像處理參數"。另外，"影像處理參數"包括指定所接收到的照相 機影像中的影像合成處理中使用的部分區域的"區域範圍參數，，；可以 用使照相機影像內的點映射到顯示區域內的對應的點上的變換矩陣 來表現的"影像變換參數，，；用於校正亮度、色度等的"畫質調整參數"。 此處，可以根據通過影像校正參數生成處理S303生成的作為影像的 尺度、傾斜的校正量的影像校正參數、和利用"區域範圍參數"指定的 各部分區域與顯示區域的對應關係來計算出變換矩陣。
作為一個例子，圖9示出影像處理裝置106使用的合成參數。影 像處理裝置106使用從發送裝置110接收到的照相機影像202和從發 送裝置111接收到的影像203，合成顯示在顯示裝置113中的顯示影 像，所以合成參數的"影像選擇參數，，成為發送裝置110和發送裝置111，每個發送裝置110、 111的"影像處理參數"分別被設定。另外，
在"影像處理參數"中，包含"區域範圍參數"、"影像變換參數，，以及"畫 質調整參數"。
最後，向各影像處理裝置發送所設定的合成參數(合成參數發送
處理步驟S306)。即，向影像處理裝置106發送影像處理裝置106 用的合成參數。同樣地，向影像處理裝置107、 108、 109分別發送影 像處理裝置107、 108、 109用的合成參數。這樣生成針對每個影像處 理裝置用的合成參數，並獨立地發送給各影像處理裝置。
另外，在本系統起動時，作為初始設定處理，進行一次合成參數 計算裝置105的合成參數計算、以及向各影像處理裝置的發送既可。
接下來，對影像處理裝置106、 107、 108、 109的動作進行說明。 圖10是示出影像處理裝置的動作流程的圖。以下，根據附圖對影像 處理裝置的動作進行說明。另外，影像處理裝置106、 107、 108、 109 都按照同樣的動作步驟進行動作，所以此處以影像處理裝置106為例 子進行說明。
影像處理裝置106接收合成參數計算裝置105發送的影像處理裝 置106用的合成參數(合成參數接收處理步驟SIOOI)。在以後的 影像合成處理中使用所接收到的合成參數。此處，作為影像處理裝置 106用的合成參數，接收圖9所示的合成參數。
接下來，接收利用合成參數的"影像選擇參數"指定的發送裝置所 發送的照相機影像(影像接收處理步驟S1002)。影像處理裝置106 按照圖9的合成參數，接收發送裝置110發送的照相機影像202和發 送裝置111發送的照相機影像203。
接下來，根據合成參數的"影像處理參數"中包含的"區域範圍參 數，，的區域指定參數，從所接收到的照相機影像中抽取影像合成處理 中使用的影像部分(影像區域抽取處理步驟S1003 )。利用圖9的 合成參數，影像處理裝置106在從發送裝置IIO接收到的照相機影像 202以及從發送裝置111接收到的照相機影像203中分別抽取部分區 域。圖ll是說明影像處理裝置106中的步驟S1003以後的處理的圖。圖11 (a)示出從照相機影像202中抽取的部分區域1101和從照相機 影像203中抽取的部分區域1102。
接下來，使用合成參數的"影像處理參數"中包含的"影像變換參 數"，將所抽取的部分區域1101、 1102變換成作為與顯示區域702對 應的形狀的校正部分區域1103、 1104(圖ll(b))(影像校正處理 步驟S1004)。
接下來，通過使用合成參數的"影像處理參數"中包含的"畫質調 整參數"，對校正部分區域1103、 1104進行畫質調整後進行重疊，而 製作重疊影像1105 (圖11 (c))(影像重疊處理步驟S1005)。
接下來，將重疊影像1105作為一個顯示影像1106(圖ll(d))， 輸出給顯示裝置113 (影像顯示處理步驟S1006)。
其以後，通過反覆步驟S1002 S1007的處理，可以使用從發送 裝置IIO、 lll接收到的照相機影像，持續地合成顯示在顯示裝置113 上的顯示影像。
與影像處理裝置106同樣地，影像處理裝置107、 108、 109也分 別並行地動作，從而實時地處理從各照相機發送來的影像，併合成顯 示在各顯示裝置114、 115、 116上的顯示影像。
顯示裝置113、 114、 115、 116顯示影像處理裝置106、 107、 108、 109所輸出的顯示影像。在這樣如圖12所示，排列配置了顯示裝置 113、 114、 115、 116時，可以進行作為整體一體化的作為一個影像的 顯示。
另外，在以上的說明中，將合成參數的"影像變換參數，，規定成從 照相機影像變換成顯示影像的變換矩陣，但也可以用該變換矩陣的逆 矩陣定義"影像變換參數"。在該情況下，作為"區域範圍參數"，指定 顯示裝置的顯示區域中的部分區域。例如在影像處理裝置106的情況 下，作為"區域範圍參數"，指定顯示區域702a的範圍既可。
另外，也可以在發送裝置IIO、 111、 112中設置影像壓縮編碼處 理，對照相機影像進行圖像壓縮，以削減了數據量的狀態進行發送， 並且在合成參數計算裝置105以及影像處理裝置106、 107、 108、 109中設置壓縮影像解碼處理，對從發送裝置接收到的壓縮影像進行解 碼，還原照相機影像。由此，可以進一步減少照相機影像的發送中的 網絡負荷。
另外，也可以代替向各影像處理裝置獨立地發送各影像處理裝置 用的合成參數，而一併向所有影像處理裝置組播發送各影像處理裝置 用的合成參數，各影像處理裝置從所接收到的合成參數中僅選擇影像 合成處理中使用的參數來使用。
如上所述，實施方式1的網絡影像合成顯示系統具有如下效果 各影像處理裝置僅對顯示在一個顯示裝置中的影像進行合成處理，所 以與用一個影像處理裝置對所有顯示裝置的顯示影像進行合成處理 的情況相比，處理負荷不會集中，而不發生合成處理的瓶頸。另外， 還具有如下效果無需在網絡上發送所合成的影像，所以可以降低網 絡負荷。
實施方式2
在實施方式l中，合成參數計算裝置105僅計算一次合成參數而 作為網絡影像合成顯示系統的初始處理，影像處理裝置106、 107、 108、
進行動作。因此，在系統運用中的途中存在各照相機的設置位置、攝 影對象的變更這樣的設定變更的情況下，由於繼續使用在設定變更前 計算出的合成參數，在照相機的設定變更後的顯示裝置113、 114、 115、 116的顯示中產生偏差。與其相對，實施方式2中的網絡影像合成顯 示系統即使在系統運用中的途中存在各照相機的設置位置的變更的 情況下也可以正常地顯示合成影像。構成實施方式2的系統的各裝置 的配置與圖1所示的實施方式1中的系統結構相同。因此，以下著眼 於與實施方式l的相異點，而對實施方式2的動作進行說明。
在實施方式2中也可以在影像攝影的途中變更照相機101、 102、 103的設定。例如，考慮各照相機的設置位置、攝影對象的變更。發 送裝置110、 111、 112與實施方式1的情況同樣地，向合成參數計算 裝置105、以及影像處理裝置106、 107、 108、 109組播發送所攝影的接下來，根據圖13的動作流程圖對合成參數計算裝置105的動 作進行說明。合成參數計算裝置105中的從接收照相機影像到設定合 成參數為止的處理(步驟S1301 ~ S1307 )是與實施方式1中的處理(圖 3的步驟S301 S306)相同的處理，所以省略說明。
接下來，將所計算出的合成參數與合成參數計算裝置105內部的 (未圖示)存儲介質中已經保存的上次計算出的合成參數進行比較 (合成參數比較處理步驟S1307)。另外，在系統起動後初次計算 出合成參數的情況下，由於不存在上次的合成參數，所以不進行比較 而設為比較結果"一致"並進行以後的處理。
在合成參數比較處理的結果為"不一致"的情況下，由於在照相機 101、 102、 103中的某一個中存在設定變更，所以將所計算出的合成 參數保存到合成參數計算裝置105內部的存儲介質中(合成參數保存 處理步驟S1308)。之後，向各影像處理裝置106、 107、 108、 109 發送所計算出的合成參數(合成參數保存處理步驟S1309)。在合 成參數的發送完成之後，再次返回到影像接收處理S1301。
另一方面，在合成參數比較處理的結果為"一致"的情況下，由於 在照相機IOI、 102、 103中的任意一個中都沒有設定變更，所以不進 行合成參數的保存、向各影像處理裝置的發送，而返回到影像接收處 理S1301。
此後，反覆執行步驟S1301 S1309。另外，與照相機的設定變 更的頻度對應地預先設定處理的反覆周期既可。例如，也可以設為每 隔5分鐘那樣地以一定周期反覆進行處理。另外，也可以並非一定周 期，而按照預先決定的時間進度表進行反覆處理。
影像處理裝置106、 107、 108、 109根據從合成參數計算裝置105 中接收到的合成參數進行顯示影像的合成處理，但在合成處理開始後 新接收到合成處理參數的情況下，使用新接收到的合成處理參數進行 合成處理。由此，即使在存在合成參數的變更的情況下，也可以與該 參數變更對應地變更顯示影像的合成方法。由此，還與合成參數的變
14更對應地切換顯示裝置113、 114、 115、 116的顯示影像。
如上所述，實施方式2的網絡影像合成顯示系統具有如下效果 合成參數計算裝置105反覆重新計算合成參數，對所計算出的合成參 數與所保存的合成參數進行比較，在上述計算出的合成參數與上次向 影像處理裝置發送的合成參數相異的情況下，當作檢測到合成參數的 變化，向影像處理裝置發送最新的合成參數，所以即使在存在照相機 的位置變更等設定變更的情況下，也可以迅速地顯示沒有偏差的合成 影像。
實施方式3
在實施方式l、 2中，合成參數計算裝置在系統動作時計算合成 參數，向各信息處理裝置發送合成參數。與其相對，實施方式3中的
網絡影像合成顯示系統可以對各信息處理裝置獨立地設定不使用合 成參數計算裝置而使用其他手段計算出的合成參數，各信息處理裝置
使用該合成參數進行影像合成。
圖14是示出實施方式3中的網絡影像合成顯示系統的系統結構 的圖。另外，在圖14中，對於與圖1相同或對應的部分，附加同一 標號。以下，著眼於與實施方式l相異點，而對動作進行說明。
首先，在系統起動前預先使用某種手段計算出各影像處理裝置 106、 107、 108、 109中使用的合成參數。作為計算合成參數的方法， 例如也可以才艮據照相機101、 102、 103的i殳定值(尺度、傾斜等)以 及照相機的配置位置關係的信息求出平面射影變換，由此計算每個影 像處理裝置的合成參數。
在影像處理裝置106、 107、 108、 109的附屬設置的合成參數存 儲部1401、 1402、 1403、 1404中，設定如上所述預先準備的合成參 數。此處，在各合成參數存儲部中設定的合成參數是各影像處理裝置 中使用的專用的參數。
作為向合成參數存儲部1401、 1402、 1403、 1404的具體設定方 法，例如使影像處理裝置106、 107、 108、 109讀入記錄有記載了合 成參數的合成參數文件的存儲介質，將所讀入的合成參數文件存儲到合成參數存儲部1401、 1402、 1403、 1404中既可。
在合成參數的設定之後，影像處理裝置106、 107、 108、 109根 據在合成參數存儲部1401、 1402、 1403、 1404中設定的合成參數， 從發送裝置IIO、 111、 112接收的照相機影像，合成顯示影像。可以 與實施方式1的情況同樣地進行合成的具體處理步驟。
如上所述，通過將不使用合成參數計算裝置而使用其他手段求出 的合成參數存儲到影像處理裝置上附屬的合成參數存儲部中，不依賴 於利用合成參數計算裝置的合成參數的設定手法，而可以使影像處理 裝置動作，可以實現影像合成處理的執行方式的多樣化。另外，由於 可以按照預先設定的合成參數進行影像合成，所以具有可以實現更計 劃性的影像顯示的效果。
另外，也可以將對影像處理裝置預先設定的合成參數作為由多個 模式構成的合成參數，按照預先設定的進度表切換使用這些合成參數 的模式。由此，可以實現能夠表現更多彩的影像的影像合成處理。
產業上的可利用性
本發明可以應用於遠距離影像監視、實時影像顯示系統等將利用 與網絡連接的多個照相機攝影的影像連接而顯示成一個影像的系統。
權利要求
1.一種網絡影像合成顯示系統，其特徵在於，具備多個照相機；與該照相機對應地設置的、經由網絡組播發送上述照相機所攝影的照相機影像的多個發送裝置；接收上述照相機影像，並從該照相機影像合成顯示影像的多個影像處理裝置；與該影像處理裝置對應地設置的、顯示上述顯示影像的多個顯示裝置；與上述影像處理裝置對應地計算出由表示來自上述多個發送裝置的影像的組合的影像選擇參數、以及指定影像合成處理內容的影像處理參數構成的合成參數，經由上述網絡向上述影像處理裝置發送上述合成參數的合成參數計算裝置，上述影像處理裝置根據上述影像處理參數，合成來自使用上述影像選擇參數指定的發送裝置的照相機影像而生成顯示影像，從而使用上述多個影像處理裝置分散進行上述顯示影像的合成處理。
2. 根據權利要求1所述的網絡影像合成顯示系統，其特徵在於， 合成參數計算裝置反覆計算合成參數，將對影像處理裝置發送的合成 參數保存到上述影像處理裝置的內部，對所計算出的合成參數與上述 保存的合成參數進行比較，從而在上述計算出的合成參數與上次對影 像處理裝置發送的合成參數相異的情況下，向上述影像處理裝置發送 上述計算出的合成參數。
3. 根據權利要求1或2所述的網絡影像合成顯示系統，其特徵 在於，合成參數計算裝置向對應的上述影像處理裝置分別發送與影像 處理裝置對應的合成參數。
4. 根據權利要求1或2所述的網絡影像合成顯示系統，其特徵 在於，合成參數計算裝置向所有上述影像處理裝置一併組播發送與影 像處理裝置對應的合成參數，上述影像處理裝置從上述合成參數中僅 選擇影像合成處理中使用的參數，進行顯示影像的合成。
5. —種網絡影像合成顯示系統，其特徵在於，具備多個照相 機；與該照相機對應地設置的、經由網絡組播發送上述照相機所攝影的照相機影像的多個發送裝置；接收上述照相機影像，並從該照相機 影像合成顯示影像的多個影像處理裝置；與上述影像處理裝置對應地 設置的、顯示上述顯示影像的多個顯示裝置，上述影像處理裝置具有合成參數存儲部，該合成參數存儲部存儲 由表示來自上述多個發送裝置的影像的組合的影像選擇參數、以及指 定影像合成處理內容的影像處理參數構成的合成參數，根據上述影像參數指定的發送裝置的照相機影像而生成顯示影像，從而使用上述多 個影像處理裝置分散進行上述顯示影像的合成處理。
全文摘要
本發明提供一種網絡影像合成顯示系統。使用多個發送裝置(110、111、112)經由網絡組播發送使用多個照相機(101、102、103)攝影的照相機影像，合成參數計算裝置(105)使用上述照相機影像，與影像處理裝置對應地計算出為了合成顯示在顯示裝置(113、114、115、116)中的顯示影像而所需的合成參數，向影像處理裝置(106、107、108、109)發送該合成參數，影像處理裝置(106、107、108、109)根據該合成參數，從照相機影像合成顯示影像。由此，使用各影像處理裝置分散進行顯示影像的合成處理。
文檔編號H04N7/173GK101529893SQ20068005618
公開日2009年9月9日 申請日期2006年11月10日 優先權日2006年11月10日
發明者原田雅之, 吉田浩, 椿泰範 申請人:三菱電機株式會社