立體圖像處理裝置、立體圖像處理方法、立體圖像處理程序以及在其中記錄這種程序的記...的製作方法

2023-05-17 12:13:06

專利名稱：立體圖像處理裝置、立體圖像處理方法、立體圖像處理程序以及在其中記錄這種程序的記 ...的製作方法
技術領域：
本發明涉及一種用於處理立體圖像的立體圖像處理裝置及其方法，並且 進一步涉及一種在其上列印立體圖像的立體圖像紙張、 一種立體圖像處理程 序和一種在其中記錄這種程序的計算機可讀記錄介質。本申請要求於2005年6月29日提交的日本專利申請號2005-189450的優先權，其整體被引用併入此處。
背景技術：
迄今，作為允許通過利用兩眼之間的視差來識別平面表面圖像作為三維 圖像的基於肉眼的方法，存在平行方法(平行注視方法)和交叉方法(交叉 注視方法)等。如圖1所示，平行方法是在具有適合的視差的左右兩幅圖像 (以下稱為"立體圖像，，)100R、 100L之間觀察的方法，其中，右側的圖像 100R通過右眼ER觀察，左側的圖像100L通過左眼EL觀察。此外，如圖2 所示，交叉方法是通過左眼EL觀察右側的圖像100R、通過右眼ER觀察左側 的圖像100L的方法。作為拾取這種立體圖像的方法，存在在左右方向上、以與人眼之間的空 間相等的距離、呈直線安置兩個透鏡和圖像拾取器件，通過平行方法或交叉 方法，使用這兩個圖像拾取系統來同時拾取左右圖像的方法等等。在日本專 利申請公開No. H5-30538的公開物(專利文獻l)中公開了涉及使用這種機 制的數字靜態照相機的技術。此外，即使不使用利用了這種多圖像拾取系統的照相機，從曾經執行了 圖像拾取操作的位置，在水平方向上將照相機移動與人眼之間的空間相等的 距離，以從該位置第二次拾取同一對象的圖像，或者使用兩個照相機，等等， 從而使得可能獲得用作立體圖像的兩幅圖像。在上述的專利文獻1中，描述了指示立體圖像的信息和/或左/右區分信息 等被分別記錄作為在各個左右圖像數據的頭信息，以便使得當在記錄/再現裝 置或傳輸裝置中處理時、左右圖像數據被處理為單個圖像處理單元，如此防 止左和右圖像數據之一被錯誤地擦除或傳輸等等不便之處。發明內容本發明所要解決的問題同時，很難從立體圖像的外表來判斷這種立體圖像是通過平行方法還是 交叉方法所拾取的，即適合於通過平行方法還是交叉方法來嘗試或執行觀察， 因為這個原因，需要觀察者基於平行方法和交叉方法來嘗試兩種觀察，以由 本人來區分一種合適的觀察方法。此外，在列印如圖3所示的立體圖像過程中，當在與列印紙張91的尺寸一致的狀態下列印立體圖像92時，可能存在丟失立體圖像92的一部分的情況。本發明被考慮解決上述情況，並且希望提供了一種可生成允許第一眼就 能區分合適的觀察方法的立體圖像的立體圖像處理裝置、立體圖像處理方法、 立體圖像紙張、立體圖像處理程序和計算機可讀記錄介質。本發明被應用的立體圖像處理裝置的一個實施例包括圖像輸入單元， 用於輸入組成立體圖像的多個圖像數據；以及圖像合成單元，用於由圖像輸 入裝置輸入的多個圖像數據和指示這些圖像數據的立體信息的填充數據在各 個數據的相應區域被分割的狀態下加以合成，以輸出合成數據。根據該立體圖像處理裝置，當觀察者通過肉眼三維查看立體圖像時，可以基於合成圖像的填充數據在第一眼就區分出立體圖像的合適的觀察方法。 從而，優選地使用可由視覺特徵區分的圖像作為填充數據。此處，立體信息 可以是指示該圖像數據是通過平行方法的立體圖像還是通過交叉方法的立體 圖^象的信息。而且，根據本發明的實施例的立體圖像處理裝置進一步包括用於輸入高 寬調整比的高寬比調整輸入單元，其中圖像合成單元改變與多個圖像數據合 成的填充數據尺寸，以便合成圖像的縱向和橫向尺寸具有已經由高寬比調整 輸入單元輸入的高寬調整比。通過使用這樣的立體圖像處理裝置，可以列印合成圖像以至於其整體正 好填滿列印紙張。此外，根據本發明的實施例的立體圖像處理裝置可進一步包括編碼單 元，用於壓縮-編碼已經由圖像合成單元合成的圖像；以及復用單元，用於向已經由編碼單元壓縮-編碼的圖像數據添加用於立體顯示控制的立體信息作 為頭信息，以準備文件。則，可以準備立體圖像的文件，當觀察者通過肉眼 三維查看立體圖像時，該立體圖像的文件允許通過合成圖像的填充數據的視 覺特徵在第一眼就區分出觀察方法。因此，可以將這樣的文件記錄到記錄介 質中以將其傳輸到允許立體顯示的外部裝備中。多個圖像數據可以是對於右眼和左眼的圖像數據，或通過多個視點捕獲 一個對象而獲得的圖像數據。如上所述，通過使用本發明的實施例，當觀察者通過肉眼三維的查看立 體圖像時，可以通過合成圖像的填充數據的視覺特徵在第一眼就區分立體圖 像的合適的觀察方法。另外，可以列印合成圖像以至於其整體正好填滿列印 紙張。通過以下參照附圖對實施例的進一步描述，本發明的更多特徵和優點以 及本發明所具有的實際價值將更加顯而易見。


圖1是示出用於允許識別平面表面圖像為三維圖像的平行方法的視圖； 圖2是示出用於允許識別平面表面圖像為三維圖像的交叉方法的視圖； 圖3是用於說明在立體圖像列印時出現的問題的視圖； 圖4是示出根據本發明的立體圖像處理裝置的實施例的方框圖； 圖5是示出被輸入到如圖4所示的立體圖像處理裝置中的圖像文件的配 置的視圖；圖6是示出在圖像是通過平行方法獲得的立體圖像的情況下合成圖像的 一個例子的視圖；圖7是示出在圖像是通過交叉方法獲得的立體圖像的情況下合成圖像的 一個例子的視圖；圖8是示出從如圖4所示的立體圖像處理裝置中輸出的立體圖像的文件 的配置的視圖；圖9是示出被安放在前方和後方以及左方和右方的多個數字靜態照相機 拾取一個對象的圖像的實施例的視圖；圖10是示出根據本發明的立體圖像處理裝置的另 一個實施例的方框圖； 圖11是示出在圖像是通過平行方法的立體圖像的情況下在如圖10所示的立體圖像處理裝置中的合成圖像的 一個例子的#見圖；圖12是示出在圖像是通過平行方法的立體圖像的情況下在如圖10所示 的立體圖像處理裝置中的合成圖像的一個例子的視圖。
具體實施方式
實現本發明的最佳模式現將參考附圖來說明。應用如圖4所示的根據本發明實施例的立體圖像處理裝置100包括圖 像輸入單元l、高寬比調整輸入單元2、立體(適配器)信息輸入單元3、數 據分離輸出單元4、立體關聯信息生成單元5、填充數據生成單元6、圖像合 成單元7、圖像編碼單元8、數據復用單元9以及記錄介質寫入單元10。圖像輸入單元1是用於輸入對於右眼和左眼的各個圖像文件IIR、 11L 的裝置，其中分別向右眼和左眼的圖像主體中添加用於立體顯示控制的立體 信息、例如指示立體圖像的區分信息、左/右區分信息、水平視點數量(圖像 數量)和水平偏移量等，作為頭信息。數據分離輸入單元4是用於從由圖像輸入單元1輸入的、對於右眼和左 眼的各個圖像文件11R、11L中分離頭信息以將它們輸出到立體關聯信息生成 單元5的裝置。立體(適配器)信息單元3是用於輸入如下立體信息的裝置該立體信 息是除了已經被輸入的對於右眼和左眼的各個圖像文件11R、11L中的頭信息 中所包括的內容之外的立體信息，例如，至少指示已經被輸入的各個圖像文 件11R、11L的圖像是通過平行方法的立體圖像還是通過交叉方法的立體圖像立體關聯信息生成單元5是用於基於從立體(適配器)信息輸入單元3 輸入的立體信息和已經從數據分離輸出單元4輸出的頭信息來生成將要被輸 出給填充數據生成單元6和數據復用單元9的立體關聯信息的裝置。在該例 子中，平行方法/交叉方法區分信息的內容被輸出到填充數據生成單元6作為 立體關聯信息，並且已經從立體(適配器)信息輸入單元3輸入的立體信息 的所有內容和已經從數據分離輸出單元4輸出的頭信息被輸出給數據復用單 元9作為立體關聯信息。填充數據生成單元6是基於來自立體關聯信息生成單元5的立體關聯信
息(平行方法/交叉方法區分信息的內容)來生成要與對於右眼和左眼的各個 圖像主體相合成的填充數據，以將如此生成的填充數據輸出給圖像合成單元 7的裝置。填充數據是用於嵌入到空區域的數據，該空區域是在具有預定高 寬調整比的二維空間內在左右方向上呈直線安置具對於右眼和左眼的各個圖區分信息，例如，採用人們第一眼就可以區分相應特徵、例如顏色或圖樣等 的柳u覺表示。高寬比調整輸入單元2是用於輸入被輸出的立體圖像和填充數據的合成圖像的高寬調整比的裝置。該高寬調整比與例如所使用的列印紙張的縱向尺 寸與橫向尺寸之間的比相 一致。圖像合成單元7是用於合成從圖像輸入單元1輸入的對於右眼和左眼的 各個圖像數據與由填充數據生成單元6生成的填充數據、以生成具有從高寬 比調整輸入單元2輸入的高寬調整比的單個圖像數據的裝置。圖像編碼單元8是用於根據預定的系統、如JPEG系統等來壓縮-編碼從 圖像合成單元7輸出的立體圖像.填充數據的合成圖像的裝置。數據復用單元9是用於復用由圖像編碼單元8壓縮-編碼的立體圖像.填充 數據的合成圖像數據和從立體關聯信息生成單元5輸出的立體關聯信息的裝 置。在該例子中，立體關聯信息被添加作為圖像文件的頭信息。記錄介質寫入單元10是用於將數據復用單元9生成的圖像文件寫入到可 寫或可重寫非易失性記錄介質(如EEPROM等)中的裝置。接著將說明立體圖像處理裝置100的操作。讓我們考慮這種情況，分別輸入圖像文件IIR、 IIL作為如圖5所示的對 於右眼和左眼的圖像文件IIR、 11L,在該圖像文件IIR、 IIL中，分別向圖 像主體13R、 13L添加用於立體顯示控制的立體信息，例如指示立體圖像的 區分信息，左/右區分信息，水平視點數量(圖像數量)和/或水平偏移量等。 在這種情況下，在輸入圖像文件之前，從立體(適配器)信息輸入單元3輸 入指示從此輸入的圖像文件是通過平行方法的立體圖像還是通過交叉方法的 立體圖像的平行方法/交叉方法區分信息，以在立體關聯信息生成單元5處設 置它。另一方面，從高寬比調整輸入單元2處輸入與所使用的列印紙張的縱 向尺寸與橫向尺寸之間的比率相一致的高寬調整比，以在圖像合成單元7處 設置其為用於圖像合成的高寬調整比。 在立體關聯信息生成單元5和圖像合成單元7處的設置操作完成之後，在圖像輸入單元1處輸入對於右眼和左眼的各個圖像文件11R、 11L,以將在 各個圖像文件11R、 IIL處的圖像主體13R、 13L傳送給圖像合成單元7,並 在數據分離輸出單元4中分離和提取各個圖像文件IIR、 IIL的頭信息12R、 12L，以將其輸出到立體關聯信息生成單元5。當立體關聯信息生成單元5從數據分離輸出單元4獲得各個圖像文件 IIR、 11L的頭信息12R、 12L時，其從頭文件12R、 12L和由來自立體(適 配器)信息輸入單元3的輸入所設置的立體信息(至少平行方法/交叉方法區 分信息)生成將要輸出給填充數據生成單元6和數據復用單元9的立體關聯 信息，以將如此獲得的立體關聯信息輸出給各個單元。即，立體關聯信息生 成單元5基於平行方法/交叉方法區分信息來生成用於生成填充數據的立體關 聯信息，以將它輸出給填充數據生成單元6，並且從各個圖像文件IIR、 11L 的頭信息12R、 12L和由來自立體(適配器)信息輸入單元3的輸入所設置 的立體信息生成用於數據復用的立體關聯信息，以將它輸出給數據復用單元 9。填充數據生成單元6基於來自立體關聯信息生成單元5的對應於平行方 法/交叉方法區分信息的立體關聯信息來生成將要與圖像主體13R、 13L合成 的填充數據。該填充數據是通過視覺特徵來指示平行方法/交叉方法區分信息 的數據。採用人們第一眼就可以區分相應特徵的表示。需要注意的是，填充 數據不包括涉及尺寸的信息。由填充數據生成單元6生成的填充數據被發送到圖像合成單元7中。圖 像合成單元7合成從圖像輸入單元1傳送來的對於右眼和左眼的各個圖像主 體13R、 13L和來自填充數據生成單元6的填充數據以生成具有由來自高寬 比調整輸入單元2的輸入所設置的高寬調整比的單個圖像數據。圖6和圖7顯示了由圖像合成單元7生成的合成圖像20、 30的示例，其 中圖6顯示在各個圖像主體13R、 13L是通過平行方法的立體圖像的情況下 的合成圖像20,圖7顯示在各個圖像主體13R、 13L是通過交叉方法的立體 圖像的情況下的合成圖像30。如上所述，在平行方法和交叉方法中，在各個 圖像主體13R、 13L的水平方向上的安置順序都是彼此相反的。在這個例子中，在左右圖像主體13R、 13L的頂部和底部安置作為可視 平行方法/交叉方法區分信息的填充數據14、 15。合成圖像20、 30的縱向和9
橫向尺寸是由從高寬比調整輸入單元2所輸入的高寬調整比所確定的。即，在圖6中，在左右方向上安置的各個圖像主體13R、 13L的長邊的長度、例 如在該例子中水平方向上的長度被定為合成圖像20的橫向長度X，以及從長 邊的長度X和高寬調整比確定合成圖像20的短邊的長度Y、例如垂直方向的 長度。即，圖像合成單元7可變地調整填充數據的尺寸，以便合成圖像的縱 向和橫向尺寸具有被預先指定以合成用左右圖像主體13R、 13L的高寬調整 比如此獲得的填充數據。使得在合成圖像20、 30的各個圖像主體13R、 13L的垂直方向上的位置 是該系統特有的。在這個例子中，確定各個圖像主體13R、 13L被充分地安 置在垂直方向上的中間位置。從而，在這個例子中，在合成圖像20、 30中， 確保了填充數據14、 15的區域位於各個圖像主體13R、 13L的頂部和底部。 應該注意的是，確保填充數據14、 15的區域位於各個圖像主體13R、 13L的 頂部和底部的這種安排僅是一個例子。可僅確保填充數據的一個區域位於各 個圖像主體13R、 13L的頂部和底部之一。根據預定的系統、如JPEG系統等，圖像編碼單元8壓縮-編碼如上所述 的由圖像合成單元7獲得的合成圖像數據，並且將其發送到數據復用單元9， 在其中壓縮-編碼的合成圖像數據和包括來自立體關聯信息生成單元5的立體 關聯信息的內容在內的頭信息被復用。則，準備好了立體圖像的文件。該立 體圖像的文件40的配置如圖8所示。如圖8所示，立體圖像的文件40包括 壓縮-編碼的合成圖像數據16、頭信息17、指示文件40的導向部分(leading portion)的SOI18,以及指示文件40的結尾的EOI19等。如此準備的立體圖 像的文件40通過記錄介質寫入單元10被記錄到記錄介質中。為了執行被存儲在立體圖像的文件40中的立體圖像的立體顯示，使得能 夠執行壓縮-編碼的合成圖像數據的解碼/解壓縮且能夠執行頭信息的解碼的 再現裝置通過網絡或可卸載記錄介質等來讀取立體圖像的文件40。該再現裝 置用於從已被讀取的立體圖像的文件40中分離和提取頭信息17以解碼如此 獲得的頭信息17,並且解碼和解壓縮壓縮-編碼的合成圖像數據16以再存儲 原始合成圖像。進一步，該再現裝置用於從合成圖像中分離和提取對於右眼 和左眼的除填充數據之外的圖像數據，以基於對於右眼和左眼的圖像數據和 頭信息17的編碼結果來執行立體圖像的立體顯示。此外，在通過肉眼觀察被存儲在立體圖像的文件40中的立體圖像時，使
得能夠解碼立體圖像文件40的壓縮-編碼合成圖像數據的再現裝置通過網絡或可卸載記錄介質等來讀取立體圖像的文件40。因此，如圖6或圖7所示， 再現了對於右眼和左眼的各個圖像主體13R、 13L和填充數據14、 15的合成 圖像20或合成圖像30。在這個例子中，觀察者可根據被顯示的填充數據14、 15的視覺特徵，例如顏色和/或模型等，在第一眼就區分出對於右眼和左眼的 各個圖像主體13R、 13L是通過平行方法的立體圖像或通過交叉方法的立體 圖像。從而，可以立即通過合適的觀察方法來嘗試或執行立體觀察，如此排 除觀察者的過度負擔。此外，因為已經被記錄在記錄介質中的圖像主體和填充數據的合成圖像 的高寬比被確定與所使用的列印紙張的縱向和橫向尺寸之間的比率相一致， 可以列印合成圖像以至於其整體正好充滿列印紙張。進一步，根據作為在打 印紙張上列印立體圖像整體的結果的填充數據區域的視覺特徵，觀察者可在 第 一 眼就區分出適合於觀察在立體圖像紙張上的該立體圖像的方法是交叉方 法還是平行方法。需要注意的是，通過平行方法的填充數據和通過交叉方法的填充數據之 間的差異可以到達其可被立體圖像處理裝置區分但是不能被人類視覺識別 的程度。例如，存在一種可行的方法，其中使得通過平行方法的填充數據和 通過交叉方法的填充數據具有非常小的密度差異，該密度差異到達在立體 圖像處理裝置中，在視覺上從作為相應的密度信息的像素值不可區分通過平 行方法的填充數據和通過交叉方法的填充數據的程度。在這種情況下，即使 頭信息不存在，還可以通過立體圖像處理裝置來正確地執行再現。另外，還 可以基於區分的結果來準備頭信息。接著，將說明本發明的另一個實施例。雖然在上述實施例中合成了用於右眼和左眼的兩個圖像數據與填充數 據，但也可合成三個視點或更多(多個眼睛)的圖像數據和填充數據。這裡，例如，如圖9所示，向通過使用安置在前方和後方及左方和右方 上的多個數字靜態照相機61 (0, 0) ...61 (3, 2)同時拾取一個對象60的 圖像而獲得的各個圖像數據添加用於立體顯示控制的立體信息作為頭信息， 來獲得各個圖像文件。圖10是顯示根據這個實施例的立體圖像處理裝置200的整體結構的方框圖。
如圖IO所示，立體圖像處理裝置200包括圖像輸入單元71、高寬比 調整輸入單元72、立體(適配器)信息輸入單元73、數據分離輸出單元74、 立體關聯信息生成單元75、填充數據生成單元76、圖像合成單元77、圖像 編碼單元78、數據復用單元79以及記錄介質寫入單元80。圖像輸入單元71是用於輸入多個圖像文件62 (0, 0)、 62(0, 1)， ...62 (3, 2)的裝置，其中向由多個數字靜態照相機61 (0， 0) ...61 (3, 2)同 時執行圖像拾取操作而獲得的各個圖像主體添加用於立體顯示控制的立體信 息作為頭文件，例如指示立體圖像的區分信息、視點(照相機)位置的區分 信息、水平視點數量(圖像的數量)和/或水平偏移量等。數據分離輸出單元74是用於從在圖像輸入單元71輸入的多個圖像文件 62(0， 0)、 62 ( 0, 1 ), ...62 ( 3， 2)中分離頭信息以向立體關聯信息生成 單元75輸出所荻得的頭信息的裝置。立體(適配器)信息輸入單元73是一種裝置，用於輸入除了被包括在輸 入圖像文件62(0， 0)、 62(0， 1), ...62(3, 2)中的內容以外的立體信息， 例如至少指示輸入的各個圖像文件62 (0， 0)， 62 ( 0, 1 ), ...62 (3， 2)的 圖像是通過平行方法的立體圖像還是通過交叉方法的立體圖像的平行方法/ 交叉方法區分信息。立體關聯信息生成單元75基於從立體(適配器)信息輸入單元73輸入 的立體關聯信息和從數據分離輸出單元74輸出的頭信息而生成將要輸出給 填充數據生成單元76和數據復用單元79的立體關聯信息。此處，平行方法/ 交叉方法區分信息的內容被輸出給填充數據生成單元76作為立體關聯信息， 並且從立體(適配器)信息輸入單元73輸入的立體信息的所有內容以及從數 據分離輸出單元74輸出的頭信息被輸出給數據復用單元79作為立體關聯信 息。填充數據生成單元76基於來自立體關聯信息生成單元75的立體關聯信 息(平行方法/交叉方法區分信息的內容)來生成將與多個圖像主體合成的填 充數據，以將其輸出給圖像合成單元77。高寬比調整輸入單元72是用於輸入將要被輸出的立體圖像和填充數據 的合成圖像的高寬調整比的裝置。與所使用的列印紙張的縱向尺寸和橫向尺 寸之間的比率相一致地輸入該高寬調整比。圖像合成單元77是用於合成從圖像輸入單元71輸入的多個圖像數據和 由填充數據生成單元76生成的填充數據、以生成具有已經從高寬比調整輸入單元72輸入的高寬調整比的單個圖像數據的裝置。圖像編碼單元78是用於根據預定系統、如JPEG系統等來壓縮-編碼已經 在圖像合成單元77合成的圖像數據的裝置。數據復用單元79是用於復用已經由圖像編碼單元78壓縮-編碼的圖像數 據和已經從立體關聯信息生成單元75輸出的立體關聯信息的裝置。此處，立 體關聯信息被添加作為圖像文件的頭信息。記錄介質寫入單元80是用於將已經由數據復用單元79生成的圖像文件 寫入到可寫或可重寫非易失性記錄介質(如EEPROM等)中的裝置。接著，將說明立體圖像處理裝置200的操作。讓我們考慮這種情況，對於多個眼睛的各個圖像文件被分別輸入作為多 個圖像文件62(0, 0)， 62(0, 1)，…，62(3, 2)，在該對於多個眼睛的 各個圖像文件中，用於立體顯示控制的立體信息，例如指示立體圖像的區分 信息、視點(照相機)位置的區分信息、水平視點數量(圖像數量)和/或水 平偏移量等被添加作為頭信息。在這種情況下，在輸入圖像文件之前，從立 體(適配器)信息輸入單元73輸入指示從此輸入的圖像文件是通過平行方法 的立體圖像還是通過交叉方法的立體圖像的平行方法/交叉方法區分信息，以 在立體關聯信息生成單元5中設置它。另一方面，從高寬比調整輸入單元72高寬調整比，以在圖像合成單元77中設置其作為圖像合成的高寬調整比。在完成在立體關聯信息生成單元75和圖像合成單元77中的設置之後， 在圖像輸入單元71中輸入多個圖像文件62 (0, 0)， 62(0, 1), ...， 62(3, 2),以將在各個圖像文件62 (0, 0), 62 ( 0, 1 ),…，62(3, 2)中的圖像 主體傳送給圖像合成單元77,並在數據分離輸出單元74中分離和提取頭信 息，以將其輸出到立體關聯信息生成單元75。當立體 關聯信息生成單元75從數據分離單元74處獲得各個圖像文件62 (0, 0)， 62(0, 1),…，62(3, 2)的頭信息時，其從由來自立體(適配 器)信息輸入單元73的輸入所設置的這些頭信息和立體信息(至少平行方法 /交叉方法區分信息)生成將要輸出給填充數據生成單元76和數據復用單元 79的立體關聯信息，以將其輸出給各個單元。即，立體關聯信息生成單元75 基於平行方法/交叉方法區分信息生成用於生成填充數據的立體關聯信息，並
將其輸出給填充數據生成單元76，並且從被各個圖像文件的頭信息的內容和 立體(適配器)信息輸入單元73的輸入所設置的立體信息生成用於數據復用 的立體關聯信息，並且將其輸出給數據復用單元79。填充數據生成單元76基於來自立體關聯信息生成單元75的對于于平行 方法/交叉方法區分信息的立體關聯信息，生成將與多個圖像主體合成的填充採用用戶第一眼就可以區分相應特徵、例如顏色或模式等的表示。需要注意 的是，填充數據不包括涉及尺寸的信息。由填充數據生成單元76生成的填充數據被發送到圖像合成單元77中。 圖像合成單元77合成從圖像輸入單元71傳送來的多個圖像主體和來自填充 數據生成單元76的填充數據以生成具有通過來自高寬比調整輸入單元72的 輸入而設置的高寬調整比的單個圖像數據。圖11和圖12示出由圖像合成單元77生成的合成圖像81、 82的示例， 其中圖11示出在各個圖像主體63 ( 0, 0), 63 ( 0, 1 ),…，63 (3， 2)是 通過平行方法的立體圖像的情況下的合成圖像81,圖12示出在各個圖像主 體63 (0， 0), 63 (0， 1),…，63 (3, 2)是通過交叉方法的立體圖像的情 況下的合成圖像82。以上述方法，在平行方法和交叉方法中，在各個圖像主 體63 (0， 0), 63 (0, 1),…，63 (3， 2)的水平方向上的安置順序都是彼 此相反的。需要注意的是在頂部和底部方向上的位置關係是相同的。在這個例子中，在各個圖像主體63(0， 0)， 63(0, 1)，…，63(3, 2) 的頂部和底部部分安置填充數據64、 65。以整體狀態安置各個圖像主體63 (0， 0), 63 (0, 1)， ...， 63 (3， 2)以至於在水平方向上的末端和在垂直 方向上的末端互相接觸。合成圖像81、 82的縱向和橫向尺寸是根據從高寬比 調整輸入單元72所輸入的高寬調整比所確定的。在具體條件下，在圖11中， 使得整體圖像主體63長邊的長度，例如，在這個例子中水平方向上的長度是 合成圖像81長邊的長度X,以從長邊的長度X和高寬調整比進一步確定合成 圖像81短邊的長度Y，例如，在這個例子中的垂直方向上的長度。即，圖像 合成單元77可變地調整填充數據的尺寸，以便合成圖像81的縱向和橫向尺 寸具有預先指定的高寬調整比以合成所獲得的填充數據和完整的圖像主體 63。使得在合成圖像81或82中的完整圖像主體63的垂直方向上的位置對於
系統來說是特殊的。在這個例子中，確定完整圖像主體63被充分地安置在垂直方向上的中間位置。從而，在這個例子中，在合成圖像81、 82中，確保填 充數據64、 65的區域在完整圖像主體63的頂部和底部。需要注意的是確保 填充數據64、 65的區域在完整圖像主體63的頂部和底部這種安置僅是一個 例子。可確保填充數據的區域僅在完整圖像主體63的頂部和底部之一。根據預定的系統，如JPEG系統等，圖像編碼單元78壓縮-編碼由如上所 述的圖像合成單元77獲得的合成圖像數據，並且將其發送到數據復用單元 79，在其中壓縮-編碼的合成圖像數據和包括來自立體關聯信息生成單元75 的立體關聯信息的內容的頭信息被復用。則，準備好立體信息的文件。準備 好的立體圖像的文件通過記錄介質寫入單元80被記錄到記錄介質中。為了執行被存儲在立體圖像文件中的立體圖像的立體顯示，使得能夠解 碼/解壓縮被壓縮-編碼的合成圖像數據和解碼頭信息的再現裝置通過網絡或 可卸載記錄介質等來讀取立體圖像的文件。該再現裝置用於從已被讀取的立 體圖像的文件中分離和提取頭信息以解碼所獲得的頭信息，並且解碼/解壓縮 被壓縮-編碼的合成圖像數據以恢復原始合成圖像。此外，該再現裝置用於從 合成圖像中分離和提取除填充數據之外的多個合成圖像數據，以基於這些多 個圖像數據和頭信息的解碼結果執行立體圖像的立體顯示。此外，在通過肉眼觀察被存儲在立體圖像的文件中的立體圖像時，使得 能夠解碼被壓縮-編碼的立體圖像文件的合成圖像數據的再現裝置通過網絡 或可卸載記錄介質等來讀取立體圖像的文件。則如圖11或12所示，再現了 多個圖像主體63 (0， 0)， 63 (0, 1 )，…，63 (3， 2)的合成圖像81或合 成圖像82以及填充數據64、 65。在這個例子中，觀察者可從顯示的填充數 據64、 65的視覺特徵、例如顏色和/或模型等在第一眼就區分出各個圖像主 體63 (0, 0)， 63 (0, 1),…，63 (3, 2)是通過平行方法的立體圖像或通 過交叉方法的立體圖像。從而，可以立即使用合適的觀察方法嘗試或執行立 體觀察，以減少觀察者的過度負擔。此外，因為確定被記錄在記錄介質中的 圖像主體和填充數據的合成圖像的高寬比與所使用的列印紙張的縱向尺寸和 橫向尺寸之間的比率相一致，例如，整個合成圖像的放大/縮小僅僅作為偶然 需要來執行，從而使得可以列印合成圖像以至於其整體正好充滿列印紙張。 此外，觀察者可根據作為在列印紙張上列印的整體合成圖像的結果的立體圖 像紙張上的填充數據區域的視覺特徵，在第 一 眼就區分出適合在立體圖像紙
張上觀察該立體圖像的方法是交叉方法還是平行方法。可以用允許計算機執行的程序方式提供在上述實施例中的立體圖像處理 裝置100的立體圖像處理的功能。需要注意的是雖然本發明是根據在附圖中圖解說明的特定優選實施例進而多種修改，結構替換或等同變換可不脫離於本發明其後的權利要求的範圍 和精髓而做出。
權利要求
1、一種立體圖像處理設備，包括圖像輸入裝置，用於輸入組成立體圖像的多個圖像數據；以及圖像合成裝置，用於將已經由所述圖像輸入裝置輸入的多個圖像數據和指示這些圖像數據的立體信息的填充數據在各個數據的相應區域被分割的狀態下加以合成，以輸出合成數據。
2、 如權利要求1所述的立體圖像處理設備，其中所述立體信息是指示圖 像數據是通過平行方法的立體圖像還是通過交叉方法的立體圖像的信息。
3、 如權利要,^1所述的立體圖像處理設備，其中所述填充數據是可通過視覺特徵加以區分的圖像。
4、 如權利要求1所述的立體圖像處理設備，進一步包括 高寬比調整輸入裝置，用於輸入高寬調整比，其中所述圖像合成裝置改變將與所述多個圖像數據合成的所述填充數據 的尺寸，以便合成圖像的縱向和4黃向尺寸具有已經由所述高寬比調整輸入裝 置輸入的高寬調整比。
5、 如權利要求1所述的立體圖像處理設備，進一步包括 編碼裝置，用於壓縮-編碼由所述圖像合成裝置合成的圖像數據；以及 復用裝置，用於對已經由所述編碼裝置壓縮-編碼的所述圖像數據添加用於立體顯示控制的立體信息作為頭信息，以準備文件。
6、 如權利要求1所述的立體圖像處理設備，其中所述多個圖像數據是對於右眼和左眼的圖像數據。
7、 如權利要求1所述的立體圖像處理設備，其中所述多個圖像數據是從多個視點捕獲一個對象的圖像數據。
8、 一種立體圖像處理方法，包括輸入步驟，通過圖像輸入裝置輸入通過平行方法或交叉方法組成立體圖 像的多個圖像數據；以及合成步驟，通過圖像合成裝置將所輸入的多個圖像數據和指示這些圖像 數據是通過平行方法的立體圖像還是通過交叉方法的立體圖像的填充數據在 各個數據的相應區域被分割的狀態下加以合成。
9、 如權利要求8所述的立體圖像處理方法， 其中在所述合成步驟中，改變將要與所述多個圖像數據合成的所述填充 數據的尺寸，以便所述合成圖像的縱向和橫向尺寸具有預先指定的高寬調整 比。
10、 一種立體圖像紙張，在所述立體圖像紙張中，將通過平行方法或交 叉方法組成立體圖像的多個圖像和可視地指示這些圖像是通過平行方法的立 體圖像還是通過交叉方法的立體圖像的填充數據在各個數據的相應區域被分 割的狀態下加以安置或分配。
11、 一種立體圖像處理程序，用於允許計算機運作為 圖像輸入裝置，用於輸入通過平行方法或交叉方法組成立體圖像的多個圖像；以及圖像合成裝置，用於將已經由所述圖像輸入裝置輸入的多個圖像 數據和指示這些圖像數據是通過平行方法的立體信息還是通過交叉圖像的立 體圖像的填充數據在各個數據的相應區域被分割的狀態下加以合成，以輸出 合成數據。
12、 一種計算機可讀記錄介質，其中記錄了包括合成圖像的結構圖像信 息，在所述結構圖像信息中，將通過平行方法或交叉方法組成立體圖像的多 個圖像和用於可視地指示這些圖像數據是通過平行方法的立體信息還是通過 交叉圖像的立體圖像的填充數據在各個數據的相應區域被分割的狀態下加以 合成，以輸出合成數據。
全文摘要
本發明涉及一種適用於生成允許第一眼就區分出合適的觀察方法的立體圖像的立體圖像處理設備。該立體圖像處理設備包括圖像輸入裝置(1)，用於輸入通過平行方法或交叉方法組成立體圖像的多個圖像數據；和圖像合成裝置(7)，用於將輸入的多個圖像數據和可視地指示這些圖像數據是通過平行方法的立體圖像還是通過交叉方法的立體圖像的填充數據在各個數據的相應區域被分割的狀態下加以合成，以輸出合成數據。
文檔編號H04N13/00GK101213845SQ20068002389
公開日2008年7月2日 申請日期2006年6月29日 優先權日2005年6月29日
發明者關澤英彥, 內海端, 吉田英明, 增谷健 申請人:索尼株式會社;三洋電機株式會社;夏普株式會社;奧林巴斯映像株式會社