信息處理裝置、信息處理方法以及計算機可讀介質的製作方法

2023-07-20 14:33:26 1

專利名稱：信息處理裝置、信息處理方法以及計算機可讀介質的製作方法
技術領域：
本發明涉及在醫學、病理學、生物學、材料科學等領域中用來控制由顯微鏡所獲得 的圖像的顯示的信息處理裝置、方法以及計算機可讀介質。
背景技術：
在醫學、病理學等領域中，已經提出了一種將通過光學顯微鏡獲得的活體的細胞、 組織、器官等的圖像數位化以由醫生或病理學者檢查組織或基於數位化的圖像來對病人進 行診斷的系統。例如，日本專利申請公開第2009-37250號(以下稱為專利文獻1)公開了一種方 法，其中，通過具有CCD(電荷耦合器件)的攝像機將由顯微鏡光學地獲得的圖像數位化，數 字信號被輸入至控制計算機系統，並且在監控器上顯示圖像。病理學者在觀看監控器上顯 示的圖像時進行檢查(例如，參見專利文獻1的第0027和0028段以及圖5)。在這樣的系統中，顯示在監視器上的圖像可以根據用戶使用諸如滑鼠的輸入裝置 所做出的操作的指令而改變。「改變」指的是，例如，圖像的顯示範圍的移動、旋轉、放大以及 縮小。通過這些操作，用戶可以操作圖像，好像用戶在實際操作顯微鏡一樣。這樣的系統包 括一個其中將兩個圖像彼此並行地顯示在一個屏幕上以通過用戶將它們相互比較的系統。 該系統相對於圖像中的任一個圖像，根據由用戶所做出的操作的指令來改變被輸入指令的 圖像。這裡，在用戶希望將相同的改變應用至兩個圖像的情況下，用戶需要相對於各個圖像 來做出相同操作的指令，這需要複雜的操作。鑑於上述情況，需要能夠由用戶有效地比較兩個圖像的信息處理裝置、方法以及 計算機可讀介質。

發明內容
在一個示例性實施方式中，信息處理裝置包括處理器；顯示設備，可操作地連接 至處理器；輸入設備，可操作地連接至處理器；以及存儲設備，可操作地連接至處理器，該 存儲設備存儲指令，所述指令使處理器與顯示設備、輸入設備和存儲設備協作以執行以下 處理(a)顯示與第一觀察對象物相關聯的第一圖像，第一圖像具有第一顯示範圍；(b)顯 示與第二觀察對象物相關聯的第二圖像，第二圖像具有第二顯示範圍；(c)使用戶能夠改 變第一顯示範圍；以及(d)響應於第一顯示範圍的改變，同時改變第二顯示範圍。在一個示例性實施方式中，第一觀察對象物與第二觀察對象物不同。在一個示例性實施方式中，第一圖像對應於觀察對象物的第一切片，以及第二圖 像對應於觀察對象物的不同的第二切片。
在一個示例性實施方式中，第一圖像具有第一解析度，並且第二圖像具有不同的
第二解析度。在一個示例性實施方式中，指令使處理器(a)使用戶能夠將第一顯示範圍改變 為第三顯示範圍；以及(b)響應於第一顯示範圍的改變，同時將第二顯示範圍改變為第四 顯示範圍。在一 個示例性實施方式中，指令使處理器(a)使用戶能夠改變第二顯示範圍；以 及(b)響應於第二顯示範圍的改變，使第一顯示範圍保持不變。在一個示例性實施方式中，指令使處理器(a)將第一圖像的至少一部分改變為 第一顏色；以及(b)將第二圖像的至少一部分改變為第二不同的顏色。在一個示例性實施方式中，指令使處理器與輸入設備協作以使用戶能夠(a)對 於第一圖像，輸入第一注釋；以及(b)對於第二圖像，輸入不同的第二注釋。在一個示例性實施方式中，指令使處理器通過顯示覆蓋第一圖像的第三圖像形成 疊加圖像。在該示例性實施方式中，第三圖像(a)具有第五顯示範圍；(b)與第二觀察對象 物相關聯；以及(c)對應於第二圖像。在一個示例性實施方式中，指令使處理器與輸入設備協作，以(a)使用戶能夠同 時改變第一顯示範圍和第五顯示範圍；以及(b)響應於第一顯示範圍和第五顯示範圍的改 變，同時改變第二顯示範圍。在一個示例性實施方式中，指令使處理器與輸入設備協作，以(a)使用戶能夠改 變第二顯示範圍；以及(b)響應於第二顯示範圍的改變(i)同時改變第五顯示範圍；以及 ( )使第一顯示範圍保持不變。在一個示例性實施方式中，第一圖像具有第一部分並且被設置為第一半透明圖 像。在該示例性實施方式中，第三圖像具有第二部分並且被設置為第二半透明圖像。在該 示例性實施方式中，指令使處理器同時顯示第一部分和第二部分，從而可以容易地在視覺 上識別出第一部分和第二部分中的每一個。在一個示例性實施方式中，指令使處理器與輸入設備協作，以(a)對於顯示的第 一圖像，使用戶能夠設置第一控制點；(b)對於顯示的第二圖像，使用戶能夠設置第二控制 點，其中，第二控制點對應於第一控制點；以及(c)通過執行仿射變換使第一控制點的第一 形狀與第二控制點的第二形狀相一致。在一個示例性實施方式中，一種操作包含指令的信息處理裝置的方法包括(a) 使顯示設備顯示與第一觀察對象物相關聯的第一圖像，第一圖像具有第一顯示範圍；(b) 使顯示設備顯示與第二觀察對象物相關聯的第二圖像，第二圖像具有第二顯示範圍；(C) 使處理器執行指令，以與輸入設備協作，從而使用戶能夠改變第一顯示範圍；以及(d)響應 於第一顯示範圍的改變，使處理器執行指令以同時改變第二顯示範圍。在一個示例性實施方式中，該方法包括(a)使處理器執行指令，以與輸入設備協 作，從而使用戶能夠將第一顯示範圍改變為第三顯示範圍；以及(b)響應於第一顯示範圍 的改變，能夠使處理器執行指令以同時將第二顯示範圍改變為第四顯示範圍。在一個示例性實施方式中，該方法包括(a)使處理器執行指令，以與輸入設備協 作，從而使用戶能夠改變第二顯示範圍；以及(b)響應於第二顯示範圍的改變，使處理器執 行指令以使第一顯示範圍保持不變。
在一個示例性實施方式中，該方法包括(a)使處理器執行指令以將第一圖像的 至少一部分改變為第一顏色；以及(b)使處理器執行指令以將第二圖像的至少一部分改變 為第二不同的顏色。

在一個示例性實施方式中，該方法包括使處理器執行指令，以與顯示設備協作，從 而通過顯示覆蓋第一圖像的第三圖像來形成疊加圖像。在該示例性實施方式中，第三圖像 (a)具有第五顯示範圍；(b)與第二觀察對象物相關聯；以及(c)對應於第二圖像。在一個示例性實施方式中，該方法包括(a)使處理器執行指令，以與輸入設備協 作，從而使用戶能夠同時改變第一顯示範圍和第五顯示範圍；以及(d)響應於第一顯示範 圍和第五顯示範圍的改變，使處理器執行指令，以與顯示設備協作，來同時改變第二顯示範 圍。在一個示例性實施方式中，該方法包括(a)使處理器執行指令以與輸入設備協 作，從而使用戶能夠改變第二顯示範圍；以及(b)響應於第二顯示範圍的改變(i)使處理 器執行指令以同時改變第五顯示範圍；以及(ii)使處理器執行指令以使第一顯示範圍保 持不變。在一個示例性實施方式中，該方法包括(a)使處理器執行指令以將第一圖像設 置為第一半透明圖像，第一圖像具有第一部分；(b)使處理器執行指令以將第三圖像設置 為第二半透明圖像，第三圖像具有第二部分；以及(c)使處理器執行指令，以與顯示設備協 作，來同時顯示第一部分和第二部分，使得可以在視覺上識別出第一部分和第二部分中的
每一個。在一個示例性實施方式中，計算機可讀介質存儲指令，所述指令被構造為使信息 處理裝置執行以下處理(a)顯示與第一觀察對象物相關聯的第一圖像，第一圖像具有第 一顯示範圍；(b)顯示與第二觀察對象物相關聯的第二圖像，第二圖像具有第二顯示範圍； (c)使用戶能夠改變第一顯示範圍；以及(d)響應於第一顯示範圍的改變，同時改變第二顯 示範圍。如上所述，根據本公開的實施方式，可以提供使用戶能夠有效地比較兩個圖像的 信息處理裝置、信息處理方法以及計算機可讀介質。本文描述了另外的特徵和優點，並且它們從下面的詳細描述和附圖中將顯而易 見。


圖1是示出了根據第一示例性實施方式的包括信息處理裝置的示例性計算機系 統的結構的框圖。圖2是用於說明當生成圖像金字塔結構的圖像組時所使用的示例性步驟的示意 圖。圖3是示出了示例性圖像金字塔結構的概圖。圖4A和圖4B是示出了兩個示例性圖像金字塔結構的概圖。圖5是示出了第一示例性實施方式中的示例性顯示單元的示意圖。圖6是示出了根據第一示例性實施方式的處理單元的示例性功能結構(程序結 構)的框圖。
圖7A和圖7B是均示出了第一示例性實施方式中的兩個顯示圖像的示例性顯示範 圍的改變狀態的示意圖。圖8是示出了根據第二示例性實施方式的處理單元的示例性功能結構(程序結 構)的框圖。圖9A、圖9B和圖9C是均示出了第二示例性實施方式中的兩個顯示圖像的示例性 顯示範圍的改變狀態的示意圖。圖10是示出了第三示例性實施方式中的疊加圖像和獨立圖像的示例性生成過程 的數據流。圖11是示出了第三示例性實施方式中的疊加圖像和獨立圖像的示意圖。圖12是示出了根據第三示例性實施方式的處理單元的示例性功能結構(程序結 構)的框圖。圖13A、圖13B和圖13C是均示出了第三示例性實施方式中構成疊加圖像和獨立圖 像的顯示圖像的示例性顯示範圍的改變狀態的示意圖。圖14是示出了第四示例性實施方式中的疊加圖像和獨立圖像的示例性生成過程 的數據流。圖15是示出了第四示例性實施方式中的疊加圖像和獨立圖像的示意圖。圖16是示出了第五示例性實施方式中的疊加圖像和獨立圖像的示例性生成過程 的數據流。圖17是示出了第五實施方式中的疊加圖像和獨立圖像的示意圖。圖18A、圖18B和圖18C是均示出了第六實施方式中的兩個顯示圖像上的仿射變換 的狀態的示意圖。圖19A、圖19B和圖19C是均示出了在第七實施方式中被設置注釋的兩個顯示圖像 的示意圖。
具體實施例方式下文中，將參照附圖來描述本公開的示例性實施方式。[第一示例性實施方式][信息處理裝置的結構]圖1是示出了根據本公開的一個示例性實施方式的包括信息處理裝置的示例性 計算機系統的結構的框圖。作為信息處理裝置，例如，使用了 PC(個人計算機)100。PC 100包括CPU(中央處理單元)101、R0M(只讀存儲器)102、RAM(隨機存取存儲 器)103、輸入和輸出接口(下文中，縮寫為I/O接口)105以及將這些部件彼此相連接的總 線 104。顯示單元106、輸入單元107、存儲單元108、通信單元109、驅動單元110等均連接 至 I/O 接口 105。顯示單元106是使用液晶、EL(電致發光)、CRT (陰極射線管)等的顯示設備。輸入單元107為，例如，定點設備(pointing device)、鍵盤、觸摸面板或其他操作 裝置。在輸入單元107包括觸摸面板的情況下，觸摸面板可以與顯示單元106集成。存儲單元108是諸如HDD (硬碟驅動器)、快閃記憶體和其他固態存儲器的非易失性存儲器。
驅動單元110是能夠驅動諸如光學記錄介質、軟(註冊商標)盤、磁性記錄帶和閃 存的可移動記錄介質111的設備。相反，存儲單元108通常被用作預先包含在PC 100中的 設備並主要驅動不可移動的記錄介質。通信單元109是可連接至LAN(區域網)、WAN(廣域網)等並且用於與另一設備進 行通信的數據機、路由器或者其他通信裝置。通信單元109可以進行有線通信或無線 通信中的任 意一種。在許多情況下，通信單元109與PC 100分開使用。[圖像金字塔結構]該示例性實施方式的信息處理裝置(PC 100)基於由成像裝置所捕獲的觀察目標 的圖像，而生成圖像金字塔結構。下文中，將描述圖像金字塔結構。圖2是用於說明當生成圖像金字塔結構的圖像組時所使用的示例性步驟的示圖。 圖3是示出了所生成的示例性圖像金字塔結構50的概圖。首先，通過掃描裝置(未示出)來捕獲觀察目標15的圖像，並生成數字圖像數據。 在病理學領域中，通常，通過對活體的器官、組織或細胞、或者其一部分進行切片而獲得的 物質為觀察目標15。然後，具有光學顯微鏡功能的掃描裝置捕獲設置在載玻片上的觀察目 標15的圖像，以將由此獲得的數字圖像數據存儲至掃描裝置或其他存儲裝置中。由於該數 字圖像數據將是在圖像金字塔結構中具有最高倍率的原始圖像數據51，因此該數字圖像數 據以足夠高的倍率被捕獲。如圖2所示，掃描裝置或通用計算機(未示出)根據上述獲得的原始圖像數據51 而生成解析度逐步減小的多個圖像數據項。圖2示出了從原始圖像數據51縮小為圖像數 據52的圖像數據、進一步從圖像數據52縮小為圖像數據53的圖像數據以及進一步從圖像 數據53縮小為圖像數據54的圖像數據。應當注意，實際上，步驟數越多，解析度越低，並且 生成了大量的圖像數據項。成像裝置或通用計算機以「片」為單位(例如，為預定大小的單 位)來存儲這些圖像數據項。一個片的大小例如為256X256(像素)。由此生成的圖像數據項形成圖3中所示的圖像金字塔結構50，並且將它們存儲在 例如信息處理裝置的存儲單元108等中。實際上，這些圖像數據項僅必須在與解析度信息 項相關聯時被存儲。應當注意，可以通過該示例性實施方式的信息處理裝置來執行圖像金 字塔結構50的生成和存儲，並且該圖像金字塔結構50在下文中表示從一個原始圖像數據 生成的圖像金字塔結構50。信息處理裝置根據由用戶做出的指令，而從圖像金字塔結構50獲取目標位置和 解析度的圖像，並將該圖像顯示在顯示單元106上。下文中，將描述顯示圖像的原理。首先，信息處理裝置中的CPU 101經由輸入單元107從用戶接收用於指定解析度 的輸入。響應於該指令，CPU 101從存儲在存儲單元108中的圖像金字塔結構50中獲得指 定的解析度的圖像數據E，並且相對於該圖像數據E來設置預定的顯示區域A。然後，將圖 像數據E的對應於顯示區域A的部分稱作「顯示圖像」。在圖3中，圖像數據52為圖像數據E。顯示區域A為限定顯示圖像的虛擬區域， 其由CPU 101來處理，並被設置為圖像數據E上的局部區域。圖像數據E的對應於顯示區 域A的一部分在顯示單元106上被顯示為顯示圖像。顯示區域A的大小由像素的數目來確 定，並且即使當要設置的圖像解析度改變時，其也不改變。
在用戶希望改變顯示圖像的顯示範圍的情況下，用戶經由輸入單元107將用於改 變顯示範圍的指令輸入至信息處理裝置。顯示範圍指的是將被顯示在物理屏幕上的原始圖 像數據的範圍。這裡，將描述由用戶所指示的改變為顯示圖像的顯示範圍的移動、擴大(放 大)、收縮(縮小)以及旋轉的情況。在用戶希望移動顯示圖像的顯示範圍的情況下，用戶通過輸入單元107將期望的 移動距離和移動方向輸入至信息處理裝置。CPU 101在圖像數據E上以指示的移動距離和 移動方向移動顯示區域A，並且在顯示單元106上顯示對應於移動的顯示區域A的部分圖像 數據E作為新的顯示圖像。在用戶希望旋轉顯示圖像的顯示範圍的情況下，用戶通過輸入單元107將期望的 旋轉中心坐標和期望的旋轉角度輸入至信息處理裝置。CPUlOl使顯示區域A繞著圖像數 據E上的指示的旋轉中心坐標旋轉指示的旋轉角度，並且在顯示單元106上顯示對應於旋 轉的顯示區域A的部分圖像數據E作為新的顯示圖像。在用戶希望放大顯示圖像的顯示範圍，S卩，放大顯示圖像的情況下，用戶通過輸入 單元107將顯示圖像的放大中心坐標和放大倍率輸入至信息處理裝置。在圖像金字塔結構 50中，CPU 101在對應於指示的放大倍率的較高解析度的圖像數據(圖像數據51)上移動 顯示區域A。在這種情況下，與圖像數據E上指示的放大中心坐標相對應的較高解析度的 圖像數據上的位置被設置為較高解析度的圖像數據的放大中心坐標，並且以這些放大中心 坐標作為中心來設置顯示區域A的位置。此外，由於在這種情況下，顯示區域A的尺寸被固 定，只有圖像數據的解析度增大，因此，放大了顯示圖像。應當注意，圖2和圖3均示出了顯 示區域A'，其為當顯示圖像被放大時所獲得的顯示區域。

在用戶希望縮小顯示圖像的顯示範圍，即，縮小顯示圖像的情況下，用戶通過輸入 單元107將顯示圖像的縮小中心坐標和縮小倍率輸入至信息處理裝置。在圖像金字塔結構 50中，CPU 101在對應於指示的縮小倍率的較低解析度的圖像數據(圖像數據53)上移動 顯示區域A。在這種情況下，與圖像數據E上所指示的縮小中心坐標相對應的較低解析度的 圖像數據上的位置被設置為較低解析度的圖像數據的縮小中心坐標，並且以這些縮小中心 坐標作為中心來設置顯示區域A的位置。此外，由於在這種情況下，顯示區域A的尺寸被固 定，只有圖像數據的解析度減小，所以縮小了顯示圖像。應當注意，圖2和圖3均示出了顯 示區域A"，其為當縮小顯示圖像時所獲得的顯示區域。如上所述，觀察目標15的圖像通過信息處理裝置而被顯示在顯示單元106上，並 根據用戶相對於顯示的觀察目標15而做出的諸如移動、旋轉、放大和縮小的改變指令，來 執行改變處理。下文中，如上所述的改變被統稱為「相對於顯示區域A的視角的改變」。[根據第一示例性實施方式的示例性信息處理裝置的操作]下文中，將描述根據該示例性實施方式的示例性信息處理裝置的操作。根據該示 例性實施方式的信息處理裝置能夠使用戶進行兩個圖像之間的比較。這兩個圖像是從兩 個通過捕獲兩個相應的具有高的空間相似性的觀察目標15的圖像而獲得的圖像金字塔結 構50中提取的圖像。兩個觀察目標15例如是在通過將病理組織切片所獲得的多個切片 (slice)中的通過不同的著色方法而被著色的兩個相鄰切片。圖4是示出了將由用戶進行 比較的兩個圖像金字塔結構50的概圖。這裡，圖像金字塔結構50中的一個被稱作「圖像金 字塔結構50A」，而另一個圖像金字塔結構被稱作「圖像金字塔結構50B」。應當注意，圖像金字塔結構50A和圖像金字塔結構50B可以從所謂的Z堆疊圖像中生成，Z堆疊圖像是通過 在改變焦距的同時捕獲一個觀察對象物的圖像所獲得的。[第一示例性實施方式中的兩個圖像的顯示]當用戶輸入顯示兩個圖像的指令以及期望的解析度時，CPU 101相對於圖像金字 塔結構50A的圖像數據El來設置顯示區域Al，並且還相對於圖像金字塔結構50B的圖像數 據E2來設置顯示區域A2。顯示區域Al的尺寸與顯示區域A2的尺寸相同，並且顯示數據 El的位置與顯示數據E2的位置相同。CPU 101假定顯示數據El的對應於顯示區域Al的 部分為顯示圖像Dl (第一圖像)，並且對顯示數據E2的應於顯示區域A2的部分為顯示圖像 D2(第二圖像)。圖5是示出了顯示單元106的示意圖。CPU 101在設置於RAM 103中的顯示緩衝 器上展開顯示圖像Dl和顯示圖像D2。結果，顯示圖像Dl和顯示圖像D2被顯示在顯示單元 106的顯示屏幕上。顯示圖像Dl和顯示圖像D2彼此橫向並行地顯示在顯示單元106的顯 示屏幕上。下文中，顯示在顯示圖像Dl中的觀察目標15 (即圖像金字塔結構50A的觀察目 標)被假定為第一觀察目標15A，而顯示在顯示圖像D2中的觀察目標15 ( S卩，圖像金字塔結 構50B的觀察目標)被假定為第二觀察目標15B。如上所述，顯示圖像Dl和顯示圖像D2均被顯示在顯示單元106上，從而能夠使用 戶對它們進行比較。[在第一示例性實施方式中由用戶做出的顯示範圍的改變指令] 這裡，將描述顯示範圍的改變。假定滑鼠被用作輸入單元107，在用戶希望改變顯 示圖像Dl和顯示圖像D2的顯示範圍的情況下，用戶經由滑鼠(輸入單元107)將改變顯示 範圍的指令輸入至信息處理裝置。例如，當滑鼠被拖動到滑鼠光標置於顯示圖像Dl上的狀 態時，CPU 101接收指令的輸入，以改變顯示圖像Dl的顯示範圍。類似地，當滑鼠被拖動到 滑鼠光標置於顯示圖像D2上的狀態時，CPU 101接收指令的輸入，以改變顯示圖像D2的顯 示範圍。在該示例性實施方式中，顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍彼此 相配合而改變。具體地，伴隨著用於改變顯示圖像Dl和D2中的一個的顯示範圍的指令，而 在另一顯示圖像的顯示範圍上自動地執行相同的改變。因此，用戶不需要分別改變顯示圖 像Dl和顯示圖像D2的顯示範圍，從而可以有效地將顯示圖像Dl與顯示圖像D2相比較。[根據第一示例性實施方式的示例性信息處理裝置的功能結構]圖6是示出了在該示例性實施方式的信息處理裝置中的對顯示圖像Dl和顯示圖 像D2執行改變處理的處理單元(圖像處理單元)的功能結構的框圖。如圖6所示，處理單元 (圖像處理單元)包括第一操作解釋對象(first operation interpretation object) 121、 第二操作解釋對象122、視角同步模塊123以及存儲在ROM 102、存儲單元108等中並且當 由CPU 101讀取時而進行操作的第一圖像顯示模塊124和第二圖像顯示模塊125。第一操作解釋對象121基於改變作為並行顯示的兩個圖像之一的顯示圖像Dl的 指令(該指令由用戶經由輸入單元107被輸入)，而生成「改變視角的請求」，並且將該請 求提供給視角同步模塊123。應當注意的是，「改變視角的請求」是由改變指令(change instruction)所輸入的信息，例如，包含移動方向、移動距離等的信息的命令。第二操作解釋對象122基於改變作為並行顯示的兩個圖像中的另一個的顯示圖像D2的指令(該指令由用戶經由輸入單元107被輸入)，而生成「改變視角的請求」，並且 將該請求提供給視角同步模塊123。視角同步模塊123同步地將由第一操作解釋對象121和第二操作解釋對象122中 的一個所提供的改變視角的請求提供給第一圖像顯示模塊124和第二圖像顯示模塊125。 應當注意，「對象」和「模塊」指的是在程序中均具有特定功能的部分。第一圖像顯示模塊124基於由視角同步模塊123所提供的改變視角的請求，來改 變相對於圖像金字塔結構50A的顯示區域Al視角。

第二圖像顯示模塊125基於由視角同步模塊123所提供的改變視角的請求，來改 變相對於圖像金字塔結構50B的顯示區域A2視角。[在第一示例性實施方式中改變視角的操作]將描述功能結構在用戶輸入相對於顯示圖像Dl的改變指令的情況下的操作。當用戶通過輸入單元107輸入相對於顯示圖像Dl的改變指令時，CPU 101基於上 述的功能結構來執行下面的控制。具體地，首先，第一操作解釋對象121基於由用戶輸入的 改變指令，而生成改變視角的請求，並將該請求提供給視角同步模塊123。視角同步模塊123將改變視角的請求提供給第一圖像顯示模塊124和第二圖像顯 示模塊125。第一圖像顯示模塊124基於已由視角同步模塊123所提供的改變視角的請求， 來改變相對於圖像金字塔結構50A的顯示區域Al視角。第二圖像顯示模塊125基於已由 視角同步模塊123所提供的改變視角的請求，來改變相對於圖像金字塔結構50B的顯示區 域A2的視角。第一圖像顯示模塊124和第二圖像顯示模塊125均被提供了相同的改變視 角的請求，從而以相同的方式改變顯示圖像Dl和顯示圖像D2的顯示範圍。如上所述，基於相對於顯示圖像Dl的改變指令，顯示圖像Dl的顯示範圍和顯示圖 像D2的顯示範圍彼此相配合而改變。用戶輸入相對於顯示圖像D2的改變指令的情況與輸入相對於顯示圖像Dl的改變 指令的情況相類似。具體地，當用戶輸入相對於顯示圖像D2的改變指令時，通過第二操作 解釋對象122生成改變視角的請求。該改變視角的請求經由視角同步模塊123而被提供給 第一圖像顯示模塊124和第二圖像顯示模塊125，並且顯示圖像D2的顯示範圍和顯示圖像 Dl的顯示範圍彼此相配合而改變。圖7是均示出了顯示圖像Dl和顯示圖像D2的顯示範圍的改變狀態的示意圖。圖 7A示出了顯示範圍沒有改變的顯示圖像Dl和顯示圖像D2。圖7B示出了顯示範圍發生改 變了的顯示圖像Dl和顯示圖像D2。應當注意的是，為便於理解，圖7A和圖7B分別示出了 簡化的第一觀察目標15A和簡化的第二觀察目標15B。隨後的附圖也是簡化了的。在圖7A中所示的顯示圖像Dl和顯示圖像D2中，當向顯示圖像Dl或顯示圖像D2 給出改變指令時，顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍如箭頭所表示的那樣 相似地改變，從而顯示出圖7B中所示的顯示圖像Dl和顯示圖像D2。應當注意的是，在這種 情況下，相對於顯示圖像Dl的改變指令是朝向圖中的右上方方向的移動。如上所述，根據該示例性實施方式，通過將相對於顯示圖像Dl和顯示圖像D2中的 一個的改變指令輸入至信息處理裝置，用戶可以同時改變顯示圖像Dl的顯示範圍和顯示 圖像D2的顯示範圍，從而可以有效地將顯示圖像Dl和顯示圖像D2彼此相比較。相對於顯示圖像Dl和顯示圖像D2的空間改變的指令(該指令由用戶輸入)可以獨立於圖像金字塔結構50A和圖像金字塔結構50B被存儲，並且可以經由可移動記錄介質或連接至信息處理裝置的網絡來給定和接收。CPU 101可以基於給定和接收的空間改變的 指令，來改變顯示圖像Dl和顯示圖像D2。通過這種結構，另一用戶不需要另外進行參數的 輸入操作。應當注意的是，網絡或可移動記錄介質相當於第一給定和接收單元。[第二示例性實施方式]將描述本公開的第二示例性實施方式。在該第二示例性實施方式中，將省略與第 一示例性實施方式中的那些部分相類似的部分的描述。在第二示例性實施方式中，仍將如 在第一示例性實施方式中那樣獲得的顯示圖像Dl和顯示圖像D2彼此相比較，但第二示例 性實施方式中的改變顯示範圍的模式與第一示例性實施方式中的模式不同。下文中，將描 述顯示範圍的改變。該示例性實施方式的信息處理裝置響應於用戶相對於顯示圖像Dl所做出的改變 指令，來改變顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍，並且響應於相對於顯示圖 像D2的改變指令而僅改變顯示圖像D2的顯示範圍。因此，用戶不需要分別改變顯示圖像 Dl和顯示圖像D2的顯示範圍。此外，可以根據顯示圖像Dl的顯示範圍的位置，而獨立地校 正顯示圖像D2的顯示範圍的位置。[根據第二示例性實施方式的示例性信息處理裝置的功能結構]圖8是示出了在該示例性實施方式的示例性信息處理裝置中的對顯示圖像Dl和 顯示圖像D2執行改變處理的處理單元(圖像處理單元)的示例性功能結構的框圖。如圖8所示，處理單元(圖像處理單元)包括第一操作解釋對象201、第二操作解 釋對象202、視角同步模塊203、位置校正模塊204以及存儲在ROM 102、存儲單元108等中 並且當由CPU 101讀取時而操作的第一圖像顯示模塊205和第二圖像顯示模塊206。第一 操作解釋對象201和第一圖像顯示模塊205均具有與第一示例性實施方式相同的結構。基於由用戶經由輸入單元107所輸入的改變指令，第二操作解釋對象202生成相 對於顯示圖像D2 (為並行顯示的兩個圖像中的一個)的用於位置校正請求，並且將該請求 提供給位置校正模塊204。用於位置校正的請求與改變視角的請求基本上相同。視角同步模塊203同步地將已由第一操作解釋對象201提供的改變視角的請求提 供給第一圖像顯示模塊205和第二圖像顯示模塊206。位置校正模塊204將由第二操作解釋對象202提供的用於位置校正的請求提供給 第二圖像顯示模塊206。第二圖像顯示模塊206基於已由視角同步模塊203所提供的改變視角的請求，來 改變相對於圖像金字塔結構50B的顯示區域A2的視角，並且基於已由位置校正模塊204提 供的用於位置校正的請求，來改變相對於圖像金字塔結構50B的顯示區域A2的視角。[在第二示例性實施方式中改變視角的操作]將描述用戶輸入相對於顯示圖像Dl的改變指令的情況。當用戶通過使用輸入單元107輸入相對於顯示圖像Dl的改變指令時，CPU 101基 於上述的功能結構來執行下面的控制。具體地，首先，第一操作解釋對象201基於由用戶輸 入的改變指令，來生成改變視角的請求，並將該請求提供給視角同步模塊203。視角同步模塊203將改變視角的請求提供給第一圖像顯示模塊205和第二圖像顯 示模塊206。第一圖像顯示模塊205基於已由視角同步模塊203所提供的改變視角的請求，來改變相對於圖像金字塔結構50A的顯示區域Al的視角。第二圖像顯示模塊206基於已 由視角同步模塊203所提供的改變視角的請求，來改變相對於圖像金字塔結構50B的顯示 區域A2的視角。第一圖像顯示模塊205和第二圖像顯示模塊206被提供了相同的改變視 角的請求，從而使顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍進行相同的改變。如上所述， 當用戶輸入相對於顯示圖像Dl的改變指令時，顯示圖像Dl的顯示範圍 和顯示圖像D2的顯示範圍彼此相配合而改變。接下來，將描述用戶輸入相對於顯示圖像D2 的改變指令的情況。當用戶通過使用輸入單元107輸入相對於顯示圖像D2的改變指令時，CPU 101基 於上述的功能結構來執行下面的控制。具體地，首先，第二操作解釋對象202基於由用戶輸 入的改變指令，而生成用於位置校正的請求，並將該請求提供給位置校正模塊204。位置校正模塊204將用於位置校正的請求提供給第二圖像顯示模塊206。第二圖 像顯示模塊206基於已由位置校正模塊204提供的用於位置校正的請求，來改變關於圖像 金字塔結構50B的顯示區域A2的視角。結果，改變了顯示圖像D2的顯示範圍。應當注意 的是，由於沒有將用於位置校正的請求提供給第一圖像顯示模塊205，因此顯示圖像Dl的 顯示範圍沒有改變。圖9是均示出了顯示圖像Dl和顯示圖像D2的顯示範圍的改變狀態的示意圖。在 圖9A中所示的顯示圖像Dl和顯示圖像D2中，當輸入用於放大由虛線所表示的顯示圖像Dl 的區域的指令時，顯示圖像Dl和顯示圖像D2的顯示範圍如箭頭所表示的那樣被放大，並且 顯示出圖9B中所示的顯示圖像Dl和顯示圖像D2。如圖9B所示，顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍得到相同的改 變，因此，可能存在第一觀察目標15A和第二觀察目標15B之間的偏離被加強從而難以進行 它們之間的比較的情況。然後，當相對於顯示圖像D2而輸入由圖9B中的箭頭所表示的方 向上的移動的指令時，只有顯示圖像D2的顯示範圍發生改變，並且如圖9C所示，第一觀察 目標15A和第二觀察目標15B的相同的部分彼此並行地被顯示，從而能夠容易地進行比較。如上所述，根據該示例性實施方式，用戶可以根據相對於顯示圖像Dl的改變指令 而同時改變顯示圖像Dl和顯示圖像D2的顯示範圍，並根據相對於顯示圖像D2的改變指令 而只改變顯示圖像D2的顯示範圍。結果，即使在當顯示圖像Dl和顯示圖像D2的顯示範圍 同時改變而加強了第一觀察目標15A和第二觀察目標15B之間的偏離時，也可以校正每個 顯示的觀察目標的位置，從而可以容易地將顯示圖像Dl和顯示圖像D2彼此相比較。應當注意的是，儘管在該示例性實施方式中，根據相對於顯示圖像Dl的改變指令 同時改變了顯示圖像Dl的顯示範圍和顯示圖像D2的顯示範圍，並且根據相對於顯示圖像 D2的改變指令只改變了顯示圖像D2的顯示範圍，但相反的情況也是可行的。具體地，可以 根據相對於顯示圖像D2的改變指令而同時改變顯示圖像Dl的顯示範圍和顯示圖像D2的 顯示範圍，並且根據相對於顯示圖像Dl的改變指令而只改變顯示圖像Dl的顯示範圍。[第三示例性實施方式]將描述本公開的第三示例性實施方式。在第三示例性實施方式中，將省略與第一 示例性實施方式和第二示例性實施方式中的那些部分相似的部分的描述。在該第三示例性 實施方式中仍將如在第一示例性實施方式和第二示例性實施方式中那樣所獲得的顯示圖 像Dl和顯示圖像D2彼此相比較，但該第三示例性實施方式中的顯示顯示圖像的模式和改變顯示範圍的模式與第一示例性實施方式和第二示例性實施方式中的模式不同。[第三示例性實施方式中的兩個圖像的顯示] 當用戶輸入顯示兩個圖像的指令以及期望的解析度時，如在第一示例性實施方式 中，CPU 101相對於圖像金字塔結構50A的圖像數據El設置顯示區域Al，並且還相對於圖 像金字塔結構50B的圖像數據E2設置顯示區域A2。圖10是示出了顯示在該示例性實施方式的顯示單元106上的兩個圖像的生成過 程的數據流。如圖10所示，CPU 101切出(cut out)顯示數據El的對應於顯示區域Al的一部 分作為顯示圖像Dl (St 301)，然後切出顯示區域A2的對應於顯示數據E2的一部分作為顯 示圖像D2(St 302)。CPU 101以疊加的方式合併被分別切出的顯示圖像Dl和顯示圖像D2， 並生成疊加圖像D3 (St303)。顯示圖像D2沒有疊加在顯示圖像Dl上，並且獨立地構成獨立 圖像D4。以下將描述通過疊加實現的兩個圖像的合併。CPU 101在設置於RAM 103中的顯示緩衝器上展開疊加圖像D3和獨立圖像D4。結 果，疊加圖像D3和獨立圖像D4被顯示在顯示單元106的顯示屏幕上。圖11是示出了顯示 在顯示屏幕上的疊加圖像D3和獨立圖像D4的示意圖。疊加圖像D3和獨立圖像D4彼此橫 向並行地顯示在顯示單元106的顯示屏幕上。如上所述，疊加圖像D3和獨立圖像D4被顯示在顯示單元106上。從而，用戶可以 在參考顯示在獨立圖像D4中的第二觀察目標15B的同時來比較以疊加方式顯示在疊加圖 像D3中的第一觀察目標15A和第二觀察目標15B。[在第三示例性實施方式中由用戶所做出的顯示範圍的改變指令]這裡，將描述顯示範圍的改變。在用戶希望改變顯示為疊加圖像D3的顯示圖像Dl 和顯示圖像D2的顯示範圍以及顯示為獨立圖像D4的顯示圖像D2的顯示範圍的情況下，用 戶經由滑鼠將改變指令輸入至信息處理裝置。例如，當滑鼠被拖動到滑鼠光標置於疊加圖 像D3上的狀態時，CPUlOl接收相對於疊加圖像D3的改變指令的輸入。類似地，當滑鼠被 拖動到滑鼠光標置於獨立圖像D4上的狀態時，CPU 101接收相對於獨立圖像D4的改變指 令的輸入。該示例性實施方式的信息處理裝置根據相對於疊加圖像D3的改變指令，而改變 構成疊加圖像D3的顯示圖像Dl和顯示圖像D2的相應顯示範圍以及作為獨立圖像D4的顯 示圖像D2的相應的顯示範圍，並且根據相對於獨立圖像D4的改變指令，而改變構成獨立圖 像D4的顯示圖像D2的顯示範圍。因此，用戶不需要分別改變構成疊加圖像D3的顯示圖像 Dl的顯示範圍、構成疊加圖像D3的顯示圖像D2的顯示範圍以及構成獨立圖像D4的顯示圖 像D2的顯示範圍。另外，用戶可以在疊加圖像D3中精確地將第一觀察目標15A和第二觀 察目標15B疊加。[根據第三示例性實施方式的示例性信息處理裝置的功能結構]圖12是示出了在該示例性實施方式的示例性信息處理裝置中的對顯示圖像Dl和 顯示圖像D2執行改變處理的處理單元(圖像處理單元)的示例性功能結構的框圖。如圖12所示，處理單元(圖像處理單元)包括第一操作解釋對象301、第二操作解 釋對象302、視角同步模塊303、位置校正模塊304以及存儲在ROM 102、存儲單元108等中 並且當由CPU 101讀取時而操作的第一圖像顯示模塊305和第二圖像顯示模塊306。視角同步模塊303和第二圖像顯示模塊306具有與第二示例性實施方式相同的結構。 第一操作解釋對象301基於由用戶經由輸入單元107輸入的相對於疊加圖像D3 的改變指令，而生成改變視角的請求，並且將該請求提供給視角同步模塊303。第二操作解釋對象302基於由用戶經由輸入單元107輸入的改變指令，而生成相 對於獨立圖像D4的用於位置校正的請求，並將該請求提供給位置校正模塊304。位置校正模塊304將由第二操作解釋對象302所提供的用於位置校正的請求同步 地提供給第一圖像顯示模塊305和第二圖像顯示模塊306。第一圖像顯示模塊305基於已由視角同步模塊303所提供的改變視角的請求，來 改變相對於圖像金字塔結構50A的顯示區域Al和圖像金字塔結構50B的顯示區域A2的視 角。此外，第一圖像顯示模塊305基於已由位置校正模塊304所提供的用於位置校正的請 求，來改變關於圖像金字塔結構50B的顯示區域A2的視角。[在第三示例性實施方式中改變視角的操作]將描述用戶輸入相對於疊加圖像D3的改變指令的情況。當用戶通過使用輸入單元107輸入相對於疊加圖像D3的改變指令時，CPU 101基 於上述的功能結構來執行下面的控制。具體地，首先，第一操作解釋對象301基於由用戶輸 入的改變指令而生成改變視角的請求，並將該請求提供給視角同步模塊303。視角同步模塊303將該改變視角的請求提供給第一圖像顯示模塊305和第二圖像 顯示模塊306。第一圖像顯示模塊305基於已由視角同步模塊303所提供的改變視角的請 求，改變相對於圖像金字塔結構50A的顯示區域Al的視角。第二圖像顯示模塊306基於已 由視角同步模塊303所提供的改變視角的請求，改變相對於圖像金字塔結構50B的顯示區 域A2的視角。第一圖像顯示模塊305和第二圖像顯示模塊306被提供了相同的改變視角 的請求，從而使構成疊加圖像D3的顯示圖像Dl和顯示圖像D2的顯示範圍以及構成獨立圖 像D4的顯示圖像D2的顯示範圍進行相同的改變。如上所述，當用戶輸入相對於疊加圖像D3的改變指令時，構成疊加圖像D3的顯示 圖像Dl和顯示圖像D2的顯示範圍以及構成獨立圖像D4的顯示圖像D2的顯示範圍彼此相 配合而改變。接下來，將描述用戶輸入相對於獨立圖像D4的改變指令的情況。當用戶通過使用輸入單元107輸入相對於獨立圖像D4的改變指令時，CPU 101基 於上述的功能結構來執行下面的控制。具體地，首先，第二操作解釋對象302基於由用戶輸 入的改變指令而生成用於位置校正的請求，並將該請求提供給位置校正模塊304。位置校正模塊304將用於位置校正的請求提供給第一圖像顯示模塊305和第二圖 像顯示模塊306。第一圖像顯示模塊305基於已由位置校正模塊304所提供的位置校正的 請求，來改變相對於圖像金字塔結構50B的顯示區域A2的視角。第二圖像顯示模塊306基 於已由位置校正模塊304所提供的位置校正的請求，來改變相對於圖像金字塔結構50B的 顯示區域A2的視角。由於第一圖像顯示模塊305和第二圖像顯示模塊306被提供了相同 的位置校正的請求，從而使構成疊加圖像D3的顯示圖像D2的顯示範圍與構成獨立圖像D4 的顯示圖像D2的顯示範圍進行相同的改變。由於第一圖像顯示模塊305即使在接收到用 於位置校正的請求時也不改變相對於圖像金字塔結構50A的顯示區域Al的視角，因此構成 疊加圖像D3的顯示圖像Dl的顯示範圍沒有改變。圖13是均示出了構成疊加圖像D3的顯示圖像Dl和顯示圖像D2的顯示範圍以及構成獨立圖像D4的顯示圖像D2的顯示範圍的改變狀態的示意圖。在圖13A中所示的疊加 圖像D3和獨立圖像D4中，當相對於疊加圖像D3而輸入由箭頭所表示的方向上的移動的指 令時，構成疊加圖像D3的顯示圖像Dl和顯示圖像D2的顯示範圍以及構成獨立圖像D4的 顯示圖像D2的顯示範圍發生改變，從而顯示出圖13B中所示的疊加圖像D3和獨立圖像D4。然後，當相對於如圖13B中所示的獨立圖像D4而輸入由箭頭所表示的方向上的移 動的指令時，構成疊加圖像D3的顯示圖像D2的顯示範圍以及構成獨立圖像D4的顯示圖像 D2的顯示範圍發生改變，並顯示出圖13C中所示的疊加圖像D3和獨立圖像D4。結果，在疊 加圖像D3中，第一觀察目標15A和第二觀察目標15B的位置可以被調整為使得基本上第一 觀察目標15A和第二觀察目標15B的相同的部分以如圖13C所示的疊加方式被顯示。如上所述 ，根據該示例性實施方式，用戶可以根據相對於疊加圖像D3的改變指 令，而同時改變構成疊加圖像D3的顯示圖像Dl和顯示圖像D2的顯示範圍以及構成獨立圖 像D4的顯示圖像D2的顯示範圍，並且根據相對於獨立圖像D4的改變指令，而只改變構成 疊加圖像D3和獨立圖像D4中的每一個的顯示圖像D2的顯示範圍。結果，用戶可以在參考 顯示在獨立圖像D4中的第二觀察目標15B的同時比較以疊加方式顯示在疊加圖像D3中的 第一觀察目標15A和第二觀察目標15B。另外，用戶可以調整彼此疊加的第一觀察目標15A 和第二觀察目標15B的位置，從而可以容易地將顯示圖像Dl和顯示圖像D2相互比較。[第四示例性實施方式]將描述本公開的第四示例性實施方式。在第四示例性實施方式中，將省略與第三 示例性實施方式中的那些部分相似的部分的描述。在第四示例性實施方式中仍將如在第三 示例性實施方式中那樣獲得的顯示圖像Dl和顯示圖像D2相互比較，但第四示例性實施方 式中的顯示顯示圖像的模式與第三示例性實施方式中的模式不同。[第四示例性實施方式中的兩個圖像的顯示]當用戶輸入顯示兩個圖像的指令以及期望的解析度時，如在第三示例性實施方式 中，CPU 101相對於圖像金字塔結構50A的圖像數據El設置顯示區域Al，並且還相對於圖 像金字塔結構50B的圖像數據E2設置顯示區域A2。圖14是示出了顯示在該示例性實施方式的顯示單元106上的兩個圖像的生成過 程的數據流。如圖14所示，CPU 101切出顯示數據El的對應於顯示區域Al的一部分作為顯 示圖像Dl (St 401)，然後切出顯示數據E2的對應於顯示區域A2的一部分作為顯示圖像 D2(St 402)。然後，CPU 101基於預先設置或者已由用戶輸入的α值(透射率)，來α混 合(alpha-blend)顯示圖像Dl和顯示圖像D2 (St 403)。通過α混合，生成了通過使顯示 圖像Dl和顯示圖像D2疊加所獲得的疊加圖像D3。此外，CPU 101還假定顯示圖像D2作為 獨立圖像D4。應當注意的是，在該示例性實施方式中，α值等同於顯示控制信息。CPU 101在設置於RAM 103中的顯示緩衝器上展開疊加圖像D3和獨立圖像D4。結 果，顯示圖像Dl和顯示圖像D2均被顯示在顯示單元106的顯示屏幕上。圖15是示出了疊 加圖像D3和獨立圖像D4的示意圖。應當注意，在圖15中，顯示圖像Dl和顯示圖像D2的 半透明狀態由陰影來表示。疊加圖像D3和獨立圖像D4彼此並行(例如，橫向)地顯示在 顯示單元106的顯示屏幕上。如上所述，由於顯示圖像Dl和顯示圖像D2被α混合，因此 第一觀察目標15Α和第二觀察目標15Β以預定的透射率疊加，並在疊加圖像D3中被顯示。另一方面，顯示圖像D2在獨立圖像D4中被實際顯示。如上所述，疊加圖像D3和獨立圖像D4被顯示在顯示單元106上。由於顯示圖像 Dl和顯示圖像D2被α混合在疊加圖像D3中，因此顯示圖像Dl和顯示圖像D2可以被設置 為半透明圖像，從而可以在視覺上識別第一觀察目標15Α的一部分和第二觀察目標15Β的 一部分，即使這些部分是彼此疊加的。此外，通過任意改變α值，可以容易地判斷出關注的 一部分屬於顯示圖像Dl和顯示圖像D2中的哪部分。在疊加圖像D3和獨立圖像D4被如上所述地顯示的情況下，如在第三示例性實施 方式中，輸入相對於疊加圖像D3或獨立圖像D4的改變指令，從而改變顯示圖像Dl和顯示 圖像D2的顯示範圍。用戶可以在參考顯示在獨立圖像D4中的第二觀察目標15Β的同時來 比較以疊加方式顯示在疊加圖像D3中的第一觀察目標15Α和第二觀察目標15Β。另外，用 戶可以調整彼此疊加的第一觀察目標15Α和第二觀察目標15Β的位置，從而可以容易地將 顯示圖像Dl和顯示圖像D2相互比較。應當注意的是，當相對於疊加圖像D3或獨立圖像D4 而做出改變指令時，可以改變α值。由用戶輸入的應用至顯示圖像Dl和顯示圖像D2的參數(α值)可以獨立於圖像 金字塔結構50Α和圖像金字塔結構50Β被存儲，並且可以經由可移動記錄介質或連接至信 息處理裝置的網絡來給定和接收。CPUlOl可以基於給定和接收的參數，來改變顯示圖像Dl 和顯示圖像D2的透射率。通過這種結構，另一用戶不需要分別進行參數的輸入操作。應當 注意的是，網絡和可移動記錄介質中的每一個均等同於第二給定和接收單元。[第五示例性實施方式]將描述本公開的第五示例性實施方式。在該第五示例性實施方式中，將省略與第 三示例性實施方式中的那些部分相似的部分的描述。在第五示例性實施方式中仍將如在第 三示例性實施方式中那樣獲得的顯示圖像Dl和顯示圖像D2相互比較，但第五示例性實施 方式中的顯示顯示圖像的模式與第三示例性實施方式中的模式不同。[第五示例性實施方式中的兩個圖像的顯示]當用戶輸入顯示兩個圖像指令以及期望的解析度時，如在第三示例性實施方式 中，CPU 101相對於圖像金字塔結構50A的圖像數據El設置顯示區域Al，並且還相對於圖 像金字塔結構50B的圖像數據E2設置顯示區域A2。圖16是示出了顯示在該示例性實施方式的顯示單元106上的兩個圖像的生成過 程的數據流。如圖16所示，CPU 101切出顯示數據El的對應於顯示區域Al的一部分作為顯 示圖像Dl (St 501)，然後切出顯示數據E2的對應於顯示區域A2的一部分作為顯示圖像 D2(St 502)。隨後，CPU 101將顯示圖像Dl改變為單色圖像(St 503)，並且通過將定義第 一單色調(tone)的色值1應用至單色顯示圖像D1，而將單色顯示圖像Dl改變為彩色圖像 (St 504)。結果，生成了第一色調的顯示圖像D1。此外，CPU 101將顯示圖像D2改變為單 色圖像(St 505)，並且通過將定義與第一色調不同的第二色調的色值1應用至單色顯示圖 像D2，而將單色顯示圖像D2改變為彩色圖像(St506)。結果，生成了第二色調的顯示圖像 D2。然後，CPU 101通過加法器將彩色的顯示圖像Dl和顯示圖像D2相加(St 507)，並生成 疊加圖像D3。此外，CPU 101設置顯示圖像D2作為獨立圖像D4。應當注意的是，色值在該 示例性實施方式中等同於顯示控制信息。
18
CPU 101在設置於RAM 103中的顯示緩衝器上展開疊加圖像D3和獨立圖像D4。結 果，疊加圖像D3和獨立圖像D4被顯示在顯示單元106的顯示屏幕上。圖17是示出了疊加 圖像D3和獨立圖像D4的示意圖。應當注意的是，在圖17中，顯示圖像Dl和顯示圖像D2 的色調通過亮度差(明暗度)來表示。疊加圖像D3和獨立圖像D4彼此並行(例如，橫向) 地顯示在顯示單元106的顯示屏幕上。如上所述，由於顯示圖像Dl和顯示圖像D2具有彼 此不同的單色調，因此第一觀察目標15A和第二觀察目標15B在疊加圖像D3中均具有不同 的色調。另一方面，第二觀察目標15B以原始色調顯示在獨立圖像D4中。如上所述，疊加圖像D3和獨立圖像D4被顯示在顯示單元106上。由於顯示圖像 Dl和顯示圖像D2在疊加圖像D3中具有彼此不相同的單色調，因此用戶可以容易地判斷出 關注的一部分屬於疊加圖像D3中的顯示圖像Dl和顯示圖像D2的哪一個。在疊加圖像D3和獨立圖像D4被如上所述地顯示的情況下，如在第三示例性實施 方式中，輸入相對於疊加圖像D3或獨立圖像D4的改變指令，從而改變顯示圖像Dl和顯示 圖像D2的顯示範圍。用戶可以在參考顯示於獨立圖像D4中的第二觀察目標15B的同時來 比較以疊加方式顯示在疊加圖像D3中的第一觀察目標15A和第二觀察目標15B。另外，用 戶可以調整彼此疊加的第一觀察目標15A和第二觀察目標15B的位置，從而可以容易地將 顯示圖像Dl和顯示圖像D2相互比較。由用戶輸入的應用至顯示圖像Dl和顯示圖像D2的參數(色值)可以獨立於圖像 金字塔結構50A和圖像金字塔結構50B被存儲，並且可以經由可移動記錄介質或連接至信 息處理裝置的網絡來給定和接收。CPUlOl可以基於給定和接收的參數來改變顯示圖像Dl 和顯示圖像D2的色調。通過這種結構，另一用戶不需要分別進行參數的輸入操作。應當注 意的是，網絡和可移動記錄介質中的每一個均等同於第二給定和接收單元。[第六示例性實施方式]將描述本公開的第六示例性實施方式。在第六示例性實施方式中，將省略與第三 示例性實施方式中的那些部分相似的部分的描述。在第六示例性實施方式中仍將如在第三 示例性實施方式中那樣獲得的顯示圖像Dl和顯示圖像D2彼此相比較，但第六示例性實施 方式中的顯示顯示圖像的模式與第三實施方式中的模式不相同。[第六示例性實施方式中的兩個圖像的顯示]當用戶輸入顯示兩個圖像的指令以及期望的解析度時，如第一示例性實施方式 中，CPU 101相對於圖像金字塔結構50A的圖像數據El設置顯示區域Al，並且還相對於圖 像金字塔結構50B的圖像數據E2設置顯示區域A2。CPU 101在顯示單元106上顯示顯示圖像Dl和顯示圖像D2。然後，CPU 101根據 用戶經由輸入單元107所做出的輸入對顯示圖像Dl和顯示圖像D2中的一個或兩者執行放 射變換。下文中，將描述該仿射變換。圖18是均示出了在顯示圖像Dl和顯示圖像D2上的仿射變換的狀態的示意圖。在仿射變換中，使用配置在顯示圖像Dl和顯示圖像D2中的多個控制點。圖18A示 出了其中設定了控制點的顯示圖像Dl和顯示圖像D2。如圖18A所示，用戶在顯示圖像Dl 中設定控制點Pl並在顯示圖像D2中設定控制點P2。控制點Pl被任意設定為包括顯示圖 像Dl的特徵點的多個點。類似地，控制點P2被任意設定為包括顯示圖像D2的特徵點的多 個點。控制點Pl和控制點P2被設定為彼此相對應的點。在圖18A中，設定了九個控制點Pl和九個控制點P2。此外，在圖18A中，第一觀察目標15A和第二觀察目標15B的端點、中 點、角部等被設定為顯示圖像Dl和顯示圖像D2中的特徵點。應當注意的是，控制點Pl和 控制點P2的坐標等於顯示控制信息。用戶經由輸入單元107提供輸入以通知已完全設定了控制點。CPUlOl基於顯示圖 像Dl中的多個控制點Pl而生成TIN(三角的不規則網)，並且還基於顯示圖像D2中的多個 控制點P2而生成TIN。圖18B通過虛線示出了生成的TIN。TIN是多個控制點作為頂點的 三角形。其形狀接近於正三角形的三角形適用於上述三角形。儘管存在TIN生成方法的各 種原理，例如，可以使用將最小角最大化的原理，其中，要生成的三角形群的最小角被設定 為大於通過不同分割方法所獲得的最小角。然後，CPU 101針對每個生成的三角形而在顯示圖像Dl上執行仿射變換，以使該 三角形的形狀與顯示圖像D2的對應三角形的形狀相一致。圖18C示出了已進行了仿射變 換的顯示圖像D1。仿射變換是移動、旋轉、橫向反轉、放大、縮小、剪切等中的任一種或者它 們中的一些的組合，並且其可以通過使用結構映射技術(texture mapping technique)來 執行。通過在TIN的每個三角形上執行仿射變換，第一觀察目標15A的一部分和對應於第 一觀察目標15A的這部分的第二觀察目標15B的一部分可以彼此相疊加而同時抑制了圖像 的失真。應當注意的是，儘管在這種情況下顯示圖像Dl發生變形，但顯示圖像D2可以代替 顯示圖像Dl而發生變形。此外，顯示圖像Dl和顯示圖像D2可以都發生變形。CPU 101使 變形的顯示圖像Dl和沒有變形的顯示圖像D2疊加以生成疊加圖像D3。另外，CPU 101將 沒有變形的顯示圖像D2設定為獨立圖像D4。CPU 101在設置於RAM 103中的顯示緩衝器上展開疊加圖像D3和獨立圖像D4。結 果，疊加圖像D3和獨立圖像D4被顯示在顯示單元106的顯示屏幕上。由於顯示圖像Dl在 疊加圖像D3中發生變形，使得第一觀察目標15A與第二觀察目標15B非常相類似，因此第 一觀察目標15A和第二觀察目標15B之間的對應部分以疊加的方式被顯示，相應地，用戶可 以容易地將第一觀察目標15A和第二觀察目標15B之間的對應部分彼此相比較。在疊加圖像D3和獨立圖像D4被如上所述地顯示的情況下，如在第三示例性實施 方式中，輸入相對於疊加圖像D3或獨立圖像D4的改變指令，從而改變顯示圖像Dl和顯示 圖像D2的顯示範圍。用戶可以在參考顯示於獨立圖像D4中的第二觀察目標15B的同時來 比較以疊加方式顯示在疊加圖像D3中的第一觀察目標15A和第二觀察目標15B。另外，由 於用戶可以調整彼此疊加的第一觀察目標15A和第二觀察目標15B的位置，因此可以容易 地將顯示圖像Dl和顯示圖像D2相互比較。由用戶輸入的用於使顯示圖像Dl或顯示圖像D2變形的參數(控制點的坐標等) 可以獨立於圖像金字塔結構50A和圖像金字塔結構50B被存儲，並且可以經由可移動記錄 介質或連接至信息處理裝置的網絡來給定和接收。CPU 101可以基於給定和接收的參數而 使顯示圖像Dl和顯示圖像D2變形。通過這種結構，另一用戶不需要另外進行參數的輸入 操作。應當注意的是，網絡和可移動記錄介質中的每一個均等同於第二給定和接收單元。[第七示例性實施方式]將描述本公開的第七示例性實施方式。在第七示例性實施方式中，將省略與第一 示例性實施方式和第三示例性實施方式的那些部分相似的部分的描述。在第七示例性實 施方式中仍將如在第一示例性實施方式中那樣獲得的顯示圖像Dl和顯示圖像D2彼此相比較，但第七示例性實施方式中的顯示顯示圖像的模式與第一示例性實施方式中的模式不 同。[第七示例性實施方式中的兩個圖像的顯示]當用戶輸入顯示兩個圖像的指令以及期望的解析度時，如在第一示例性實施方式 中，CPU 101相對於圖像金字塔結構50A的圖像數據El設置顯示區域Al，並且還相對於圖 像金字塔結構50B的圖像數據E2設置顯示區域A2。CPU 101在設置於RAM 103中的顯示緩衝器上展開顯示圖像Dl和顯示圖像D2。 結果，疊加圖像D3和獨立圖像D4被顯示在顯示單元106的顯示屏幕上。這裡，可以存在為 顯示在顯示單元106上的顯示圖像Dl和顯示圖像D2設置注釋的情況。注釋指的是通過在 視覺上合併位置信息和內容信息所獲得的註解。該位置信息由用戶為圖像中將被關注的點 (例如，存在疾病可能性的部分)所設置。該內容信息與位置信息相關聯。圖19是示出了被設置注釋的顯示圖像Dl和顯示圖像D2的示意圖。如圖19A所 示，用戶在顯示圖像Dl中設置注釋附並在顯示圖像D2中設置注釋N2。這裡，如圖19B所 示，CPU 101也在顯示顯示圖像D2中顯示注釋Ni，並在顯示圖像Dl中顯示注釋N2。結果， 用戶可以容易地將在顯示圖像Dl中設置注釋附的第一觀察目標15A的一部分與在顯示圖 像D2中沒有設置注釋的第二觀察目標15B的對應部分相比較。類似地，用戶可以容易地將 在顯示圖像D2中設置注釋N2的第二觀察目標15B的一部分與在顯示圖像Dl中沒有設置 注釋的第一觀察目標15A的對應部分相比較。如在第一示例性實施方式或第二示例性實施方式中，輸入相對於設置了注釋m 和注釋N2的顯示圖像Dl或者相對於設置了注釋m和注釋N2的顯示圖像D2的改變指令， 從而改變顯示圖像Dl和顯示圖像D2的顯示範圍。用戶可以容易地在參考設置在顯示圖像 Dl和顯示圖像D2中的注釋附和注釋N2的同時來比較第一觀察目標15A和第二觀察目標 15B之間的對應部分。此外，如圖19C所示，CPU 101可以使設置了注釋m的顯示圖像Dl和設置了注釋 N2的顯示圖像D2相互疊加，以生成疊加圖像D3。在疊加圖像D3中，顯示附加在顯示圖像 Dl的注釋附和附加在顯示圖像D2的注釋N2。在這種情況下，CPU 101將設置了注釋N2的 顯示圖像D2設置為獨立圖像D4。如在第三示例性實施方式中，相對於設置了注釋m和注釋N2的疊加圖像D3或者 設置了注釋N2的獨立圖像D4輸入改變指令，從而改變顯示圖像Dl和顯示圖像D2的顯示 範圍。用戶可以容易地在參考設置在疊加圖像D3中的注釋m和注釋N2的同時來比較第 一觀察目標15A和第二觀察目標15B之間的對應部分。本公開不限於以上所述的示例性實施方式，並且在不背離本公開的主旨的前提下 可以進行修改。在上面的描述中，形成圖像金字塔結構50的圖像數據被存儲在信息處理裝置的 存儲單元108中。然而，也可以採用與信息處理裝置不同的計算機或伺服器，以存儲形成圖 像金字塔結構50的圖像數據，並且可以採用由用戶用作終端裝置的信息處理裝置，以訪問 不同的計算機或伺服器來接收該圖像數據。在這種情況下，伺服器和作為終端裝置的信息 處理裝置等可以經由LAN、WAN等的網絡而連接。特別地，WAN的使用允許實現遠程病理學 (telepathology)、遠程診斷等。在以上所述的示例性實施方式中，圖像金字塔結構被用作
21有效改變顯示範圍的方法。然而，可以僅使用原始圖像數據而無需使用圖像金字塔結構來 改變顯示範圍。另外，例如，可以只使用一張圖像數據來代替多片。在以上所述的示例性實施方式中，圖像處理單元假定為CPU，但其不限於此。圖像 處理單元例如可以為三維圖形處理模塊。應當理解的是，本文中所述的優選示例性實施方式的各種改變和修改對於本領域 技術人員是顯而易見的。在不背離精神和範圍並且不減少其預期優點的前提下，可以進行 這些改變和修改。因此，這些改變和修改旨在由所附權利要求所覆蓋。
權利要求
1.一種信息處理裝置，包括 處理器；顯示設備，可操作地連接至所述處理器； 輸入設備，可操作地連接至所述處理器；以及存儲設備，可操作地連接至所述處理器，所述存儲設備存儲使所述處理器與所述顯示 設備、所述輸入設備和所述存儲設備協作以執行以下處理的指令，以(a)顯示與第一觀察對象物相關聯的第一圖像，所述第一圖像具有第一顯示範圍；(b)顯示與第二觀察對象物相關聯的第二圖像，所述第二圖像具有第二顯示範圍；(c)能夠使用戶改變所述第一顯示範圍；以及(d)響應於所述第一顯示範圍的改變，同時改變所述第二顯示範圍。
2.根據權利要求1所述的信息處理裝置，其中，所述第一觀察對象物與所述第二觀察 對象物不同。
3.根據權利要求1所述的信息處理裝置，其中(a)所述第一圖像對應於所述觀察對象物的第一切片；以及(b)所述第二圖像對應於所述觀察對象物的不同的第二切片。
4.根據權利要求1所述的信息處理裝置，其中(a)所述第一圖像具有第一解析度；以及(b)所述第二圖像具有不同的第二解析度。
5.根據權利要求1所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使得 所述處理器(a)使所述用戶能夠將所述第一顯示範圍改變為第三顯示範圍；以及(b)響應於所述第一顯示範圍的改變，同時將所述第二顯示範圍改變為第四顯示範圍。
6.根據權利要求1所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使所 述處理器(a)使所述用戶能夠改變所述第二顯示範圍；以及(b)響應於所述第二顯示範圍的改變，使所述第一顯示範圍保持不變。
7.根據權利要求1所述的信息處理裝置，其中(a)所述第一圖像的至少一部分被改變為第一顏色；以及(b)所述第二圖像的至少一部分被改變為不同的第二顏色。
8.根據權利要求1所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使所 述處理器與所述輸入設備協作以使得所述用戶能夠(a)對於所述第一圖像，輸入第一注釋；以及(b)對於所述第二圖像，輸入不同的第二注釋。
9.根據權利要求1所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使所 述處理器通過顯示覆蓋所述第一圖像的所述第三圖像而形成疊加圖像，所述第三圖像(a)具有第五顯示範圍；(b)與所述第二觀察對象物相關聯；以及(c)對應於所述第二圖像。
10.根據權利要求9所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使所述處理器與所述輸入設備協作，以(a)使所述用戶能夠同時改變所述第一顯示範圍和第五顯示範圍；以及(b)響應於所述第一顯示範圍和所述第五顯示範圍的改變，同時改變所述第二顯示範圍。
11.根據權利要求9所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使 所述處理器與所述輸入設備協作，以(a)使所述用戶能夠改變所述第二顯示範圍；以及(b)響應於所述第二顯示範圍的改變(i)同時改變所述第五顯示範圍；以及( )使所述第一顯示範圍保持不變。
12.根據權利要求9所述的信息處理裝置，其中(a)所述第一圖像被設置為第一半透明圖像，所述第一圖像具有第一部分；(b)所述第三圖像被設置為第二半透明圖像，所述第三圖像具有第二部分；以及(c)所述指令在被所述處理器執行時，使所述處理器同時顯示所述第一部分和所述第 二部分，使得可以在視覺上識別出所述第一部分和所述第二部分中的每一個。
13.根據權利要求1所述的信息處理裝置，其中，所述指令在被所述處理器執行時，使 所述處理器與所述輸入設備協作，以(a)對於顯示的所述第一圖像，使所述用戶能夠設置第一控制點；(b)對於顯示的所述第二圖像，使所述用戶能夠設置第二控制點，其中，所述第二控制 點對應於所述第一控制點；以及(c)通過執行仿射變換使所述第一控制點的第一形狀與所述第二控制點的第二形狀相 一致。
14.一種操作包含指令的信息處理裝置的方法，所述方法包括(a)使顯示設備顯示與第一觀察對象物相關聯的第一圖像，所述第一圖像具有第一顯 示範圍；(b)使所述顯示設備顯示與第二觀察對象物相關聯的第二圖像，所述第二圖像具有第 二顯示範圍；(c)使處理器執行所述指令以與輸入設備協作，從而使所述用戶能夠改變所述第一顯 示範圍；以及(d)響應於所述第一顯示範圍的改變，使所述處理器執行所述指令，以同時改變所述第 二顯示範圍。
15.根據權利要求14所述的方法，所述方法包括(a)使所述處理器執行所述指令以與所述輸入設備協作，從而使所述用戶能夠將所述 第一顯示範圍改變為第三顯示範圍；以及(b)響應於所述第一顯示範圍的改變，使所述處理器執行所述指令，以同時將所述第二 顯示範圍改變為第四顯示範圍。
16.根據權利要求14所述的方法，所述方法包括(a)使所述處理器執行所述指令以與所述輸入設備協作，從而使所述用戶能夠改變所 述第二顯示範圍；以及(b)響應於所述第二顯示範圍的改變，使所述處理器執行所述指令，以使所述第一顯示 範圍保持不變。
17.根據權利要求14所述的方法，所述方法包括(a)使所述處理器執行所述指令，以將所述第一圖像的至少一部分改變為第一顏色；以及(b)使所述處理器執行所述指令，以將所述第二圖像的至少一部分改變為不同的第二顏色。
18.根據權利要求14所述的方法，包括使所述處理器執行所述指令，以操作所述顯示 設備，從而通過顯示覆蓋所述第一圖像的第三圖像來形成疊加圖像，所述第三圖像(a)具有第五顯示範圍；(b)與所述第二觀察對象物相關聯；以及(c)對應於所述第二圖像。
19.根據權利要求18所述的方法，包括(a)使所述處理器執行所述指令以與所述輸入設備協作，從而使所述用戶能夠同時改 變所述第一顯示範圍和所述第五顯示範圍；以及(d)響應於所述第一顯示範圍和所述第五顯示範圍的改變，使所述處理器執行所述指 令以與所述顯示設備協作，從而同時改變所述第二顯示範圍。
20.根據權利要求18所述的方法，包括(a)使所述處理器執行所述指令以與所述輸入設備協作，從而使所述用戶能夠改變所 述第二顯示範圍；以及(b)響應於所述第二顯示範圍的改變(i)使所述處理器執行所述指令，以同時改變所述第五顯示範圍；以及 ( )使所述處理器執行所述指令，以使所述第一顯示範圍保持不變。
21.根據權利要求18所述的方法，包括(a)使所述處理器執行所述指令，以將所述第一圖像設置為第一半透明圖像，所述第一 圖像具有第一部分；(b)使所述處理器執行所述指令，以將所述第三圖像設置為第二半透明圖像，所述第三 圖像具有第二部分；以及(c)使所述處理器執行所述指令以與所述顯示設備協作，從而同時顯示所述第一部分 和所述第二部分，使得可以在視覺上識別出所述第一部分和所述第二部分中的每一個。
22.—種存儲指令的計算機可讀介質，所述指令被構造為使信息處理裝置執行以下處理(a)顯示與第一觀察對象物相關聯的第一圖像，所述第一圖像具有第一顯示範圍；(b)顯示與第二觀察對象物相關聯的第二圖像，所述第二圖像具有第二顯示範圍；(c)使用戶能夠改變所述第一顯示範圍；以及(d)響應於所述第一顯示範圍的改變，同時改變所述第二顯示範圍。
全文摘要
本發明公開了信息處理裝置、信息處理方法以及計算機可讀介質。在一個示例性實施方式中，信息處理裝置包括顯示與第一觀察對象物相關聯的第一圖像的顯示設備。第一圖像具有第一顯示範圍。在一個示例性實施方式中，顯示設備顯示與第二觀察對象物相關聯的第二圖像。第二圖像具有第二顯示範圍。在一個示例性實施方式中，信息處理裝置使用戶能夠改變第一圖像的第一顯示範圍。響應於第一顯示範圍的改變，信息處理裝置同時改變第二圖像的第二顯示範圍。
文檔編號G06T1/00GK102129505SQ20101055732
公開日2011年7月20日 申請日期2010年11月23日 優先權日2009年11月30日
發明者重篤 吉岡, 直樹 田上, 能宏 脅田 申請人:索尼公司