圖像處理程序、可攜式終端及圖像處理方法

2023-05-07 00:33:31

專利名稱：圖像處理程序、可攜式終端及圖像處理方法
技術領域：
本發明是適用於使用微型數位相機或便攜電話的照相機功能對文檔(document)進行拍攝的有效技術。
背景技術：
安裝在微型數位相機、便攜電話或智慧型手機(smart phone)中的數位相機能進行數百萬像素以上的高精度攝像，其不僅能進行風景或人物等的攝像，還越來越多地用於拍攝紙制的文檔、記事本或名片等。在作為代表性智慧型手機的蘋果公司的iPhone (蘋果公司授權的AiPhone公司Cr 4 ^ >社)的註冊商標)中，眾所周知有如下幾種被稱為掃描應用的應用程式:讀入用安裝的照相機拍攝到的紙介質的表面圖像，從連續性的像素的變化識別該紙介質的邊緣(edge),將因從斜向拍攝而成為梯形狀態的邊緣校正為方形(梯形校正),從而完成如用近拍方式的文檔掃描儀讀入紙介質那樣的圖像。另一方面，作為對用如上所述的照相機拍攝到的文檔的圖像進行校正的技術，有日本特開2010-130181號公報(專利文獻I)。在該專利文獻I中，如權利要求7及段落0047所記載的那樣，公開有沿個人計算機(主體PCB)的鍵盤的兩側設置作為標記的紅線RL，並將其與拍攝圖像的畫面側邊緣的傾角作為校正參數來進行梯形校正的技術。

先行技術文獻
專利文獻專利文獻1:日本特開2010-130181號公報在所述專利文獻I中，以設置於個人計算機(主體PCB)的兩側的被斜向拍攝的紅線RL的標記為基準進行梯形校正，因此具有能夠自動地進行梯形校正的優點，但如果置於個人計算機(主體PCB)之前的文檔未放置在相對於個人計算機(主體PCB)的正確的位置，則存在無法進行正確的梯形校正的問題點。也就是說，在是稍微向斜向傾斜放置文檔(DCM)的情況下，即使對處於傾斜狀態的拍攝圖像進行梯形校正，因作為圖像而重現的文檔(DCM)發生變形，則導致給人以不協調感的圖像的可能性較高。而且，即使同時使用識別上述文檔的邊緣部分來進行梯形校正的現有技術，除了需要進行複雜的校正計算以外，若文檔被放置在與其紙張顏色同系列的機器上、或角部因裝訂器的釘而破碎或彎折，則邊緣部分的識別率變低，大多情況下無法再現正確的文檔
發明內容
本發明鑑於上述問題而提出，其目的在於提供一種不受文檔的放置方式或照相機位置的影響，且即使存在紙張的顏色或角部的破碎問題也能進行圖像修整，文檔的再現性較高的攝像技術。本發明為了解決上述問題而採用以下的方式。更詳細地說，本發明的一個方面的圖像處理系統包括:攝像對象物，在至少兩處的規定位置，具有由多值化的圖形構成的符號碼形成的定位用符號；攝像單元，用於拍攝所述攝像對象物；圖像獲取單元，從所述攝像單元拍攝到的原圖像數據中檢測所述定位用符號，將以所述定位用符號為基準計算出的規定區域識別作為第一範圍，僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取；以及圖像數據保存單元，用於保存所述圖像獲取單元獲取到的提取圖像數據。依據本發明，由於在作為攝像對象物的文檔或記事本本身設置定位用符號(符號碼)，因此不受文檔的放置方式或照相機的位置影響，且即使存在紙張的顏色或角部的破碎，也能進行圖像修整，能夠獲得再現性較高的文檔圖像。換言之，由多值化的圖形構成的符號碼是具有顯現部和非顯現部的符號碼。此外，定位用符號若存在兩處以上則能夠識別外形，若存在三處則能求出圖像的坐標。但是，優選設置頂點檢測用單元用於應對拍攝時的失真。若定位用符號存在四處，則在拍攝時，即使失真也能獲知外形，但無法獲知方向，因而優選設置定向符號。另外，在本發明的圖像處理系統中，在所述攝像對象物中也可以包括:位於所述第一範圍的規定位置的用於識別所述第一範圍的方向的定向符號、以及在所述第一範圍內或在與第一範圍不同的其他區域設置的第二範圍，在所述圖像獲取單元或圖像數據保存單元中預先存儲有核對用字符信息，所述圖像獲取單元以所述定向符號為基準識別所述第一範圍的方向，基於識別出的方向信息檢測所述第二範圍，核對在所述第二範圍描繪的圖像和所述字符信息，在識別出所述圖像是字符時，將所述字符保存作為從所述第一範圍讀取到的圖像數據的關聯信息。依據本發明，對於從第一範圍讀取的圖像數據，由於能夠將作為關聯信息而記載在第二範圍中的字符作為字符信息識別並存儲，因此能夠將該字符信息用作圖像數據的索引(index)，從而能夠提高圖像數據的檢索性。第一範圍的規定位置是指例如第一範圍的上部或定位用符號之內的其中一個。關聯信息例如是日期。另外，在本發明中，所述核對用字符信息能夠被設定為字母字符和數字中的至少任一種。通過將第二範圍中記載的字符的識別限定為字母、數字，從而能夠提高識別率，使處理高速化。此外，在本發明的圖像處理系統中，所述攝像單元也可以讀取所述攝像對象物，如果從讀取到的圖像檢測到至少三處所述定位用符號，則將該拍攝圖像轉移至所述圖像獲取單元。通過攝像單元檢測到至少三處定位用符號，從而能求出圖像的坐標，通過將拍攝圖像數據轉移至圖像處理單元，從而能夠實現自動快門。其結果是，能不用用戶的多餘操作即可在最佳定時(timing)獲取圖像數據。並且，在本發明的圖像處理系統中，攝像對象物上的所述第一範圍也可以呈矩形狀，在所述矩形的四個頂點分別配置有所述定位用符號，所述圖像獲取單元讀出預先存儲的各定位用符號間的基準距離，核對在拍攝圖像中的所述各定位用符號間的距離與所述預先存儲的各定位用符號間的基準距離是否一致，在不一致的情況下，以使拍攝的圖像中的各定位用符號的距離與所述各定位用符號間的基準距離一致的方式校正拍攝的圖像。 依據本發明，在文檔、記事本等的攝像對象物本身設置定位用符號，以該定位用符號為基準進行圖像校正(梯形校正)處理，所以與進行紙張的邊緣識別的情況相比，能不受攝像對象物的放置方式(方向、位置或其地點)影響而可靠地識別圖像數據的獲取範圍。
另外，在本發明的圖像處理系統中，所述攝像對象物的表面也可以被進行以下的印刷處理:在電子複製時、在規定的位置顯現用與其他位置不同的形狀設置的禁止符號，拍攝所述攝像對象物的所述攝像單元在拍攝圖像中識別出所述禁止符號時，不執行將所述拍攝圖像轉移至所述圖像獲取單元的處理。依據本發明，即使要通過攝像單元拍攝電子複製後的(複印的)攝像對象物，也不用進行圖像獲取單元的圖像處理，因此能夠防止非法的電子複製(複印)。另外，本發明能夠指定本發明的圖像處理系統中使用的攝像對象物。也就是說，本發明的上述圖像處理系統的攝像對象物在至少兩處規定位置具有通過由多值化的圖形構成的符號碼形成的定位用符號。根據本發明的攝像對象物，通過在至少兩個地方(例如左上和右下)設定特殊形狀的定位用符號，從而與在第一範圍記載的手寫字符等圖形清楚區分，且也易於確定該範圍。定位用符號也可使用與QR碼(商標註冊第4075066號)中所使用的相同的定位用符號。此外，在本發明的攝像對象物中，由所述多值化的圖形構成的符號碼也可以具有顯現部和非顯現部，所述非顯現部包括:背景部和潛像部，所述背景部和潛像部具有通過所述攝像單元獲得的拍攝圖像不可視的不同模式，如果電子複製該讀取對象物並印刷該複製物，則背景部和潛像部顯現的複製物以被可視的狀態重現。依據本發明，通過在定位用符號的圖形中設置通過攝像單元未被可視而利用電子複製(採用複印機的複印)可視地顯現的背景部和潛像部，從而能夠防止複製的攝像對象物的非法使用。也就是說，在對使用電子複製(採用複印機的複印)進行複製的攝像對象物進行拍攝的情況下，通過顯現定位用符號的背景部和潛像部，從而被攝像單元識別為定位用符號的圖形本身不同的形狀。因此，攝像單元不能指定定位用符號，不能夠轉移至圖像獲取單元。另外，在本發明中，也可以在除形成有定位用符號的區域外的規定區域，包括背景部及潛像部，該背景部及潛像部具有在從攝像單元獲得的拍攝圖像未可視化的不同模式，在電子複製該讀取對象物並印刷該複製物時，在背景部和潛像部顯現的禁止符號被可視化的狀態下重現。通過在規定的區域設置通過攝像單元未被可視化而利用電子複製(採用複印機的複印)可視地顯現的背景部和潛像部，從而能夠防止複製的攝像對象物的不正當使用。也就是說，當檢測出攝像單元可視地顯現的背景部和潛像部、即禁止符號時，通過不將拍攝圖像數據轉移至圖像獲取單元，從而能夠防止不正當使用。另外，本發明另一方面的圖像處理系統包括:透明薄片，在至少兩處既定位置設置有由多值化的圖形構成的符號碼形成的定位用符號，所述透明薄片被載置在作為攝像對象物的紙張上；攝像單元，用於拍攝所述攝像對象物；圖像獲取單元，從所述攝像單元隔著所述透明薄片拍攝到的紙張表面的原圖像數據檢測所述定位用符號，將以所述定位用符號為基準計算出的規定區域識別作為第一範圍，僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取；以及圖像數據保存單元，用於保存所述圖像獲取單元獲取到的提取圖像數據。另外，本發明其他方面的圖像處理系統也可以包括:兩張以上的貼片，被粘貼在作為攝像對象物的紙張上，所述貼片由定位用符號構成，所述定位用符號由多值化的圖形構成的符號碼形成；攝像單元，用於拍攝所述攝像對象物；圖像獲取單元，用於從所述攝像單元拍攝到的紙張表面的原圖像數據檢測所述貼片的定位用符號，將以所述定位用符號為基準計算出的規定區域識別作為第一範圍，僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取；以及圖像數據保存單元，用於保存所述圖像獲取單元獲取到的提取圖像數據。通過在透明薄片上配置定位用符號、或通過貼片構成定位用符號，從而即使在作為攝像對象物的文檔或記事本不具有定位用符號的情況下，也能進行圖像修整。另外，本申請也能夠指定為圖像處理方法。也就是說，在本申請其他方面的圖像處理方法中，通過攝像單元對在至少兩處規定位置具有由多值化的圖形構成的符號碼形成的定位用符號的攝像對象物的表面進行拍攝，通過圖像獲取單元處理原圖像數據，並記錄在圖像數據保存單元中，所述圖像處理方法包括:所述攝像單元以包括至少所述兩處規定位置的定位用符號的方式對所述攝像對象物進行拍攝的步驟；所述圖像獲取單元從拍攝到的原圖像數據檢測所述定位用符號，並將以所述定位用符號為基準計算出的規定區域識別作為第一範圍的步驟；僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取的步驟；以及在所述圖像數據保存單元中保存所述提取圖像數據的步驟。另外，本申請也能指定為圖像處理程序。也就是說，對於本發明其他方面的圖像處理程序，所述圖像處理程序能通過圖像處理系統執行，所述圖像處理系統通過攝像單元對在至少兩處規定位置具有由多值化的圖形構成的符號碼形成的定位用符號的攝像對象物的表面進行拍攝，通過圖像獲取單元處理原圖像數據，並記錄在圖像數據保存單元中，所述圖像處理程序使圖像處理系統能執行以下的步驟:所述攝像單元以包括至少所述兩處規定位置的定位用符號的方式對所述攝像對象物進行拍攝的步驟；所述圖像獲取單元從拍攝到的原圖像數據檢測所述定位用符號，並將以所述定位用符號為基準計算出的規定區域識別作為第一範圍的步驟；僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取的步驟；以及在所述圖像數據保存單元中保存所述提取圖像數據的步驟。另外，本發明也可以是圖像處理系統中使用的攝像對象物，在圖像處理系統中，通過攝像單元進行拍攝，用圖像獲取單元處理該圖像數據，並保存在數據保存單元中，其中，該攝像對象物包括:定位用符號，為確定所述攝像對象物的攝像範圍而被設置在至少兩處規定位置，通過由多值化的圖形構成的符號碼形成；以及第一範圍，以所述定位用符號為基準而設置在規定的位置，用於在所述圖像獲取單元進行圖像數據的提取。而且，在本發明的攝像對象物中，在所述攝像對象物上還可以設置有:定向符號，在所述第一範圍的規定位置用於識別該第一範圍的方向；以及第二範圍，所述第二範圍設置在所述第一範圍內或設置在與第一範圍不同的區域，通過所述第二範圍與所述定向符號之間的位置關係來識別所述第二範圍的方向，並且所述第二範圍由記載有用於與預先存儲在所述圖像數據保存單元中的核對用字符信息進行核對的字符。此外，本發明其他方面的圖像處理系統基於網絡，所述圖像處理系統包括:攝像對象物，在至少兩處的規定位置，具有由多值化的圖形構成的符號碼形成的定位用符號；攝像單元，用於拍攝所述攝像對象物；發送單元，用於經由網絡發送通過攝像單元拍攝到的原圖像數據；圖像獲取單元，在經由所述網絡接收原圖像數據的圖像處理伺服器中，從所述攝像單元拍攝到的原圖像數據檢測所述定位用符號，將以所述定位用符號為基準計算出的規定區域識別作為第一範圍，僅提取處於所述第一範圍的圖像數據並將其作為提取圖像數據獲取；以及圖像數據保存單元，用於保存所述圖像獲取單元獲取到的提取圖像數據。發明效果通過本發明，能夠提供一種不受文檔的放置方式或照相機位置的影響，且即使存在紙張的顏色或角部的破碎問題，也能進行圖像修整，文檔的再現性較高的攝像技術。


圖1是示出實施方式中的作為攝像對象物的記錄(memo)紙張的圖(I)。圖2是示出實施方式中的作為攝像對象物的記錄紙張的圖(2)。圖3是示出作為實施方式中的攝像對象物的記錄紙張的圖(3)。圖4是實施方式中所使用的帶照相機的智慧型手機的結構圖。圖5是在網絡上利用實施方式的情況的說明圖。圖6是示出實施方式的處理的一例流程圖。圖7是示出實施方式中的拍攝狀態、和印刷有定位標記的透明板的圖。圖8是示出作為實施方式中的攝像對象物的記錄紙張的圖(4)。圖9是示出印刷有實施方式中所使用的定位標記的貼片(seal)的圖。圖10是示出實施方式的處理的另一例流程圖。
具體實施例方式(實施方式I)基於

本發明。圖1示出本實施方式中的記錄紙張(攝像對象物)(DOC)的表面的結構。如圖1所示，該記錄(memo)紙張(DOC)由設於上部的裝訂帶(US)和紙張主體構成。也可在紙張主體的上方沿裝訂帶(US)在圖1的水平方向上設置加工線($ '> >目)(ML),以使能夠切下記錄紙張主體。在記錄紙張主體的表面，在四角附近印刷有定位用符號(Ml M4)。四個定位用符號中的左上(Ml)、左下(M2 )及右下(M3 )的定位用符號對應於本發明的由多值化的圖形構成的符號碼(symbol code)，在四角形狀的粗線形狀的線圖(顯現部)內部配置有被白紙的底色部分的區域(非顯現部)包圍的全面塗抹印刷的四角形(顯現部)。優選為了以比通用的筆記工具(鉛筆、原子筆、籤字筆)粗的線印刷該粗線形狀，而與後述的第一範圍所記錄的筆記工具的筆跡明確地區分。此外，定位用符號也可以是顏色碼(color code)。在紙張主體的右上印刷有與上述定位用符號形狀不同的定向符號(M4)。定向符號(M4)對應於本發明的由被多值化處理後的圖形構成的符號碼，其是與上述左上(Ml)、左下(M2)及右下(M3)的定位用符號不同的形狀。這樣，通過僅設四個符號之中的一個的形狀為不同的形狀，從而在用照相機(CAM)核定時，可以檢測出記錄紙張(DOC)的正方向。被上述四個定位用符號(Ml M4)包圍的區域被作為用戶能描繪手寫字符、圖形、記號、圖畫等的第一範圍(AR1)。然後，該第一範圍(ARl)被圖像讀入作為原圖像數據。
此外，在本例中，雖然將第一範圍(ARl)識別作為被四個定位用符號(Ml M4)所包圍的部分，但不一定需要配置四個定位用符號，如圖3所示，也可只在左上(M6)和右下(M7)配置。也就是說，也可將以連接左上的定位標記(M6)和右下的定位標記(M7)的線設定為對角線的矩形區域識別作為第一範圍(AR1)。另外，在上述的說明中，雖然改變四個定位用符號(Ml M4)中的右上的符號的形狀並將其作為定向符號，但該定向符號除了定位用符號(Ml M4)之外，也可如圖1、圖2的M5所示那樣印刷在其他部位。而且，也可以根據定位用符號(Ml)和定位用符號(M2)的相對位置關係識別第二範圍(AR2)。也可以將定位用符號彼此的相對位置關係取而代之地根據定位用符號和定向符號的相對位置關係來識別第二範圍(AR2)。另外，在如圖3所示的例子中，也可根據裝訂帶(US)為基準識別第二範圍(AR2)。在圖1中，在緊鄰第一範圍(ARl)的定向符號(M4)左側的區域設置有第二範圍(AR2)。該第二範圍(AR2)具有與定向符號的高度相同的高度，定向符號(M4)的左端側邊與第二範圍的右端側邊一致，因此若能夠從用照相機(CAM)拍攝到的原圖像數據檢測出定向符號(M4)，則也能檢測出第二範圍。雖在圖1中沒有詳細示出，但如圖3所示，在第二範圍以淺色印刷有由構成七段(segment)的直線片構成的記入嚮導(entry guide)。也就是說,通過用筆記工具在構成七段的記入嚮導部分上描畫，從而能夠在各段如電子計分板(electric scoreboard)的數字顯示那樣記錄O 9的數字。通過這樣設置七段記入嚮導，從而能提高記入的數字的識別率。此外，雖然以設置七段記入嚮導來簡化記入的數字的識別的情況為例進行了說明，但並不僅限於此，也可以淺色印刷每一個字符的框，使得能夠對在框內記入的數字或字母字符進行字符識別。也就是說，能夠通過用照相機(CAM)讀取記入該第二範圍(AR2)的字符(字母、數字)，並與存儲在存儲器(MEM)中的字符圖案(核對用字符信息)相比較，從而進行字符識別。如圖2所示，在紙張記事本(DOC)的定向符號(M4)的正下部分設置有禁止符號(ASl)0該禁止符號被進行不能視覺識別的印刷例如底紋印刷，其在用複印裝置等電子複製時被作為可視性禁止符號出現。此外，禁止符號只要在第一範圍(ARl)內的規定位置即可，也可以如例如圖2所示，配置在左下的定位用符號(M2)的正上方位置。另外，也可通過使底紋印刷顯現(可視化)，從而利用程序主動地識別為禁止符號。這樣，也可以在識別出在記錄紙張(DOC)上存在禁止符號的階段，中央處理裝置(CPU)基於程序中止圖像處理，在顯示器(DISP)上進行「該紙張不是標準的紙張」等顯示。接著，使用圖4對本實施方式所使用的帶照相機的智慧型手機(MP)的硬體結構進行說明。該智慧型手機(MP)是例如蘋果公司的iPhone (AiPhone公司授權的註冊商標)。在主體上設置有主頁按鈕(BTN)，作為使顯示器(DISP)上顯示的圖標或菜單回到主頁畫面、或照相機(CAM)的快門(shutter)而發揮作用。智慧型手機(MP)內部以中央處理裝置(CPU)為中心而具有主存儲器(MM)、經由總線(BUS)連接的存儲器單元(MEM)、通信接口(TIF)、照相機(CAM)、上述按鈕(BTN)、將觸摸面板(TPN)和顯不器(DISP) —體化而成的觸摸面板顯不器、以及揚聲器(SPK)。如圖5所示，通信接口(TIF)能通過無線電話線路經由基站(BS)與通用的網絡(NW)連接。另外，該通信接口(TIF)能與無線LAN的訪問點(AP)通信，能經由任一種通信方式與網絡連接。在存儲器單元(MEM)上設置有作業系統(OS)，且還設置有圖像處理應用程式(APL)、用於保存原圖像數據或字符信息的用戶數據區域(UDT)。在本實施方式中，通過中央處理裝置(CPU)經由總線(BUS)及主存儲器(麗)讀入並依次執行存儲器單元(MEM)的圖像處理應用程式(APL)，從而實現上述記錄紙張(DOC)的攝像及其圖像處理。基於圖6的處理流程說明該處理。首先，通過用戶的觸摸面板(TPN)的觸摸操作選擇/啟動本圖像處理應用程式(APL)時(步驟601)，照相機(CAM)的功能變為動作狀態，拍攝作為攝像對象物的記錄紙張(D0C)，中央處理裝置(CPU)基於程序讀入該拍攝圖像，並判斷有無在圖2中已經說明了的禁止符號(步驟603)。通過讀出在存儲器單元中記錄的作為基準的禁止符號的圖像數據並將其與來自照相機(CAM)的原圖像數據相比較，從而進行該禁止符號的判斷。這裡，在檢測出禁止符號的情況下，不進行後續處理，返回步驟602。此外，此時如上所述，也可在顯示器(DISP)上進行用於通知用戶檢測到禁止符號的「該紙張不是標準的紙張」等的顯示。在未檢測到禁止符號時，中央處理裝置(CPU)從原圖像數據找出定位用符號(步驟604)。也通過讀出在存儲器單元中記錄的作為基準的定位用符號的圖像數據並將其與來自照相機(CAM)的原圖像數據相比較，從而進行該定位用符號的檢索。在檢測到定位用符號時，將該階段中的原圖像數據保存在存儲器單元(MEM)中(步驟605)。也可從揚聲器(SPK)輸出用於通知決定採用此時的該原圖像數據的快門聲。另夕卜，即使在步驟604中未識別出定位用符號的情況下，也可通過用戶對按鈕(BTN)操作而產生快門聲(步驟611)，在存儲器單元(MEM)中保存該時刻的原圖像數據，同時繼續定位用符號的檢索(步驟612)。在這種情況下，在一定時間內未能檢測到定位用符號的情況下，也可選擇是原樣保持該原圖像數據還是返回步驟602並再次拍攝(步驟613)。在步驟605保持原圖像數據時，對定位用符號的數量進行計數(步驟606 )。這裡，在僅檢測到三個定位用符號時，根據該三個位置推斷出剩下的一個定位用符號，並虛擬地追加設定第四個定位用符號(步驟610)。在確定了全部四個定位用符號(Ml M4)時，設定彼此連接該四個定位用符號的外緣的四條假想線，將被該假想線包圍的部分作為第一範圍並進行圖像提取(步驟607)。接著，對提取圖像以使四邊的位置和距離與預先在存儲器單元中存儲的基準位置/距離相整合的方式進行梯形校正(步驟608)，將校正後的圖像作為記錄紙張(DOC)的再現圖像保持在存儲器單元(MEM)中(步驟609)。此外，在圖6中，已經對禁止符號(ASl)配置於紙張記事本(DOC)的定向符號(M4)的正下方部分、或者左下的定位用符號(M2)的正上方位置時的處理進行了說明。這裡，如圖2所示，可以通過底紋印刷在定位用符號(例如M3)的非顯現部(白底部分)設置禁止符號。另外，也可通過底紋印刷在其他的定位用符號(例如M3)的非顯現部(白底部分)設置禁止符號。通過這樣重疊印刷定位用符號(M3)和禁止符號(AS3)，從而當本記錄紙張(DOC)被複印裝置等進行電子複製時，由於該複製物的定位用符號(M3)的形狀變得不同，因此在用照相機(CAM)讀取後的圖像處理中，中央處理裝置(CPU)進行通過程序未識別作為定位用符號(M3)的處理。由此，也可不進行第一範圍的原圖像數據的處理。如上所述，在通過底紋印刷在定位用符號的非顯現部(白底部分)設置禁止符號的情況下，不需要識別禁止符號。因此，能夠通過圖10所示的處理流程進行攝像及圖像處理。圖10所示的處理在不進行圖6中的判斷有無禁止符號的處理(步驟603)的情況下就進行找出定位用符號的處理(步驟1004)這點與圖6所示的處理流程不同。此外，圖10的各步驟的標號的後兩位數字與圖6的各步驟的標號的後兩位數字對應，設後兩位數字相同的步驟進行同樣的處理。此外，在上述的處理流程中，雖然已經對以使用全部四個定位用符號進行梯形校正的情況為例進行了說明，但並不僅限於此，也可如圖3所說明的那樣，僅以左上的定位用符號(M6)和右下的定位用符號(M7)為基準執行梯形校正。在這種情況下，僅檢測步驟606中兩個定位用符號即可。另外，也可推斷剩餘的兩個定位用符號的位置並設定為虛擬定位用符號。在以上的說明中，已經說明了用智慧型手機(MP)進行全部處理的情況，但也可將一部分處理讓經由網絡(NW)連接的伺服器(SV)執行。例如，通過照相機(CAM)進行記錄紙張(DOC)的拍攝後，將原圖像數據暫時保存在存儲器單元(MEM)中，同時經由通信接口(TIF)及網絡(NW)發送給伺服器(SV)。也可在接收到上述原圖像數據的伺服器(SV)中，基於存儲在伺服器中的圖像處理程序，根據原圖像數據檢測上述定位用符號，並將以該定位用符號為基準計算出的規定區域識別作為第一範圍，僅提取處於該第一範圍的圖像數據並將其作為提取圖像數據保存在伺服器(SV)中。也可經由網絡(NW)從智慧型手機(MP)訪問保存在伺服器(SV)中的圖像數據。在以上的說明中，已經對以在記錄紙張(DOC)本身直接印刷定位用符號和定向符號的情況為例進行了說明， 但並不僅限於此，也可在透明的塑料薄片(PL)上印刷定位用符號和定向符號、或粘貼印刷好的定位用符號和定向符號的貼片，在使該塑料薄片(PL)覆蓋在記錄紙張(DOC)上的狀態下，用照相機(CAM)透過塑料薄片對記錄紙張(DOC)的表面進行拍攝。另外，如圖9所示，也可提供作為由印刷了定位用符號和定向符號的塑料膜構成的貼片(SL)，在該貼片(SL)的背面設置粘著面，並粘貼在在通用的記錄紙張和報告紙張(report paper)上。此外，在上述說明中，已經對將攝像對象物作為記錄紙張(DOC)的情況進行了說明，但也可以是A4尺寸左右的報告紙張、白紙、印刷完畢的文檔、名片或名片大小的記錄紙張等，只要能設定定位符號和定向符號則其可以是任意大小。產業上的可利用性本發明能夠用於使用照相機進行非近拍的文檔拍攝的圖像處理領域。符號說明DOC攝像對象物(記錄紙張)ARl第一範圍AR2第二範圍US裝訂帶Ml M4、M6、M7定位用符號(M4是定向符號)M5定向符號ASl AS3禁止符號MP智慧型手機CAM照相機
PL塑料薄片SL貼片CPU中央處理裝置MM主存儲器BUS總線MEM存儲器單元OS作業系統APL圖像處理程序UDT用戶數據區域TIF通信接口BTN主頁按鈕 TPN觸摸面板DISP顯不器面板SPK揚聲器BS基地站AP訪問點
權利要求
1.一種圖像處理程序，所述圖像處理程序是圖像處理系統能執行的圖像處理程序，在所述圖像處理系統中，通過攝像單元對攝像對象物進行拍攝，並通過CPU對其原圖像進行處理並註冊到圖像數據保存單元中，其中，所述攝像對象物具有由配置在至少兩處的規定位置的多值化的圖形構成的符號碼形成的定位用符號，所述圖像處理程序的特徵在於， 所述定位用符號是在紙張主體的四角附近中的至少兩處設置的至少兩種形狀的所述定位用符號，所述定位用符號具有顯現部以及非顯現部，所述顯現部由多值化的圖形構成的符號碼形成且都由與所述紙張主體的底色不同的色值構成，所述非顯現部由所述紙張主體的底色構成， 第一定位用符號的所述顯現部包括:具有直線部和角部的框狀的顯現部，兩條所述直線部分別與從所述紙張主體的角延伸的兩邊平行，所述角部由兩條所述直線部的端部彼此連接而成，第一定位用符號的所述非顯現部由被所述框狀的顯現部包圍的底色區域構成， 第二定位用符號的所述顯現部至少包括:具有直線部和角部的顯現部，兩條所述直線部分別與從所述紙張主體的角延伸的兩邊平行，所述角部由兩條所述直線部的端部彼此連接而成；以及矩形狀的顯現部，位於該具有直線部和角部的顯現部的內側，所述第二定位用符號的所述非顯現部由所述具有直線部和角部的顯現部與所述矩形狀的顯現部之間的區域構成， 所述圖像處理程序使CPU執行: 從通過所述攝像單元拍攝到的、包括至少所述兩處規定位置的定位用符號的所述攝像對象物的原圖像數據檢測所述定位用符號的步驟； 將以所述定位用符號為基準計算出的規定區域識別作為第一範圍的步驟； 僅提取處於所述第一範圍的圖像數據並將其獲取作為提取圖像數據的步驟；以及 在所述圖像數據保 存單元中保存所述提取圖像數據的步驟。
2.根據權利要求1所述的圖像處理程序，其特徵在於， 在檢測所述定位用符號的步驟中，從所述原圖像數據檢測由至少兩種形狀構成的多個定位用符號， 所述圖像處理程序還使所述CPU執行:為了識別所述攝像對象物的第一範圍的方向，以與所述多個定位用符號間的位置關係一致的方式讀出預先存儲的各定位用符號的基準位置，根據該基準位置，識別第一範圍的方向。
3.根據權利要求1或2所述的圖像處理程序，其特徵在於， 所述圖像處理程序還使所述CPU執行:識別與所述第一範圍不同的第二範圍，將描繪在所述第二範圍的圖像和預先存儲在所述圖像數據保存單元中的核對用信息進行核對，在識別出相當於所述核對用信息時，將該圖像保存作為從所述第一範圍讀取到的圖像數據的關聯信息。
4.根據權利要求1至3中任一項所述的圖像處理程序，其特徵在於， 在檢測所述定位用符號的步驟中，從所述原圖像數據檢測多個定位用符號， 所述圖像處理程序還使所述CPU執行:讀出預先存儲的各位置定位用符號間的基準距離，核對所述多個定位用符號間的距離是否與所述基準距離一致，在不一致的情況下，對拍攝到的圖像進行校正，以使所述多個定位用符號間的距離與所述基準距離一致。
5.根據權利要求1至4中任一項所述的圖像處理程序，其特徵在於，在檢測所述定位用符號的步驟中，從所述原圖像數據檢測四個定位用符號， 在所述獲取步驟中，僅提取位於所述第一範圍的圖像數據，並將其獲取作為由將所述四個定位用符號的附件作為頂點的矩形構成的所述提取圖像數據。
6.根據權利要求1至4中任一項所述的圖像處理程序，其特徵在於， 在檢測定位用符號的步驟中，從所述原圖像數據檢測五個定位用符號， 在所述獲取步驟中，僅提取位於所述第一範圍的圖像數據，將其獲取作為所述提取圖像數據，在所述提取圖像數據中，是將五個定位用符號中的四個定位用符號的附近作為頂點的矩形且其他另一個定位用符號是用於定義所述攝像對象物的拍攝方向的定位用符號。
7.根據權利要求1至6中任一項所述的圖像處理程序，其特徵在於， 所述圖像處理程序使所述CPU在從拍攝到的所述攝像對象物的圖像檢測出多處所述定位用符號時，自動獲取所述提取圖像數據。
8.根據權利要求1至7中任一項所述的圖像處理程序，其特徵在於，: 所述圖像處理程序使CPU還執行將所述提取圖像數據保存在伺服器中的步驟。
9.一種可攜式終端，其特徵在於，所述可攜式終端是安裝有根據權利要求1至8中任一項所述的圖像處理程序的所述圖像處理系統。
10.一種圖像處理方法，所述圖像處理方法是圖像處理系統能執行的圖像處理方法，在所述圖像處理系統中，通過攝像單元對攝像對象物進行拍攝，並通過CPU對其原圖像進行處理並註冊到圖像數據保存單元中，其中，所述攝像對象物具有由配置在至少兩處的規定位置的多值化的圖形構成的符號碼形成的定位用符號，所述圖像處理方法的特徵在於， 所述定位用符號是在紙張主體的四角附近中的至少兩處設置的至少兩種形狀的所述定位用符號，所述定位用符號具有顯現部以及非顯現部，所述顯現部由多值化的圖形構成的符號碼形成且都由與所述紙張主體的底色不同的色值構成，所述非顯現部由所述紙張主體的底色構成， 第一定位用符號的所述顯現部包括:具有直線部和角部的框狀的顯現部，兩條所述直線部分別與從所述紙張主體的角延伸的兩邊平行，所述角部由兩條所述直線部的端部彼此連接而成，第一定位用符號的所述非顯現部由被所述框狀的顯現部包圍的底色區域構成，第二定位用符號的所述顯現部至少包括:具有直線部和角部的顯現部，兩條所述直線部分別與從所述紙張主體的角延伸的兩邊平行，所述角部由兩條所述直線部的端部彼此連接而成；以及矩形狀的顯現部，位於該具有直線部和角部的顯現部的內側，所述第二定位用符號的所述非顯現部由所述具有直線部和角部的顯現部與所述矩形狀的顯現部之間的區域構成， 在所述圖像處理方法中，所述CPU執行: 從通過所述攝像單元拍攝到的、包括至少所述兩處規定位置的定位用符號的所述攝像對象物的原圖像數據檢測所述定位用符號的步驟； 將以所述定位用符號為基準計算出的規定區域識別作為第一範圍的步驟； 僅提取處於所述第一範圍的圖像數據並將其獲取作為提取圖像數據的步驟；以及 在所述圖像數據保存單元中保存所述提取圖像數據的步驟。
全文摘要
本發明涉及圖像處理程序、可攜式終端及圖像處理方法，其中，該圖像處理程序使CPU執行從通過攝像單元拍攝到的、包括至少兩處規定位置的定位用符號的攝像對象物的原圖像數據檢測定位用符號的步驟；將以定位用符號為基準計算出的規定區域識別作為第一範圍的步驟；僅提取處於第一範圍的圖像數據並將其獲取作為提取圖像數據的步驟；以及在圖像數據保存單元中保存提取圖像數據的步驟。
文檔編號H04N9/82GK103152538SQ20131008878
公開日2013年6月12日 申請日期2011年7月13日 優先權日2010年9月21日
發明者日根洋一, 遠藤慎 申請人:株式會社錦宮事務