一種反饋式近似圖像檢索系統和方法
2023-11-02 19:22:32 1
專利名稱：一種反饋式近似圖像檢索系統和方法
技術領域：
本發明涉及一種圖像檢索系統和方法，尤其是涉及一種反饋式近似圖像檢索系統 和方法。
背景技術：
圖像檢索是指對數字圖像庫中的圖像進行查詢的技術，其目標是使檢索到的圖像 能滿足用戶的意圖。檢索圖像時，可以輸入描繪圖像內容的文字，而根據這些文字進行檢 索；而也可以輸入某一圖像，查找與之近似的圖像。本發明涉及輸入圖像，來查找近似圖像 的檢索。而圖像庫中的圖像如果進行了標註，則會極大地提高檢索的準確率。但是標註圖 像是一項相當費時費力的工作，如果圖像庫過於龐大，則難以對所有的圖像進行標註。因此，有人提出了一種反饋式圖像檢索方法，通過學習反饋模式，對部分圖像進行 標註，並不斷提高檢索精度。本發明即提供了一種反饋式圖像檢索模式，能夠有效提高檢索精度，不斷完善檢
索結果。
發明內容
本發明針對現有技術的弊端，提供一種反饋式近似圖像檢索系統，其中包括圖像 存儲裝置，其中包括標註圖像存儲部和未標註圖像存儲部；待檢索圖像輸入模塊，用於輸入 待檢索圖像；檢索模塊，其根據待檢索圖像輸入模塊中輸入的待檢索圖像，在標註圖像存儲 部中檢索出10項相關圖像；反饋模塊，將所述10項相關圖像反饋至檢索模塊，並根據這些 相關圖像在未標註圖像存儲部中檢索出未標註相關圖像；顯示模塊，其顯示在未標註圖像 存儲部中檢索出的未標註相關圖像；分級標註模塊，讓用戶對所顯示的檢索出的未標註相 關圖像分兩級進行標註，即將所述未標註相關圖像分別標註成與實際相關的正樣本圖像和 與實際不相關的負樣本圖像兩個級別，並將標註後的圖像移送至標註圖像存儲部；其中，當 所標註的與實際不相關的負樣本圖像達到30項時，停止標註；將所述30項負樣本圖像通過 反饋模塊反饋至檢索模塊，以在未標註圖像存儲部中檢索出與所述30項負樣本圖像相關 的未標註圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中；最終檢索 整理模塊，利用檢索模塊在最終的標註圖像存儲部和未標註圖像存儲部中進行待檢索圖像 的檢索，並分別在顯示模塊中輸出在標註圖像存儲部和未標註圖像存儲部中檢索出的最終 檢索結果。優選的是，本發明所述的反饋式近似圖像檢索系統中，所述圖像存儲裝置為硬碟 或網絡伺服器。優選的是，本發明所述的反饋式近似圖像檢索系統中，所述顯示模塊為液晶顯示屏。優選的是，本發明所述的反饋式近似圖像檢索系統中，還包括選擇標註模塊，可供
4用戶選擇是否對顯示模塊中顯示的最終檢索結果進行再次標註。本發明還提供了一種反饋式圖像檢索方法，其中包括以下步驟待檢索圖像輸入 步驟，用於向待檢索圖像輸入模塊中輸入待檢索圖像；一次檢索步驟，通過檢索模塊根據 待檢索圖像輸入模塊中輸入的待檢索圖像，在圖像存儲裝置中的標註圖像存儲部中檢索出 10項相關圖像；一次反饋步驟，將所述10項相關圖像通過反饋模塊反饋至檢索模塊，並根 據這些相關圖像在圖像存儲裝置中的未標註圖像存儲部中檢索出未標註相關圖像；顯示步 驟，通過顯示模塊顯示在未標註圖像存儲部中檢索出的未標註相關圖像；標註步驟，通過分 級標註模塊讓用戶對顯示步驟顯示的檢索出的未標註相關圖像分兩級進行標註，即將所述 未標註相關圖像分別標註成與實際相關的正樣本圖像和與實際不相關的負樣本圖像兩個 級別，並將標註後的圖像移送至標註圖像存儲部；其中，當所標註的與實際不相關的負樣本 圖像達到30項時，停止標註；二次反饋步驟，將所述30項負樣本圖像通過反饋模塊反饋至 檢索模塊；二次檢索步驟，在未標註圖像存儲部中檢索出與所述30項負樣本圖像相關的未 標註圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中；檢索結果整理 步驟，利用檢索模塊在最終的標註圖像存儲部和未標註圖像存儲部中進行待檢索圖像的檢 索，並分別在顯示模塊中輸出在標註圖像存儲部和未標註圖像存儲部中檢索出的最終檢索 結果。優選的是，本發明所述的反饋式圖像檢索方法中，所述圖像存儲裝置為硬碟或網 絡伺服器。優選的是，本發明所述的反饋式圖像檢索方法中，所述顯示模塊為液晶顯示屏。優選的是，本發明所述的反饋式圖像檢索方法中，在所述檢索結果整理步驟之後， 還可以包括選擇標註步驟，其通過選擇標註模塊可供用戶選擇是否對顯示模塊中顯示的最 終檢索結果進行再次標註。本發明的反饋式近似圖像檢索系統和方法通過兩次檢索和兩次反饋能夠提高檢 索精度，並不斷擴充圖像庫中的標註圖像。
圖1為本發明的反饋式近似圖像檢索系統的結構模塊圖；圖2為本發明的反饋式圖像檢索方法的流程圖。
具體實施例方式下面結合附圖對本實用新型做進一步的詳細說明，以令本領域技術人員參照說明 書文字能夠據以實施。如圖1所示，本發明公開了一種反饋式近似圖像檢索系統，其中包括圖像存儲裝 置，其中包括標註圖像存儲部和未標註圖像存儲部。本發明既可以實現本地硬碟圖像檢索， 又可以實現網絡圖像檢索。因此，圖像既可以存儲在本地硬碟中，也可以存儲在外部伺服器 中。反饋式近似圖像檢索系統中還包括待檢索圖像輸入模塊，用於輸入待檢索圖像。 待檢索圖像可以通過U盤讀取輸入，也可以通過外部畫圖工具畫圖輸入，也可以通過截取 部分圖像而輸入。
反饋式近似圖像檢索系統中還包括檢索模塊，其根據待檢索圖像輸入模塊中輸入 的待檢索圖像，在標註圖像存儲部中檢索出10項相關圖像。在標註圖像存儲部中檢索出的 10項圖像具有相當高的匹配率，因此，通常可以直接採用。但是如果一旦其中存在非匹配圖 像，用戶也可以通過人工的方式刪除。而最終形成完全匹配的10項圖像。反饋式近似圖像檢索系統中還包括反饋模塊，將所述10項相關圖像反饋至檢索 模塊，並根據這些相關圖像在未標註圖像存儲部中檢索出未標註相關圖像。這樣能夠擴大 檢索範圍。反饋式近似圖像檢索系統中還包括顯示模塊，其顯示在未標註圖像存儲部中檢索 出的未標註相關圖像。並且也可以顯示每一次的檢索結果，例如，顯示在標註圖像存儲部中 檢索出10項相關圖像，這樣才有利於用戶通過人工方式刪除不匹配圖像。反饋式近似圖像檢索系統中還包括分級標註模塊，讓用戶對所顯示的檢索出的未 標註相關圖像分兩級進行標註，即將所述未標註相關圖像分別標註成與實際相關的正樣本 圖像和與實際不相關的負樣本圖像兩個級別，並將標註後的圖像移送至標註圖像存儲部； 其中，當所標註的與實際不相關的負樣本圖像達到30項時，停止標註；將所述30項負樣本 圖像通過反饋模塊反饋至檢索模塊，以在未標註圖像存儲部中檢索出與所述30項負樣本 圖像相關的未標註圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中。 也就是說，用戶無需對所有檢索出的未標註圖像都進行標註，只要標註至負樣本圖像達到 30項即可，對其餘的檢索圖像不再進行標註，以免過分增加用戶的標註梁。通過反饋負樣本 圖像，自動對一些圖像進行標註，以節約人力標註成本。反饋式近似圖像檢索系統中還包括最終檢索整理模塊，利用檢索模塊在最終的標 注圖像存儲部和未標註圖像存儲部中進行待檢索圖像的檢索，並分別在顯示模塊中輸出在 標註圖像存儲部和未標註圖像存儲部中檢索出的最終檢索結果。所述的反饋式近似圖像檢索系統中，所述圖像存儲裝置為硬碟或網絡伺服器。硬 盤可以實現本地檢索，網絡伺服器可以實現網絡檢索。也可以是其它存儲裝置，例如U盤， 網盤等。所述的反饋式近似圖像檢索系統中，所述顯示模塊為液晶顯示屏。也可以是其它 屏幕，任何能夠實現人眼可視的顯示功能的顯示屏幕均可。所述的反饋式近似圖像檢索系統中，還包括選擇標註模塊，可供用戶選擇是否對 顯示模塊中顯示的最終檢索結果進行再次標註。如果用戶發現在最終檢索結果中，存在明 顯不匹配的圖像，可以選擇是否進行標註。本發明還提供了一種反饋式圖像檢索方法，其中包括以下步驟待檢索圖像輸入 步驟，用於向待檢索圖像輸入模塊中輸入待檢索圖像；一次檢索步驟，通過檢索模塊根據 待檢索圖像輸入模塊中輸入的待檢索圖像，在圖像存儲裝置中的標註圖像存儲部中檢索出 10項相關圖像；一次反饋步驟，將所述10項相關圖像通過反饋模塊反饋至檢索模塊，並根 據這些相關圖像在圖像存儲裝置中的未標註圖像存儲部中檢索出未標註相關圖像；顯示步 驟，通過顯示模塊顯示在未標註圖像存儲部中檢索出的未標註相關圖像；標註步驟，通過分 級標註模塊讓用戶對顯示步驟顯示的檢索出的未標註相關圖像分兩級進行標註，即將所述 未標註相關圖像分別標註成與實際相關的正樣本圖像和與實際不相關的負樣本圖像兩個 級別，並將標註後的圖像移送至標註圖像存儲部；其中，當所標註的與實際不相關的負樣本
6圖像達到30項時，停止標註；二次反饋步驟，將所述30項負樣本圖像通過反饋模塊反饋至 檢索模塊；二次檢索步驟，在未標註圖像存儲部中檢索出與所述30項負樣本圖像相關的未 標註圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中；檢索結果整理 步驟，利用檢索模塊在最終的標註圖像存儲部和未標註圖像存儲部中進行待檢索圖像的檢 索，並分別在顯示模塊中輸出在標註圖像存儲部和未標註圖像存儲部中檢索出的最終檢索 結果。本發明提供的方法中通過兩次檢索和兩次反饋，使得檢索的結果日趨精準，並且 逐步提高圖像標註量，節約人力成本，使得最終的檢索結果極具參考價值。所述的反饋式圖像檢索方法中，所述圖像存儲裝置為硬碟或網絡伺服器。所述的反饋式圖像檢索方法中，所述顯示模塊為液晶顯示屏。所述的反饋式圖像檢索方法中，在所述檢索結果整理步驟之後，還可以包括選擇 標註步驟，其通過選擇標註模塊可供用戶選擇是否對顯示模塊中顯示的最終檢索結果進行 再次標註。儘管本發明的實施方案已公開如上，但其並不僅僅限於說明書和實施方式中所列 運用，它完全可以被適用於各種適合本發明的領域，對於熟悉本領域的人員而言，可容易地 實現另外的修改，因此在不背離權利要求及等同範圍所限定的一般概念下，本實用新型並 不限於特定的細節和這裡示出與描述的圖例。
權利要求
一種反饋式近似圖像檢索系統，其中包括圖像存儲裝置，其中包括標註圖像存儲部和未標註圖像存儲部；待檢索圖像輸入模塊，用於輸入待檢索圖像；檢索模塊，其根據待檢索圖像輸入模塊中輸入的待檢索圖像，在標註圖像存儲部中檢索出10項相關圖像；反饋模塊，將所述10項相關圖像反饋至檢索模塊，並根據這些相關圖像在未標註圖像存儲部中檢索出未標註相關圖像；顯示模塊，其顯示在未標註圖像存儲部中檢索出的未標註相關圖像；分級標註模塊，讓用戶對所顯示的檢索出的未標註相關圖像分兩級進行標註，即將所述未標註相關圖像分別標註成與實際相關的正樣本圖像和與實際不相關的負樣本圖像兩個級別，並將標註後的圖像移送至標註圖像存儲部；其中，當所標註的與實際不相關的負樣本圖像達到30項時，停止標註；將所述30項負樣本圖像通過反饋模塊反饋至檢索模塊，以在未標註圖像存儲部中檢索出與所述30項負樣本圖像相關的未標註圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中；最終檢索整理模塊，利用檢索模塊在最終的標註圖像存儲部和未標註圖像存儲部中進行待檢索圖像的檢索，並分別在顯示模塊中輸出在標註圖像存儲部和未標註圖像存儲部中檢索出的最終檢索結果。
2.如權利要求1所述的反饋式近似圖像檢索系統，其中，所述圖像存儲裝置為硬碟或 網絡伺服器。
3.如權利要求1所述的反饋式近似圖像檢索系統，其中，所述顯示模塊為液晶顯示屏。
4.如權利要求1所述的反饋式近似圖像檢索系統，其中還包括選擇標註模塊，可供用 戶選擇是否對顯示模塊中顯示的最終檢索結果進行再次標註。
5.一種反饋式圖像檢索方法，其中包括以下步驟待檢索圖像輸入步驟，用於向待檢索圖像輸入模塊中輸入待檢索圖像； 一次檢索步驟，通過檢索模塊根據待檢索圖像輸入模塊中輸入的待檢索圖像，在圖像 存儲裝置中的標註圖像存儲部中檢索出10項相關圖像；一次反饋步驟，將所述10項相關圖像通過反饋模塊反饋至檢索模塊，並根據這些相關 圖像在圖像存儲裝置中的未標註圖像存儲部中檢索出未標註相關圖像；顯示步驟，通過顯示模塊顯示在未標註圖像存儲部中檢索出的未標註相關圖像； 標註步驟，通過分級標註模塊讓用戶對顯示步驟顯示的檢索出的未標註相關圖像分兩 級進行標註，即將所述未標註相關圖像分別標註成與實際相關的正樣本圖像和與實際不相 關的負樣本圖像兩個級別，並將標註後的圖像移送至標註圖像存儲部；其中，當所標註的與 實際不相關的負樣本圖像達到30項時，停止標註；二次反饋步驟，將所述30項負樣本圖像通過反饋模塊反饋至檢索模塊； 二次檢索步驟，在未標註圖像存儲部中檢索出與所述30項負樣本圖像相關的未標註 圖像，將這些圖像自動標註為負樣本圖像，並移送至標註圖像存儲部中；檢索結果整理步驟，利用檢索模塊在最終的標註圖像存儲部和未標註圖像存儲部中進 行待檢索圖像的檢索，並分別在顯示模塊中輸出在標註圖像存儲部和未標註圖像存儲部中 檢索出的最終檢索結果。
6.如權利要求5所述的反饋式圖像檢索方法，其中，所述圖像存儲裝置為硬碟或網絡 伺服器。
7.如權利要求5所述的反饋式圖像檢索方法，其中，所述顯示模塊為液晶顯示屏。
8.如權利要求5所述的反饋式圖像檢索方法，其中，在所述檢索結果整理步驟之後，還 可以包括選擇標註步驟，其通過選擇標註模塊可供用戶選擇是否對顯示模塊中顯示的最終 檢索結果進行再次標註。
全文摘要
本發明公開了一種反饋式近似圖像檢索系統，其中包括圖像存儲裝置、待檢索圖像輸入模塊、檢索模塊、反饋模塊、顯示模塊、分級標註模塊、以及最終檢索整理模塊。本發明的反饋式近似圖像檢索系統通過兩次檢索和兩次反饋能夠提高檢索精度，並不斷擴充圖像庫中的標註圖像。
文檔編號G06F17/30GK101923581SQ201010279550
公開日2010年12月22日 申請日期2010年9月13日 優先權日2010年9月13日
發明者於復生, 李金祥, 殷凡, 牛麗, 王磊, 王芳, 田立炎, 陳珂 申請人:江蘇省現代企業信息化應用支撐軟體工程技術研發中心