多層級數據存儲系統及存儲方法與流程
2023-05-30 03:04:56
本發明涉及數據存儲系統及其方法，更具體地說，涉及一種多層級數據存儲系統及存儲方法。
背景技術：
近年來，隨著公共服務的不斷升級，各個公共服務機構均建立了各自的伺服器，這些系統內部大量數據信息的堆積，對現有系統的性能和功能產生了更新、更高的需求。原有的基於基層應用的信息系統由於分頭立項，分頭建設等原因導致各業務系統應用出現一系列問題，主要表現在以下幾方面：
1、系統開放性較差，數據共享不充分。
2、系統基礎信息採集缺乏統一標準，系統通用性差。
3、當前派出所綜合信息管理系統運行效率較差民警工作效率有待提高。
4、系統使用智能化有待提高
5、系統建設缺乏可持續性，擴展性差。
在上述問題中，數據存儲的問題是關鍵，尤其是對於公共服務部門而言，其數據量大、信息複雜、數據凌亂是一個通病。因此，對現有的業務數據信息進行梳理整合，進一步改善和提升公共服務部門的行政管理和服務公眾的能力已成迫切需求。
技術實現要素：
針對現有技術中存在的多個問題，本發明的目的是提供一種多層級數據存儲系統及存儲方法。
為實現上述目的，本發明採用如下技術方案：
一種多層級數據存儲系統，包括數據接口、數據檢索層、數據整理層、數據關聯層、數據分配層。其中，數據接口從外部接收格式化數據；數據檢索層在數據存儲系統中檢索格式化數據與已存儲數據的匹配性；數據整理層判斷格式化數據的類型，並將格式化數據分類，形成至少一個分類子數據；數據關聯層將分類子數據進行內部關聯以及外部關聯；數據分配層分別對分類子數據寫入匹配信息，並分別進行存儲。
進一步地，還包括格式化單元。格式化單元將輸入數據進行轉碼，轉換成數據接口支持的數據類型，並將格式化後的數據傳輸至數據接口。
進一步地，數據檢索層將格式化數據與已存儲數據的匹配信息進行比較。若格式化數據與已存儲數據具備匹配性，則數據整理層按照已存儲數據的分類方式對格式化數據進行分類；若格式化數據與已存儲數據不具備匹配性，則數據整理層按照數據類型對格式化數據進行分類。
進一步地，內部關聯為在屬於同一格式化數據的多個分類子數據建立匹配信息。外部關聯為根據數據檢索層的檢索結果，將每一個分類子數據與同類型的已存儲數據建立匹配信息。
為實現上述目的，本發明還採用如下技術方案：
一種多層級數據存儲方法，包括以下步驟：步驟一，從外部接收格式化數據；步驟二，在數據存儲系統中檢索格式化數據與已存儲數據的匹配性；步驟三，判斷格式化數據的類型，並將格式化數據分類，形成至少一個分類子數據；步驟四，將分類子數據進行內部關聯以及外部關聯；步驟五，對分類子數據寫入匹配信息，並分別進行存儲。
進一步地，步驟一之前，先將輸入數據進行轉碼，轉換成特定格式的數據。
進一步地，步驟二將格式化數據與已存儲數據的匹配信息進行比較。若格式化數據與已存儲數據具備匹配性，則步驟三按照已存儲數據的分類方式對格式化數據進行分類。若格式化數據與已存儲數據不具備匹配性，則步驟三按照數據類型對格式化數據進行分類。
進一步地，內部關聯為在屬於同一格式化數據的多個分類子數據建立匹配信息。外部關聯為根據數據檢索層的檢索結果，將每一個分類子數據與同類型的已存儲數據建立匹配信息。
在上述技術方案中，本發明的多層級數據存儲系統及存儲方法建立了多個層級的數據處理，在存儲之前可以對數據進行分類處理，不僅提高了存儲能力，還對數據進行了關聯，改善了數據結構。
附圖說明
圖1是本發明多層級數據存儲系統的結構示意圖；
圖2是本發明多層級數據存儲方法的流程圖。
具體實施方式
下面結合附圖和實施例進一步說明本發明的技術方案。
參照圖1，本發明首先公開一種多層級數據存儲系統，該系統包括格式化單元1、數據接口2、數據檢索層3、數據整理層4、數據關聯層5、數據分配層6。上述各層按照特定步驟進行數據處理及存儲，如圖2所示：
S1：格式化單元1將輸入數據進行轉碼，轉換成數據接口2支持的數據類型，並將格式化後的數據傳輸至數據接口2。輸入數據的格式是多樣的，並且可能的輸入包括文本、頁面、圖像、視頻等。這些文件各有各的格式，因此格式化單元1首先根據文件格式判斷文件類型。此外，格式化單元1預設每一種輸入的標準格式，並將其他的同類型格式轉化為標準格式。
S2：數據接口2從外部接收格式化數據。
S3：數據檢索層3在數據存儲系統中檢索格式化數據與已存儲數據的匹配性，並將格式化數據與已存儲數據的匹配信息進行比較。
每一個已存儲的數據均帶有匹配信息欄位。在格式化數據進入到數據檢索層3時，數據檢索層3根據格式化數據中的標籤信息判斷該格式化數據是否與已存儲的數據相匹配。換句話說，信息的匹配度決定了新輸入的格式化數據是否是原有業務事件的關聯數據。
S4：數據整理層4判斷格式化數據的類型，並將格式化數據分類，形成至少一個分類子數據。若格式化數據與已存儲數據具備匹配性，則數據整理層4按照已存儲數據的分類方式對格式化數據進行分類。若格式化數據與已存儲數據不具備匹配性，則數據整理層4按照數據類型對格式化數據進行分類。
S5：數據關聯層5將分類子數據進行內部關聯以及外部關聯。
內部關聯為在屬於同一格式化數據的多個分類子數據建立匹配信息。例如對於同一個業務事件，數據整理層4將該業務事件分割成2個文本、1個視頻，則該業務事件具有了3個分類子數據。此時，數據關聯層5首先將這3個分類子數據進行關聯，表明其屬於同一個業務事件的屬性。
外部關聯為根據數據檢索層3的檢索結果，將每一個分類子數據與同類型的已存儲數據建立匹配信息。在內部關聯之後，數據關聯層5首先將上述的2個文本與數據分配層6中的文本數據進行關聯，表明其屬於同一類文件。此外，根據該業務事件的屬性，該2個文本文件還可以有選擇性地與數據分配層6中的部分文本文件進行進一步的關聯，表明該業務事件與以往的業務事件具有相同的屬性。同理，將視頻數據與數據分配層6中的視頻數據進行關聯。
S6：數據分配層6分別對分類子數據寫入匹配信息，並分別進行存儲。
數據分配層6是由多個傳統的資料庫構成，其作用是按照分類分別存儲分類子數據，並且在存儲時對每一個分類子數據寫入匹配信息欄位，從而後續不斷有數據從數據接口2進入時，數據檢索層3能夠利用這些匹配信息欄位進行數據匹配。
本技術領域中的普通技術人員應當認識到，以上的實施例僅是用來說明本發明，而並非用作為對本發明的限定，只要在本發明的實質精神範圍內，對以上所述實施例的變化、變型都將落在本發明的權利要求書範圍內。