多維數據分析模型生成系統及方法

2023-08-13 06:57:46

專利名稱：多維數據分析模型生成系統及方法
技術領域：
本發明涉及數據分析模型生成系統及方法，更具體地，涉及多維數據分析模型生成系統及方法。
背景技術：
目前，隨著資料庫應用的日益廣泛以及不同領域的業務種類的日益豐富，基於資料庫生成多維數據分析模型越來越重要。通常，現有的基於資料庫的多維數據分析模型生成方法包括如下兩個階段(I)首先設計資料庫，使用商業可獲得的數據抽取轉換工具(例如Cognos Framework Manager)將資料庫中的表和欄位定義直接抽取出來，構建面向主題的業務視圖，以便直接生成期望的數據分析模型。(2)其次，開發面向主題的若干個多維分析模型；然後採用同樣的方法開發其它的多維分析模型(即「螺旋式」的開發過程)然而，由於隨著業務種類的日益豐富，多維分析需求層出不窮，但是通常所述多個多維分析需求包含大量的相同或相似的維度和度量。因此，上述現有的方案存在如下問題
(I)毎次「螺旋式」的開發過程均是ー個全新的開發過程，因而不能利用之前已經設計好的數據分析模型。即數據分析模型的重複利用率不高；(2)每個迭代開發過程中，由於難於避免的一些客觀原因(例如開發團隊成員發生變化)，開發出來模型可能差異甚大，即難於獲得統ー的維度和/或度量的定義和表示方法，從而難於確保數據定義和表示的一致性；(3)為了確保各個多維數據分析模型中相同的維度和度量在名稱、屬性和計算方法等特徵上的一致性，只能通過人工的方式逐一確認，並且如果在後續的迭代開發過程中某個維度的統計方式發生變化，也只能通過人工的方式逐一修改，因此，這導致一致性的維護變得非常困難。因此，存在如下需求提供ー種可以確保一致性並且能夠提高數據分析模型的復用率的多維數據分析模型生成系統及方法。

發明內容
為了解決上述現有技術方案所存在的缺陷，本發明提出了ー種多維數據分析模型生成系統及方法。本發明的目的是通過以下技術方案實現的ー種多維數據分析模型生成系統，所述多維數據分析模型生成系統包括資料庫，所述資料庫用於存儲表定義和數據；數據抽取轉換裝置，所述數據抽取轉換裝置用於根據所述資料庫中的表定義構建用於特定分析模型的維度和度量；公共標準模型庫，所述公共標準模型庫用於存儲對應於所述用於特定分析模型的維度和度量的對象； 模型分析裝置，所述模型分析裝置用於根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。在上面所公開的方案中，優選地，所述用於特定分析模型的維度和度量來自於所述資料庫中的相同表和/或不同表。在上面所公開的方案中，優選地，所述相同表和/或不同表均包含各自的業務邏輯。在上面所公開的方案中，優選地，所述模型分析裝置進ー步包括數據抽取模塊，所述數據抽取模塊用於抽取並解析所述 公共標準模型庫中的對象並直接輸出為目標多維數據分析模型。在上面所公開的方案中，優選地，所述數據抽取模塊進一歩用於將所述抽取和解析出的對象提供給其它模塊以便進行後續處理。在上面所公開的方案中，優選地，所述公共標準模型庫是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。在上面所公開的方案中，優選地，所述數據抽取模塊還用於將所述抽取和解析出的對象組合以生成中間模型，其中，所述中間模型包括目標多維數據分析模型所需的維度
和度量。在上面所公開的方案中，優選地，所述模型分析裝置進ー步包括數據同步模塊，所述數據同步模塊用於將所述中間模型與已有的多維數據分析模型相比較，以確保所述已有的多維數據分析模型的維度和度量與所述中間模型的維度和度量相一致。在上面所公開的方案中，優選地，所述數據抽取轉換裝置利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫。在上面所公開的方案中，優選地，如果待生成的多維數據分析模型包含與所述公共標準模型庫相同或相似的維度和度量，則可以通過所述公共標準模型庫直接批量生成；如果待生成的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則通過所述數據抽取轉換裝置在所述公共標準模型庫中增加相應的維度和度量，隨後根據所述公共標準模型庫批量生成所述待生成的多維數據分析模型。本發明的目的也可以通過以下技術方案實現ー種多維數據分析模型生成方法，所述多維數據分析模型生成方法包括如下步驟(Al)數據抽取轉換裝置從資料庫中抽取表定義和數據；(A2)所述數據抽取轉換裝置根據所述抽取的表定義和數據生成公共標準模型庫；(A3)模型分析裝置根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。在上面所公開的方案中，優選地，所述數據抽取轉換裝置根據所述資料庫中的表定義和數據構建用於特定分析模型的維度和度量。在上面所公開的方案中，優選地，所述用於特定分析模型的維度和度量來自於所述資料庫中的相同表和/或不同表。在上面所公開的方案中，優選地，所述相同表和/或不同表均包含各自的業務邏輯。在上面所公開的方案中，優選地，所述步驟(A3)進ー步包括(BI)所述模型分析裝置抽取並解析所述公共標準模型庫中的對象並直接輸出為目標多維數據分析模型。在上面所公開的方案中，優選地，所述步驟(A3)進ー步包括所述模型分析裝置將所述抽取和解析出的對象提供給其它模塊以便進行後續處理。在上面所公開的方案中，優選地，所述公共標準模型庫是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。在上面所公開的方案中，優選地，所述步驟(A3)進ー步包括 (B2)所述模型分析裝置將所述抽取和解析出的對象組合以生成中間模型，其中，所述中間模型包括目標多維數據分析模型所需的維度和度量。在上面所公開的方案中，優選地，所述多維數據分析模型生成方法還包括(A4)所述模型分析裝置將所述中間模型與已有的多維數據分析模型相比較，以確保所述中間模型的維度和度量與所述已有的多維數據分析模型的維度和度量相一致。在上面所公開的方案中，優選地，所述數據抽取轉換裝置利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫。在上面所公開的方案中，優選地，如果待生成的多維數據分析模型包含與所述公共標準模型庫相同或相似的維度和度量，則可以通過所述公共標準模型庫直接批量生成；如果待生成的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則在所述公共標準模型庫中增加相應的維度和度量，隨後根據所述公共標準模型庫批量生成所述待生成的多維數據分析模型。本發明所公開的多維數據分析模型生成系統及方法具有如下優點由於利用了各個多維數據分析模型之間的關聯性(即利用已有模型開發新模型)，故提高了多維數據分析模型的代碼復用性；可以確保數據定義和表示的一致性，從而提高了生成的多維數據分析模型的精確性。


結合附圖，本發明的技術特徵以及優點將會被本領域技術人員更好地理解，其中圖I為根據本發明的實施例的多維數據分析模型生成系統的架構圖；圖2為根據本發明的實施例的多維數據分析模型生成方法的流程圖。
具體實施例方式圖I是根據本發明的實施例的多維數據分析模型生成系統的架構圖。如圖I所示，本發明所公開的多維數據分析模型生成系統包括資料庫I、數據抽取轉換裝置2、公共標準模型庫3和模型分析裝置4。其中，所述資料庫I用於存儲表定義和數據。所述數據抽取轉換裝置2用於根據所述資料庫I中的表定義構建用於特定分析模型的維度和度量。所述公共標準模型庫3用於存儲對應於所述用於特定分析模型的維度和度量的對象。所述模型分析裝置4用於根據需求解析所述公共標準模型庫3中的對象，並將所述對象組合以生成目標多維數據分析模型。優選地，所述用於特定分析模型的維度和度量可以來自於所述資料庫中的同一張表。優選地，所述用於特定分析模型的維度和度量可以來自於所述資料庫中的不同表。其中，所述特定分析模型的維度和度量均包含各自的業務邏輯。如圖I所示，優選地，所述模型分析裝置4進ー步包括數據抽取模塊5。所述數據抽取模塊5用於抽取並解析所述公共標準模型庫3中的對象並直接輸出為目標多維數據分析模型，或者將所述抽取和解析出的對象提供給 其它模塊(例如數據同步模塊6)以便進行後續處理。示例性地，所述公共標準模型庫3是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。優選地，所述數據抽取轉換裝置2是商業可獲得的(例如CognosFrameworkManager)。優選地，所述數據抽取模塊5還用於將所述抽取和解析出的對象組合以生成中間模型。其中，所述中間模型包括目標多維數據分析模型所需的維度和度量。示例性地，如圖I所示，所述模型分析裝置4進ー步包括數據同步模塊6。所述數據同步模塊6用於將中間模型與已有的多維數據分析模型相比較，以確保所述已有的多維數據分析模型的維度和度量與所述中間模型的維度和度量相一致。由此，可以確保所述已有的多維數據分析模型的維度和度量與所述公共標準模型庫3中的維度和度量相一致。如圖I所示，本發明所公開的多維數據分析模型生成系統的基本工作原理如下所述數據抽取轉換裝置2從所述資料庫I中抽取表定義；所述數據抽取轉換裝置2根據所述抽取的表定義和數據生成公共標準模型庫3 ;所述模型分析裝置4根據需求解析所述公共標準模型庫3中的對象，並將所述對象組合以生成目標多維數據分析模型。其中，所述數據抽取轉換裝置2利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫3。在本發明所公開的多維數據分析模型生成系統中，所述公共標準模型庫3是其它多維數據分析模型的基礎，即所述公共標準模型庫3是唯一的數據輸入接ロ，從而可以實現批量生成目標多維數據分析模型。示例性地，在本發明所公開的多維數據分析模型生成系統中，當進行設計時(例如第一次「螺旋式」開發時)，首先創建公共標準模型庫，其後的設計(例如隨後的「螺旋式」開發)均以所述公共標準模型庫為基礎。如果新開發的多維數據分析模型包含與所述公共標準模型庫相同的維度和度量，則可以通過所述公共標準模型庫直接批量生成。如果新開發的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則只需在所述公共標準模型庫中增加相應的維度和度量，隨後再根據所述公共標準模型庫批量生成目標多維數據分析模型。圖2是根據本發明的實施例的多維數據分析模型生成方法的流程圖。如圖2所示，本發明所公開的多維數據分析模型生成方法包括如下步驟=(Al)數據抽取轉換裝置從資料庫中抽取表定義和數據；(A2)所述數據抽取轉換裝置根據所述抽取的表定義和數據生成公共標準模型庫；(A3)模型分析裝置根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。優選地，所述數據抽取轉換裝置根據所述資料庫中的表定義和數據構建用於特定分析模型的維度和度量。優選地，所述用於特定分析模型的維度和度量可以來自於所述資料庫中的同一張表。優選地，所述用於特定分析模型的維度和度量可以來自於所述資料庫中的不同表。其中，所述同一個表和/或不同表均包含各自的業務邏輯。如圖2所示，在本發明所公開的多維數據分析模型生成方法中，所述步驟(A3)進一歩包括(BI)所述模型分析裝置抽取並解析所述公共標準模型庫中的對象並直接輸出為目標多維數據分析模型，或者將所述抽取和解析出的對象提供給其它模塊(例如數據同步模塊6)以便進行後續處理。示例性地，所述公共標準模型庫是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。 優選地，所述數據抽取轉換裝置是商業可獲得的(例如CognosFrameworkManager)。優選地，在本發明所公開的多維數據分析模型生成方法中，所述步驟(A3)進ー步包括(B2)所述模型分析裝置將所述抽取和解析出的對象組合以生成中間模型。其中，所述中間模型包括目標多維數據分析模型所需的維度和度量。如圖2所示，優選地，本發明所公開的多維數據分析模型生成方法還包括(A4)所述模型分析裝置將所述中間模型與已有的多維數據分析模型相比較，以確保所述中間模型的維度和度量與所述已有的多維數據分析模型的維度和度量相一致。由此，可以確保所述已有的多維數據分析模型的維度和度量與所述公共標準模型庫3中的維度和度量相一致。如圖2所示，在本發明所公開的多維數據分析模型生成方法中，所述數據抽取轉換裝置利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫。在本發明所公開的多維數據分析模型生成方法中，所述公共標準模型庫是其它多維數據分析模型的基礎，即所述公共標準模型庫是唯一的數據輸入接ロ，從而可以實現批量生成目標多維數據分析模型。示例性地，如圖2所示，在本發明所公開的多維數據分析模型生成方法中，當進行設計時(例如第一次「螺旋式」開發時)，首先創建公共標準模型庫，其後的設計(例如隨後的「螺旋式」開發)均以所述公共標準模型庫為基礎。如果新開發的多維數據分析模型包含與所述公共標準模型庫相同或相似的維度和度量，則可以通過所述公共標準模型庫直接批量生成。如果新開發的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則只需在所述公共標準模型庫中增加相應的維度和度量，隨後再根據所述公共標準模型庫批量生成目標多維數據分析模型。儘管本發明是通過上述的優選實施方式進行描述的，但是其實現形式並不局限於上述的實施方式。應該認識到在不脫離本發明主g和範圍的情況下，本領域技術人員可以對本發明做出不同的變化和修改。
權利要求
1.一種多維數據分析模型生成系統，所述多維數據分析模型生成系統包括 資料庫，所述資料庫用於存儲表定義和數據； 數據抽取轉換裝置，所述數據抽取轉換裝置用於根據所述資料庫中的表定義構建用於特定分析模型的維度和度量； 公共標準模型庫，所述公共標準模型庫用於存儲對應於所述用於特定分析模型的維度和度量的對象； 模型分析裝置，所述模型分析裝置用於根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。
2.根據權利要求I所述的多維數據分析模型生成系統，其特徵在於，所述用於特定分析模型的維度和度量來自於所述資料庫中的相同表和/或不同表。
3.根據權利要求2所述的多維數據分析模型生成系統，其特徵在於，所述相同表和/或不同表均包含各自的業務邏輯。
4.根據權利要求3所述的多維數據分析模型生成系統，其特徵在於，所述模型分析裝置進一步包括數據抽取模塊，所述數據抽取模塊用於抽取並解析所述公共標準模型庫中的對象並直接輸出為目標多維數據分析模型。
5.根據權利要求4所述的多維數據分析模型生成系統，其特徵在於，所述模型分析裝置進一步包括數據同步模塊，並且所述數據抽取模塊進一步用於將所述抽取和解析出的對象提供給所述數據同步模塊以便進行後續處理。
6.根據權利要求5所述的多維數據分析模型生成系統，其特徵在於，所述公共標準模型庫是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。
7.根據權利要求6所述的多維數據分析模型生成系統，其特徵在於，所述數據抽取模塊還用於將所述抽取和解析出的對象組合以生成中間模型，其中，所述中間模型包括目標多維數據分析模型所需的維度和度量。
8.根據權利要求7所述的多維數據分析模型生成系統，其特徵在於，所述數據同步模塊用於將所述中間模型與已有的多維數據分析模型相比較，以確保所述已有的多維數據分析模型的維度和度量與所述中間模型的維度和度量相一致。
9.根據權利要求8所述的多維數據分析模型生成系統，其特徵在於，所述數據抽取轉換裝置利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫。
10.根據權利要求9所述的多維數據分析模型生成系統，其特徵在於，如果待生成的多維數據分析模型包含與所述公共標準模型庫相同或相似的維度和度量，則可以通過所述公共標準模型庫直接生成；如果待生成的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則通過所述數據抽取轉換裝置在所述公共標準模型庫中增加相應的維度和度量，隨後根據所述公共標準模型庫批量生成所述待生成的多維數據分析模型。
11.一種多維數據分析模型生成方法，所述多維數據分析模型生成方法包括如下步驟 (Al)數據抽取轉換裝置從資料庫中抽取表定義； (A2)所述數據抽取轉換裝置根據所述抽取的表定義生成公共標準模型庫；(A3)模型分析裝置根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。
12.根據權利要求11所述的多維數據分析模型生成方法，其特徵在於，所述數據抽取轉換裝置根據所述資料庫中的表定義並基於業務邏輯構建用於特定分析模型的維度和度量。
13.根據權利要求12所述的多維數據分析模型生成方法，其特徵在於，所述用於特定分析模型的維度和度量來自於所述資料庫中的相同表和/或不同表。
14.根據權利要求13所述的多維數據分析模型生成方法，其特徵在於，所述相同表和/或不同表均包含各自的業務邏輯。
15.根據權利要求14所述的多維數據分析模型生成方法，其特徵在於，所述步驟(A3)進一步包括 (BI)所述模型分析裝置抽取並解析所述公共標準模型庫中的對象並直接輸出為目標多維數據分析模型。
16.根據權利要求15所述的多維數據分析模型生成方法，其特徵在於，所述步驟(A3)進一步包括所述模型分析裝置將所述抽取和解析出的對象提供給其它模塊以便進行後續處理。
17.根據權利要求16所述的多維數據分析模型生成方法，其特徵在於，所述公共標準模型庫是結構化的模型文件，所述文件包含多個特定的對象，這些對象組合起來構成維度和指標的定義和表示。
18.根據權利要求17所述的多維數據分析模型生成方法，其特徵在於，所述步驟(A3)進一步包括 (B2)所述模型分析裝置將所述抽取和解析出的對象組合以生成中間模型，其中，所述中間模型包括目標多維數據分析模型所需的維度和度量。
19.根據權利要求18所述的多維數據分析模型生成方法，其特徵在於，所述多維數據分析模型生成方法還包括 (A4)所述模型分析裝置將所述中間模型與已有的多維數據分析模型相比較，以確保所述中間模型的維度和度量與所述已有的多維數據分析模型的維度和度量相一致。
20.根據權利要求19所述的多維數據分析模型生成方法，其特徵在於，所述數據抽取轉換裝置利用自身的相關組件設計維度和度量，同時定義每個維度和度量的名稱、屬性以及計算方法，從而生成所述公共標準模型庫。
21.根據權利要求20所述的多維數據分析模型生成方法，其特徵在於，如果待生成的多維數據分析模型包含與所述公共標準模型庫相同或相似的維度和度量，則可以通過所述公共標準模型庫直接批量生成；如果待生成的多維數據分析模型包含所述公共標準模型庫中沒有的維度和度量，則在所述公共標準模型庫中增加相應的維度和度量，隨後根據所述公共標準模型庫批量生成所述待生成的多維數據分析模型。
全文摘要
本發明提出了一種多維數據分析模型生成系統及方法。其中，所述系統包括資料庫，用於存儲表定義和數據；數據抽取轉換裝置，用於根據所述資料庫中的表定義構建用於特定分析模型的維度和度量；公共標準模型庫，用於存儲對應於所述用於特定分析模型的維度和度量的對象；模型分析裝置，用於根據需求解析所述公共標準模型庫中的對象，並將所述對象組合以生成目標多維數據分析模型。本發明所公開的多維數據分析模型生成系統及方法可以確保一致性並且能夠提高數據分析模型的復用率。
文檔編號G06F17/30GK102650995SQ201110047110
公開日2012年8月29日 申請日期2011年2月25日 優先權日2011年2月25日
發明者馮興, 吳金壇, 王亞雄, 王穎卓 申請人:中國銀聯股份有限公司