網絡電視統計分析系統的資料庫處理方法和裝置的製作方法

2024-02-20 21:13:15

專利名稱：網絡電視統計分析系統的資料庫處理方法和裝置的製作方法
技術領域：
本發明涉及網絡電視技術領域，尤其是指一種網絡電視統計分析系統的資料庫處 理方法和資料庫處理裝置。
背景技術：
IPTV(Internet Protocol Television)是指基於IP協議的電視廣播服務，一般稱 之為網絡電視，主要是指以「電視機+機頂盒」為主要終端設備，通過寬帶網絡，為寬帶用戶 提供的一種交互式電視體驗和多媒體服務的寬帶增值業務。通過使用IPTV，用戶可以點播 節目、隨意選擇自己喜歡的電視節目回看。電信運營商在大量開發應用IPTV業務時，需要對用戶使用行為、節目發布和點播 情況、系統設備性能等進行綜合的統計分析，為運營提供決策支持，而IPTV統計分析系統 正是應運營商的要求所開發的系統。IPTV統計分析系統主要包括源數據提取和預處理模板、數據入庫和加工模塊、統 計報表定製功能模塊和統計結果導出功能模塊等，其中1)源數據提取和處理模塊用於從IPTV資料庫中獲取源數據，將源數據淨化、組 合、去重、標準化和歸檔為標準數據文件；2)數據入庫和處理模塊用於將標準數據文件批量導入資料庫，實現通過預置任 務進行數據的重組和統計分析；3)統計報表定製模塊用於實現報表素材的定製，按照定製產生統計數據、統計 圖等報表素材，以及實現統計展示數據到報表文檔的數據組織和轉換；4)統計結果導出模塊用於將統計結果以圖形化和Excel方式導出，實現多個報 表的統計結果的批量導出以及大數據量統計結果的定製化導出。因此，進行IPTV統計分析，獲取準確分析結果的前提條件是從IPTV資料庫中導入 獲取準確的數據文件，然而在現有技術中，在將IPTV資料庫的系統業務數據導入到IPTV統 計分析系統資料庫時，不考慮IPTV資料庫中業務數據欄位信息被刪除的情況，使得相關信 息被刪除的業務數據導入IPTV統計分析系統的資料庫，IPTV統計分析系統基於該業務數 據進行統計分析，造成統計分析結果不準確的問題。

發明內容
本發明技術方案的目的是提供一種網絡電視統計分析系統的資料庫處理方法和 資料庫處理裝置，在更新網絡電視的統計分析資料庫時，分析所導入的數據資料，同時將相 關數據欄位已刪除的節目記錄導入統計分析資料庫，保障IPTV統計分析系統資料庫數據 的完整性，避免相關信息被刪除，造成統計分析結果不準確的問題。為實現上述發明目的，本發明一方面提供一種網絡電視統計分析系統的資料庫處 理方法，通過網絡電視的統計分析系統，將業務資料庫的數據資料導入統計分析資料庫，所 述資料庫處理方法包括
所述統計分析系統從所述業務資料庫提取數據，獲得本次提取數據；所述統計分析系統將所述本次提取數據與上次提取數據進行比較，查找沒有存在 於所述本次提取數據，但存在於所述上次提取數據中的已刪除信息記錄，其中所述上次提 取數據為上次從所述業務資料庫提取資料時的數據；所述統計分析系統添加所述已刪除信息記錄中的刪除標誌欄位，將所述已刪除信 息記錄合併至所述本次提取數據，獲得合併數據資料，並將所述合併數據資料導入所述統 計分析資料庫。優選地，上述所述的資料庫處理方法，所述統計分析系統在將所述本次提取數據 與所述上次提取數據進行比較的步驟中，還包括查找所述本次提取數據與所述上次提取數據中的相同信息記錄；所述統計分析系統在獲得所述合併數據資料的步驟之後，還包括刪除所述合併 數據資料中的所述相同信息記錄，之後將刪除所述相同信息記錄的所述合併數據資料導入 所述統計分析資料庫。優選地，上述所述的資料庫處理方法，還包括所述統計分析系統在上次從所述業 務資料庫提取資料，獲得所述上次提取數據時，在第一記錄表格保存所述上次提取數據。優選地，上述所述的資料庫處理方法，所述統計分析系統在獲得所述本次提取數 據的步驟之後，還包括在第二記錄表格保存所述本次提取數據，並同時將所述本次提取數 據拷貝至第三記錄表格。優選地，上述所述的資料庫處理方法，所述統計分析系統將所述本次提取數據與 所述上次提取數據進行比較的步驟中，將所述第一記錄表格和所述第二記錄表格中的數據 進行比較，之後將所述已刪除信息記錄合併至所述第二記錄表格中，在所述第二記錄表格 中保存所述合併數據資料。優選地，上述所述的資料庫處理方法，在將所述合併數據資料導入所述統計分析 資料庫的步驟之後，還包括清空所述第一記錄表格，將所述第三記錄表格中的數據導入所述第一記錄表格， 之後清空所述第二記錄表格和所述第三記錄表格。優選地，上述所述的資料庫處理方法，還包括所述統計分析系統擴充所述統計分析資料庫，增加所述刪除標誌欄位，所述刪除 標記欄位用於記錄所述統計分析資料庫中節目信息記錄的刪除時間。優選地，上述所述的資料庫處理方法，還包括，所述統計分系統擴充所述統計分析 資料庫，增加創建時間標誌欄位，通過所述創建時間標誌欄位記錄所述統計分析資料庫中 節目信息記錄的創建時間。本發明另一方面還提供一種網絡電視統計分析系統的資料庫處理裝置，用於將業 務資料庫的數據資料導入統計分析資料庫，所述資料庫處理裝置包括源數據提取單元，用於從所述業務資料庫提取數據，獲得本次提取數據；數據分析單元，用於將所述本次提取數據與上次提取數據進行比較，查找沒有存 在於所述本次提取數據，但存在於所述上次提取數據中的已刪除信息記錄，其中所述上次 提取數據為上次從所述業務資料庫提取資料時的數據；數據預處理單元，用於添加所述已刪除信息記錄中的刪除標誌欄位，將所述已刪除信息記錄合併至所述本次提取數據，獲得合併數據資料，並將所述合併數據資料導入所述統計分析資料庫。優選地，上述所述的資料庫處理裝置，所述數據分析單元還用於查找所述本次提 取數據與所述上次提取數據中的相同信息記錄；所述數據預處理單元還用於刪除所述合 並數據資料中的所述相同信息記錄，之後將刪除所述相同信息記錄的所述合併數據資料導 入所述統計分析資料庫。本發明上述技術方案中的至少一個具有以下的有益效果所述網絡電視統計分析系統的資料庫處理方法和資料庫處理裝置，在將IPTV業 務資料庫的數據資料導入IPTV統計分析資料庫時，通過將本次提取數據資料與上次提取 數據資料進行比較，獲取業務數據中的已刪除信息記錄，在統計分析資料庫中標記已刪除 信息記錄的刪除時間，並不真正刪除該些記錄，通過刪除時間標記來定期老化資料庫中的 記錄信息，從而保證統計分析資料庫導入數據的完整性和準確性，避免現有技術中相關記 錄信息被刪除，造成統計分析結果不準確的問題；此外，利用臨時創建的三個記錄表格，在統計分析資料庫導入數據時，只同步新增 加的節目信息記錄和標識有刪除時間的節目信息記錄，達到提高資料庫入庫效率的目的。


圖1為本發明所述資料庫處理方法的流程示意圖；圖2為本發明所述資料庫處理方法第一實施例的流程示意圖；圖3為本發明所述資料庫處理方法第二實施例的流程示意圖；圖4為本發明所述資料庫處理裝置的結構示意圖。
具體實施例方式為使本發明的目的、技術方案和優點更加清楚，下面將結合附圖及具體實施例對 本發明進行詳細描述。本發明所述網絡電視統計分析系統的資料庫處理方法和裝置，在將網絡電視 (IPTV)業務資料庫的數據資料導入網絡電視的統計分析資料庫時，通過將本次從IPTV業 務資料庫提取的源數據資料與上次從IPTV業務資料庫提取的源數據資料進行比較，獲取 本次提取數據相對於上次提取數據的已刪除信息記錄，並更新該已刪除信息記錄中的刪除 標誌欄位，標記刪除時間，之後將該已刪除信息記錄同本次提取數據一起導入分析資料庫， 在分析資料庫中並不真正刪除該些記錄，從而保證分析資料庫導入數據的完整性，以及保 證IPTV統計分析系統統計報表的正確性。圖1為本發明所述網絡電視統計分析系統的資料庫處理方法的流程示意圖。參閱 圖1，所述資料庫處理方法包括步驟S101，所述統計分析系統從IPTV業務資料庫提取數據，獲得本次提取數據；S102，所述統計分析系統將所述本次提取數據與上次提取數據進行比較，查找沒 有存在於所述本次提取數據，但存在於所述上次提取數據中的已刪除信息記錄，其中所述 上次提取數據為上次從所述業務資料庫提取資料時的數據；S103，所述統計分析系統添加所述已刪除信息記錄中的刪除標誌欄位，記錄刪除時間，將所述已刪除信息記錄合併至所述本次提取數據資料，獲得合併數據資料，並將所述合併數據資料導入所述統計分析資料庫。本發明所述資料庫處理方法，通過將本次提取數據與上次提取數據進行比較的方 法，當判斷到業務數據中相應節目記錄信息被刪除時，只在分析系統資料庫中標記刪除時 間，並不真正刪除相應節目記錄的欄位信息，通過刪除標誌欄位內記錄的刪除時間可以定 期老化資料庫中的欄位信息，從而保障IPTV統計分析系統資料庫數據的完整性和準確性， 保證IPTV統計分析系統統計出報表的正確性，為電信運營商提供正確的運營決策支持。相應地，本發明具體實施例所述網絡電視統計分析系統的IPTV分析資料庫，擴展 增加刪除標誌欄位，如為「delete_date」欄位，用於記錄相應節目信息記錄的刪除時間，以 方便用做數據的定期老化。另外，所述IPTV分析資料庫還進一步擴展增加創建時間標誌字 段，如「Create_date」欄位，用於標識相應節目信息記錄的創建時間，該創建時間從IPTV業 務資料庫提取數據時導入，以方便IPTV分析資料庫對節目信息的管理。如表1為所述IPTV 分析資料庫的數據表結構示意圖。通過在IPTV資料庫中增加如表1中的「Delete_date」和「Create_date」記錄字 段，分別存放相對應節目信息記錄的刪除時間和創建時間，用以方便IPTV分析資料庫對節 目信息進行正確地分析和管理。表 1 另外，最佳地，本發明所述資料庫處理方法，在將IPTV業務資料庫的數據資料導 入IPTV統計分析資料庫時，相對於上次導入數據資料，只同步導入新增加的節目信息記錄 和刪除標誌欄位中為非空的節目信息記錄。圖2為採用本發明所述資料庫處理方法第一實施例的流程示意圖，參閱圖2，IPTV 統計分析系統進行資料庫處理的步驟包括S201，所述統計分析系統從所述業務資料庫提取數據，獲得本次提取數據；S202，所述統計分析系統將所述本次提取數據與上次提取數據進行比較，查找存在於所述上次提取數據，但沒有存在於所述本次提取數據中的已刪除信息記錄； S203，將所述本次提取數據與上次提取數據進行比較，查找所述本次提取數據與 所述上次提取數據中的相同信息記錄；S204,更新所述已刪除信息記錄中的刪除標誌欄位，記錄刪除時間，將刪除標誌字 段為非空的所述已刪除信息記錄合併至所述本次提取數據資料中，獲得合併數據資料；S205，將所述合併數據資料中的所述相同信息記錄刪除，使所述合併數據資料中 僅保留新增加的節目信息記錄和刪除標誌欄位中為非空的節目信息記錄，最後將所述合併 數據資料導入IPTV統計分析資料庫。在本發明所述資料庫處理方法第一實施例中，對於IPTV統計分析資料庫，只同步 導入新增加的節目信息記錄和刪除標誌欄位中為非空的節目信息記錄，並非導入全部的提 取數據，由於導入數據的減少，實現資料庫入庫效率提高的技術效果。此外，本發明所述資料庫處理方法，可以採用擴充後的內容表結構分別創建第一 記錄表格、第二記錄表格和第三記錄表格，分別用於記錄上次提取數據資料、本次需要導入 IPTV統計分析資料庫的合併數據資料和本次提取數據資料。如圖3為本發明所述資料庫處理方法第二實施例中，利用臨時創建的第一記錄表 格(Tl表)、第二記錄表格(T2表)和第三記錄表格(T3表)，將IPTV業務資料庫的數據資 料導入IPTV統計分析資料庫的流程示意圖。參閱圖3，本發明所述資料庫處理方法的第二 實施例包括步驟S301，在從IPTV業務資料庫提取源數據資料之前，清空T2表；步驟S302，清空Tl表； 步驟S303，從IPTV業務資料庫提取源數據資料，將本次提取源數據資料保存至T2 表；步驟S304，將T2表中保存的源數據資料備份至T3表；步驟S305，將Tl表中保存的上次提取資料與T2表中保存的本次提取源數據資料 比較，根據表格中各節目信息記錄的「內容地址(Content ID) 」欄位，查找沒有存在於表2 中，但存在於Tl表中的已刪除信息記錄；步驟S306，在Tl表中更新該些已刪除信息記錄的刪除標誌欄位，記錄刪除時間；步驟S307，將Tl表中保存的上次提取資料與T2表中保存的本次提取源數據資料 比較，根據表格中各節目信息記錄的「內容地址(Content ID) 」欄位，查找T2表與Tl表中 的相同信息記錄；步驟S308，刪除T2表中的該些相同信息記錄；步驟S309，將Tl表中的已刪除信息記錄插入至T2表中，其中該些已刪除信息記錄 的刪除標誌欄位均為非空；步驟S310，將T2表中的數據導入至IPVT統計分析資料庫中；步驟S311，清空Tl表；步驟S312，將T3表中保存的本次提取數據備份至Tl表中，用於下次從將IPTV業 務資料庫提取源數據資料時，作比較之用。通過本發明所述資料庫處理方法的第二實施例，將IPTV業務資料庫的數據資料 導入網絡電視的統計分析資料庫時，通過將本次提取數據資料與上次提取數據資料進行比較，獲取業務數據中的已刪除信息記錄，在統計分析資料庫中標記刪除時間，並不真正刪除 該些記錄，從而保證統計分析資料庫導入數據的完整性；此外，利用臨時創建的三個記錄表 格，在統計分析資料庫導入數據時，只同步新增加的節目信息記錄和標識有刪除時間的節 目信息記錄，達到提高資料庫入庫效率的目的。本發明另一方面還提供一種網絡電視統計分析系統的資料庫處理裝置，用於將 IPTV業務資料庫的數據資料導入IPTV統計分析資料庫，如圖4，該資料庫處理裝置10包 括源數據提取單元11，用於從IPTV業務資料庫20提取數據，獲得本次提取數據；數據分析單元12，用於將所述本次提取數據與上次提取數據進行比較，查找存在 於所述上次提取數據，但沒有存在於所述本次提取數據中的已刪除信息記錄，其中所述上 次提取數據為上次從IPTV業務資料庫20提取資料時的數據；數據預處理單元13，所述統計分析系統添加所述已刪除信息記錄中的刪除標誌字 段，將所述已刪除信息記錄合併至所述本次提取數據資料，獲得合併數據資料，並將所述合 並數據資料導入IPTV統計分析資料庫30。其中，該數據分析單元12還用於查找所述本次提取數據與所述上次提取數據中 的相同信息記錄；而數據處理單元13則根據查找結果，刪除合併數據資料中的所述相同信 息記錄，使所述合併數據資料中僅保留新增加的節目信息記錄和刪除標誌欄位中為非空的 節目信息記錄，最後將所述合併數據資料導入IPTV統計分析資料庫30。另外，所述資料庫處理裝置10還包括存儲單元14，用於創建臨時的三個記錄表 格，其中在第一記錄表格保存所述上次提取數據，在第二記錄表格保存需要導入IPTV統計 分析資料庫的所述合併數據資料，在第三記錄表格保存所述本次提取數據。所述資料庫處理裝置10利用該三個記錄表格，將IPTV業務資料庫20的數據資料 導入IPTV統計分析資料庫30的方法參閱圖3所示，在此不再詳述。所述資料庫處理裝置10，在將IPTV業務資料庫20的數據資料導入IPTV統計分析 資料庫30時，對業務數據進行處理和比較，當判斷到業務數據中某些記錄信息被刪除時， 只對IPTV統計分析系統資料庫的該些記錄信息標記刪除時間，並不真正的刪除資料庫中 的該些信息，通過刪除時間標誌來定期老化資料庫中的記錄信息，採用增量更新(不刪除 記錄信息)、定期老化的策略來維護資料庫系統，保障IPTV統計分析系統資料庫數據的完 整性和準確性。此外，在統計分析資料庫導入數據時，只導入新增加的節目信息記錄以及導入刪 除標誌欄位為非空的節目信息記錄，達到提高資料庫入庫效率的目的。以上所述僅是本發明的優選實施方式，應當指出，對於本技術領域的普通技術人 員來說，在不脫離本發明原理的前提下，還可以做出若干改進和潤飾，這些改進和潤飾也應 視為本發明的保護範圍。
權利要求
一種網絡電視統計分析系統的資料庫處理方法，通過網絡電視的統計分析系統，將業務資料庫的數據資料導入統計分析資料庫，其特徵在於，所述資料庫處理方法包括所述統計分析系統從所述業務資料庫提取數據，獲得本次提取數據；所述統計分析系統將所述本次提取數據與上次提取數據進行比較，查找沒有存在於所述本次提取數據，但存在於所述上次提取數據中的已刪除信息記錄，其中所述上次提取數據為上次從所述業務資料庫提取資料時的數據；所述統計分析系統添加所述已刪除信息記錄中的刪除標誌欄位，將所述已刪除信息記錄合併至所述本次提取數據，獲得合併數據資料，並將所述合併數據資料導入所述統計分析資料庫。
2.如權利要求1所述的資料庫處理方法，其特徵在於，所述統計分析系統在將所述本 次提取數據與所述上次提取數據進行比較的步驟中，還包括查找所述本次提取數據與所述上次提取數據中的相同信息記錄；所述統計分析系統在獲得所述合併數據資料的步驟之後，還包括刪除所述合併數據 資料中的所述相同信息記錄，之後將刪除所述相同信息記錄的所述合併數據資料導入所述 統計分析資料庫。
3.如權利要求1或2所述的資料庫處理方法，其特徵在於，所述資料庫處理方法還包 括所述統計分析系統在上次從所述業務資料庫提取資料，獲得所述上次提取數據時，在第 一記錄表格保存所述上次提取數據。
4.如權利要求3所述的資料庫處理方法，其特徵在於，所述統計分析系統在獲得所述 本次提取數據的步驟之後，還包括在第二記錄表格保存所述本次提取數據，並同時將所述 本次提取數據拷貝至第三記錄表格。
5.如權利要求4所述的資料庫處理方法，其特徵在於，所述統計分析系統將所述本次 提取數據與所述上次提取數據進行比較的步驟中，將所述第一記錄表格和所述第二記錄表 格中的數據進行比較，之後將所述已刪除信息記錄合併至所述第二記錄表格中，在所述第 二記錄表格中保存所述合併數據資料。
6.如權利要求5所述的資料庫處理方法，其特徵在於，在將所述合併數據資料導入所 述統計分析資料庫的步驟之後，還包括清空所述第一記錄表格，將所述第三記錄表格中的數據導入所述第一記錄表格，之後 清空所述第二記錄表格和所述第三記錄表格。
7.如權利要求1所述的資料庫處理方法，其特徵在於，所述資料庫處理方法還包括所述統計分析系統擴充所述統計分析資料庫，增加所述刪除標誌欄位，所述刪除標記欄位用於記錄所述統計分析資料庫中節目信息記錄的刪除時間。
8.如權利要求1所述的資料庫處理方法，其特徵在於，所述資料庫處理方法還包括，所 述統計分系統擴充所述統計分析資料庫，增加創建時間標誌欄位，通過所述創建時間標誌 欄位記錄所述統計分析資料庫中節目信息記錄的創建時間。
9.一種網絡電視統計分析系統的資料庫處理裝置，用於將業務資料庫的數據資料導入 統計分析資料庫，其特徵在於，所述資料庫處理裝置包括源數據提取單元，用於從所述業務資料庫提取數據，獲得本次提取數據；數據分析單元，用於將所述本次提取數據與上次提取數據進行比較，查找沒有存在於所述本次提取數據，但存在於所述上次提取數據中的已刪除信息記錄，其中所述上次提取 數據為上次從所述業務資料庫提取資料時的數據；數據預處理單元，用於添加所述已刪除信息記錄中的刪除標誌欄位，將所述已刪除信 息記錄合併至所述本次提取數據，獲得合併數據資料，並將所述合併數據資料導入所述統 計分析資料庫。
10.如權利要求9所述的資料庫處理裝置，其特徵在於，所述數據分析單元還用於查 找所述本次提取數據與所述上次提取數據中的相同信息記錄；所述數據預處理單元還用 於刪除所述合併數據資料中的所述相同信息記錄，之後將刪除所述相同信息記錄的所述 合併數據資料導入所述統計分析資料庫。
全文摘要
本發明提供一種網絡電視統計分析系統的資料庫處理方法和資料庫處理裝置，資料庫處理方法包括從業務資料庫提取數據，獲得本次提取數據；將本次提取數據與上次提取數據進行比較，查找沒有存在於本次提取數據，但存在於上次提取數據中的已刪除信息記錄，其中上次提取數據為上次從業務資料庫提取資料時的數據；添加已刪除信息記錄中的刪除標誌欄位，將已刪除信息記錄合併至本次提取數據，獲得合併數據資料，並將合併數據資料導入統計分析資料庫。該方法和裝置在更新統計分析資料庫時，分析所導入的數據資料，將相關數據欄位已刪除的節目記錄導入統計分析資料庫，避免相關信息被刪除造成統計分析結果不準確的問題。
文檔編號G06F17/30GK101876991SQ20091023771
公開日2010年11月3日 申請日期2009年11月16日 優先權日2009年11月16日
發明者劉偉, 吳德港, 趙莉娟 申請人:中興通訊股份有限公司