一種電力網絡設備日誌和配置文件的採集、分析和發布系統及其方法
2023-10-11 14:02:54
一種電力網絡設備日誌和配置文件的採集、分析和發布系統及其方法
【專利摘要】本發明公開了一種電力網絡設備日誌和配置文件的採集、分析和發布系統及其方法，是應用在包含電力網絡設備的電力網絡環境中；其特徵是，系統的組成包括：syslog服務模塊、日誌分析模塊、配置文件抓取模塊、配置文件管理模塊、web發布模塊和本地文件夾；在本地文件夾中存儲有日誌分析條件文件、網絡設備列表文件、緩存文件夾和配置文件夾，在配置文件夾中存儲有配置文件和設備配置表文件。本發明能及時發現網絡中潛在的故障點，提高故障排查的效率。
【專利說明】一種電力網絡設備日誌和配置文件的採集、分析和發布系 統及其方法
【技術領域】
[0001] 本發明涉及電力與計算機【技術領域】，尤其是電力網絡設備日誌和配置文件的採 集、分析和發布系統及其方法。
【背景技術】
[0002] 隨著電力通信網絡規模的不斷擴大，故障點及故障類型不斷增加，同時針對網絡 設備、主機及終端的網絡攻擊行為也不斷增多。如何事先發現潛在的網絡隱患以及在網絡 攻擊或設備故障發生後快速發現問題原因，對網絡運行維護工作至關重要。
[0003] 目前對於企業內網的非法接入、網絡故障、終端故障等電力網絡問題，通常採用事 後分析的方式，由網絡管理人員對故障進行初步判斷後確定可能的故障來源設備，再訪問 可能的故障來源設備相關事件日誌進行分析，以進行故障定位和排查。該方法對於網絡中 潛在的故障點難以及時發現，同時時候分析涉及較多設備，不利於日常網絡維護工作，在實 際操作過程中網絡運行維護人員通常要耗費大量的時間對常見故障進行定位，且基本做不 到對潛在故障點的提前發現。
【發明內容】
[0004] 本發明是為了克服現有技術存在的不足之處，提供一種電力網絡設備日誌和配置 文件的採集、分析和發布系統及其方法，以期能及時發現網絡中潛在的故障點，提高故障排 查的效率。
[0005] 本發明為達到上述目的所採用的技術方案是：
[0006] 本發明一種電力網絡設備日誌和配置文件的採集、分析和發布系統，是應用在包 含電力網絡設備的電力網絡環境中；其特點是，所述系統的組成包括：syslog服務模塊、日 志分析模塊、配置文件抓取模塊、配置文件管理模塊、web發布模塊和本地文件夾；在所述 本地文件夾中存儲有日誌分析條件文件、網絡設備列表文件、緩存文件夾和配置文件夾，在 所述配置文件夾中存儲有配置文件和設備配置表文件；
[0007] 所述syslog服務模塊用於接收所述電力網絡設備自動上傳的日誌，並存入日誌 資料庫；
[0008] 所述日誌分析模塊讀取所述日誌資料庫中日誌和所述日誌分析條件文件中存儲 的日誌分析條件，並根據所述日誌分析條件對所述日誌進行分析，對滿足所述日誌分析條 件的日誌在所述日誌資料庫中進行標記；
[0009] 所述配置文件抓取模塊讀取所述網絡設備列表文件中存儲的網絡設備列表，並 根據所述網絡設備列表抓取與所述電力網絡設備相應的配置文件並存入所述緩存文件夾 中；
[0010] 所述配置文件管理模塊讀取所述緩存文件夾中的配置文件並進行時間線管理；
[0011] 所述web發布模塊用於與瀏覽器進行通信，接收所述瀏覽器傳輸的操作數據和/ 或查詢條件，並進行相應操作；所述相應操作包括對所述日誌分析條件和/或網絡設備列 表進行增加、刪除和/或變更操作，並將操作結果傳輸到所述瀏覽器；或根據查詢條件讀取 相應的日誌、配置文件和/或設備配置表文件，並傳輸到所述瀏覽器。
[0012] 本發明一種利用電力網絡設備日誌和配置文件的採集、分析和發布系統的方法， 其特點是按如下步驟進行：
[0013] 步驟一、在所述電力網絡環境中，接入一用戶管理端，並配置所述用戶管理端的 IP ；
[0014] 步驟二、配置所述電力網絡設備中宿主機參數為所述用戶管理端的IP ;
[0015] 步驟三、激活所述電力網絡設備的日誌自動上傳功能，使得所述日誌上傳至所述 用戶管理端；
[0016] 步驟四、所述用戶管理端通過所述syslog服務模塊實時接收上傳的日誌並存入 所述日誌資料庫；所述用戶管理端通過所述配置文件抓取模塊定時抓取配置文件並存入所 述緩存文件夾；
[0017] 步驟五、所述用戶管理端通過所述日誌分析模塊根據所設定的日誌分析條件對所 述日誌資料庫中的日誌並進行分析，對滿足設定的日誌分析條件的日誌進行標記；所述配 置文件管理模塊對所抓取的配置文件進行時間線管理；
[0018] 步驟六、用戶管理端通過瀏覽器登錄所述web發布模塊輸入操作數據和/或查詢 條件，所述web發布模塊接收所述瀏覽器傳輸的操作數據和/或查詢條件並進行相應操作， 並將操作結果和/或讀取相應的日誌、配置文件和/或設備配置表文件，傳輸到所述瀏覽器 進行顯示。
[0019] 本發明電力網絡設備日誌和配置文件的採集、分析和發布系統的方法的特點在 於，
[0020] 所述步驟四中的配置文件抓取模塊是按如下步驟進行配置文件的定時抓取：
[0021] 1)讀取所述本地文件夾中的網絡設備列表文件，獲得所述網絡設備列表；
[0022] 2)根據所述網絡設備列表中的網絡設備信息，獲得相應的命令序列文件；所述網 絡設備信息包括：電力網絡設備的名稱、管理地址、用戶名、密碼、廠家和型號；所述命令序 列文件包括電力網絡設備的廠家、型號、命令格式和命令參數；所述命令參數包括電力網絡 設備的管理地址、用戶名、密碼、用戶管理端IP和配置文件保存名稱；所述配置文件保存名 稱是由電力網絡設備的管理地址和配置文件採集時間點組成；
[0023] 3)根據所述命令序列文件中的命令格式和命令參數，生成配置文件抓取命令，
[0024] 4)執行所述配置文件抓取命令，連接電力網絡設備，獲得與所述電力網絡設備相 應的配置文件並存入所述緩存文件夾中。
[0025] 所述步驟五中所述配置文件管理模塊按如下步驟進行時間線管理：
[0026] 1)讀取所述緩存文件夾中的配置文件和設備配置表文件；
[0027] 2)查找與所述配置文件相對應的電力網絡設備在所述設備配置表文件中是否有 設備配置記錄；
[0028] 3)若無設備配置記錄，則為首次獲取的所述電力網絡設備的配置文件，則將所述 配置文件存入所述配置文件夾中，並在所述設備配置表文件中新增一條設備配置記錄；若 有設備配置記錄，則根據所述設備配置記錄，讀取上一次存儲在所述配置文件夾中的配置 文件並進行比較，判斷所述緩存文件夾中的配置文件是否發生更改，若發生更改，則將所述 緩存文件夾中的配置文件存入所述配置文件夾中，並在所述設備配置表文件中新增一條設 備配置記錄。
[0029] 與現有技術相比，本發明的有益技術效果體現在：
[0030] 1、本發明通過接入電力網絡的用戶管理端，能收集電力網絡設備的日誌和配置文 件並進行分析和發布，並根據設定的日誌分析條件自動對日誌進行分析並標記滿足條件的 日誌，對採集的配置文件進行時間線管理，同時提供一個web發布服務，從而能效減少網絡 運行維護人員的故障定位工作，並能提前發現潛在的故障點；對多個電力網絡設備的日誌 和配置文件進行查看時，無需再逐個登錄電力網絡設備查看日誌和配置文件，減輕了網絡 運行維護人員的工作負荷。
[0031] 2、本發明通過日誌分析模塊，可以根據設定的日誌分析條件，對採集的日誌進行 分析，對滿足條件的日誌進行標記，網絡運行維護人員可以通過查看被標記的日誌，實現對 故障的快速定位和排查，提高了網絡運行維護人員的效率。
[0032] 3、本發明通過配置文件管理模塊，可以對採集的配置文件進行時間線管理，網絡 運行維護人員可以查看電力網絡設備配置文件的變更記錄，及查看變更時間點前後配置文 件變化的內容，及時發現電力網絡中潛在的安全風險。
[0033] 4、本發明通過web發布模塊發布日誌和配置文件，方便網絡運行維護人員查詢， 直觀便捷。
【專利附圖】
【附圖說明】
[0034] 圖1為本發明系統結構示意圖；
[0035] 圖2為本發明日誌分析模塊流程圖；
[0036] 圖3為本發明配置文件管理模塊流程圖。
【具體實施方式】
[0037] -種電力網絡設備日誌和配置文件的採集、分析和發布系統，是應用在包含電力 網絡設備的電力網絡環境中，電力網絡設備具體可以是路由器或交換機；如圖1所示，系統 的組成包括：syslog服務模塊、日誌分析模塊、配置文件抓取模塊、配置文件管理模塊、web 發布模塊和本地文件夾；在本地文件夾中存儲有日誌分析條件文件、網絡設備列表文件、緩 存文件夾和配置文件夾，在配置文件夾中存儲有配置文件和設備配置表文件；
[0038] syslog服務模塊用於接收電力網絡設備自動上傳的日誌，並存入日誌資料庫， syslog模塊使用資料庫軟體作為電力網絡設備日誌上傳的接收程序和日誌資料庫管理程 序，本實施例中使用的資料庫程序為mysql，也可使用其他能實現相同功能的資料庫軟體；
[0039] 如圖2所示，日誌分析模塊讀取日誌資料庫中日誌和日誌分析條件文件中存儲的 日誌分析條件，並根據日誌分析條件即用戶設置的過濾關鍵字，如IP、MAC、關鍵字，對日誌 部分的message-text欄位進行過濾分析；對滿足日誌分析條件即過濾後發現的異常日誌 在日誌資料庫中進行標記；日誌分析模塊每隔一段時間運行一次，例如每隔10分鐘分析在 上次運行之後電力網絡設備上傳的日誌；
[0040] 配置文件抓取模塊讀取網絡設備列表文件中存儲的網絡設備列表，並根據網絡設 備列表抓取與電力網絡設備相應的配置文件並存入緩存文件夾中；配置文件抓取模塊所設 定的時間定時運行，例如每天零時定時抓取，且每次運行前需要清空緩存文件夾，以刪除之 前抓取的配置文件；
[0041] 配置文件管理模塊讀取緩存文件夾中的配置文件並進行時間線管理；
[0042] web發布模塊用於與瀏覽器進行通信，接收瀏覽器傳輸的操作數據和/或查詢條 件，並進行相應操作；相應操作包括對日誌分析條件和/或網絡設備列表進行增加、刪除和 /或變更操作，並將操作結果傳輸到瀏覽器；或根據查詢條件讀取相應的日誌、配置文件和 /或設備配置表文件，並傳輸到瀏覽器；從而使得web發布模塊包含如下功能：
[0043] a)電力網絡設備基本臺帳信息維護（包括電力網絡設備的管理地址、用戶名、密 碼、型號）；
[0044] b)日誌分析的關鍵字設置，可設置關鍵字為IP位址、MAC地址或一般關鍵字；
[0045] c)路由器、交換機日誌按照時間段查詢及輸出；路由器、交換機異常日誌查詢；
[0046] d)路由器、交換機配置文件變更歷史記錄及各個變更時間點前後的配置文件內容 的查看、導出。
[0047] -種利用電力網絡設備日誌和配置文件的採集、分析和發布系統的方法，按如下 步驟進行：
[0048] 步驟一、在電力網絡環境中，接入一用戶管理端，並配置用戶管理端的IP ;
[0049] 步驟二、配置電力網絡設備中宿主機參數為用戶管理端的IP ;從而保證用戶管理 端與電力網絡設備能正常通信；
[0050] 步驟三、激活電力網絡設備的日誌自動上傳功能，使得日誌上傳至用戶管理端；
[0051] 步驟四、用戶管理端通過syslog服務模塊實時接收上傳的日誌並存入日誌數據 庫；用戶管理端通過配置文件抓取模塊定時抓取配置文件並存入緩存文件夾；具體的分 為：
[0052] 4. 1、讀取本地文件夾中的網絡設備列表文件，獲得網絡設備列表；
[0053] 4. 2、根據網絡設備列表中的網絡設備信息，獲得與電力網絡設備相對應的命令序 列文件；網絡設備信息包括：電力網絡設備的名稱、管理地址、用戶名、密碼、廠家和型號； 由於不同型號的電力網絡設備的配置文件抓取命令不同，為支持不同型號的電力網絡設備 配置文件的抓取，故定義命令序列文件，命令序列文件包括電力網絡設備的廠家、型號、命 令格式和命令參數；命令參數包括電力網絡設備的管理地址、用戶名、密碼、用戶管理端IP 和配置文件保存名稱；配置文件保存名稱是由電力網絡設備的管理地址和配置文件採集時 間點組成；
[0054] 4. 3、根據命令序列文件中的命令格式和命令參數，生成配置文件抓取命令；配置 文件抓取命令包含連接命令、密碼登入命令、上傳配置文件命令和退出命令；
[0055] 4. 4、執行配置文件抓取命令，連接電力網絡設備，獲得與電力網絡設備相應的配 直文件並存入緩存文件夾中。
[0056] 步驟五、用戶管理端通過日誌分析模塊根據所設定的日誌分析條件對日誌資料庫 中的日誌並進行分析，對滿足設定的日誌分析條件的日誌進行標記；配置文件管理模塊對 所抓取的配置文件進行時間線管理；具體的如圖3所示：
[0057] 5. 1、讀取緩存文件夾中的配置文件和設備配置表文件；
[0058] 5. 2、查找與配置文件相對應的電力網絡設備在設備配置表文件中是否有設備配 置記錄；設備配置表記錄每一次往配置文件夾中存入的配置文件的信息，設備配置記錄包 含電力網絡設備的管理地址、配置保存文件名稱和配置文件採集時間點；
[0059] 5. 3、若無設備配置記錄，則為首次獲取的電力網絡設備的配置文件，則將配置文 件存入配置文件夾中，並在設備配置表文件中新增一條設備配置記錄；若有設備配置記錄， 則根據設備配置記錄，讀取上一次存儲在配置文件夾中的配置文件並進行比較，判斷緩存 文件夾中的配置文件是否發生更改，若發生更改，則將緩存文件夾中的配置文件存入配置 文件夾中，並在設備配置表文件中新增一條設備配置記錄。
[0060] 步驟六、用戶管理端通過瀏覽器登錄web發布模塊輸入操作數據和/或查詢條件， 當然也可以使用電力網絡中環境中其他終端的瀏覽器登錄到web發布模塊，web發布模塊 接收瀏覽器傳輸的操作數據和/或查詢條件並進行相應操作，並將操作結果和/或讀取相 應的日誌、配置文件和/或設備配置表文件，傳輸到瀏覽器進行顯示，從而獲得電力網絡設 備運行狀態。
【權利要求】
1. 一種電力網絡設備日誌和配置文件的採集、分析和發布系統，是應用在包含電力網 絡設備的電力網絡環境中；其特徵是，所述系統的組成包括：syslog服務模塊、日誌分析模 塊、配置文件抓取模塊、配置文件管理模塊、web發布模塊和本地文件夾；在所述本地文件 夾中存儲有日誌分析條件文件、網絡設備列表文件、緩存文件夾和配置文件夾，在所述配置 文件夾中存儲有配置文件和設備配置表文件； 所述syslog服務模塊用於接收所述電力網絡設備自動上傳的日誌，並存入日誌數據 庫； 所述日誌分析模塊讀取所述日誌資料庫中日誌和所述日誌分析條件文件中存儲的日 志分析條件，並根據所述日誌分析條件對所述日誌進行分析，對滿足所述日誌分析條件的 日誌在所述日誌資料庫中進行標記； 所述配置文件抓取模塊讀取所述網絡設備列表文件中存儲的網絡設備列表，並根據所 述網絡設備列表抓取與所述電力網絡設備相應的配置文件並存入所述緩存文件夾中； 所述配置文件管理模塊讀取所述緩存文件夾中的配置文件並進行時間線管理； 所述web發布模塊用於與瀏覽器進行通信，接收所述瀏覽器傳輸的操作數據和/或查 詢條件，並進行相應操作；所述相應操作包括對所述日誌分析條件和/或網絡設備列表進 行增加、刪除和/或變更操作，並將操作結果傳輸到所述瀏覽器；或根據查詢條件讀取相應 的日誌、配置文件和/或設備配置表文件，並傳輸到所述瀏覽器。
2. -種利用權利要求1所述的電力網絡設備日誌和配置文件的採集、分析和發布系統 的方法，其特徵是按如下步驟進行： 步驟一、在所述電力網絡環境中，接入一用戶管理端，並配置所述用戶管理端的IP ; 步驟二、配置所述電力網絡設備中宿主機參數為所述用戶管理端的IP ; 步驟三、激活所述電力網絡設備的日誌自動上傳功能，使得所述日誌上傳至所述用戶 管理端； 步驟四、所述用戶管理端通過所述syslog服務模塊實時接收上傳的日誌並存入所述 日誌資料庫；所述用戶管理端通過所述配置文件抓取模塊定時抓取配置文件並存入所述緩 存文件夾； 步驟五、所述用戶管理端通過所述日誌分析模塊根據所設定的日誌分析條件對所述日 志資料庫中的日誌並進行分析，對滿足設定的日誌分析條件的日誌進行標記；所述配置文 件管理模塊對所抓取的配置文件進行時間線管理； 步驟六、用戶管理端通過瀏覽器登錄所述web發布模塊輸入操作數據和/或查詢條件， 所述web發布模塊接收所述瀏覽器傳輸的操作數據和/或查詢條件並進行相應操作，並將 操作結果和/或讀取相應的日誌、配置文件和/或設備配置表文件，傳輸到所述瀏覽器進行 顯不。
3. 根據權利要求2所述的電力網絡設備日誌和配置文件的採集、分析和發布系統的方 法，其特徵在於，所述步驟四中的配置文件抓取模塊是按如下步驟進行配置文件的定時抓 取： 1) 讀取所述本地文件夾中的網絡設備列表文件，獲得所述網絡設備列表； 2) 根據所述網絡設備列表中的網絡設備信息，獲得相應的命令序列文件；所述網絡設 備信息包括：電力網絡設備的名稱、管理地址、用戶名、密碼、廠家和型號；所述命令序列文 件包括電力網絡設備的廠家、型號、命令格式和命令參數；所述命令參數包括電力網絡設備 的管理地址、用戶名、密碼、用戶管理端IP和配置文件保存名稱；所述配置文件保存名稱是 由電力網絡設備的管理地址和配置文件採集時間點組成； 3) 根據所述命令序列文件中的命令格式和命令參數，生成配置文件抓取命令， 4) 執行所述配置文件抓取命令，連接電力網絡設備，獲得與所述電力網絡設備相應的 配置文件並存入所述緩存文件夾中。
4.根據權利要求2所述的電力網絡設備日誌和配置文件的採集、分析和發布系統的方 法，其特徵在於，所述步驟五中所述配置文件管理模塊按如下步驟進行時間線管理： 1) 讀取所述緩存文件夾中的配置文件和設備配置表文件； 2) 查找與所述配置文件相對應的電力網絡設備在所述設備配置表文件中是否有設備 配置記錄； 3) 若無設備配置記錄，則為首次獲取的所述電力網絡設備的配置文件，則將所述配置 文件存入所述配置文件夾中，並在所述設備配置表文件中新增一條設備配置記錄；若有設 備配置記錄，則根據所述設備配置記錄，讀取上一次存儲在所述配置文件夾中的配置文件 並進行比較，判斷所述緩存文件夾中的配置文件是否發生更改，若發生更改，則將所述緩存 文件夾中的配置文件存入所述配置文件夾中，並在所述設備配置表文件中新增一條設備配 置記錄。
【文檔編號】H04L12/24GK104065521SQ201410345962
【公開日】2014年9月24日 申請日期:2014年7月18日 優先權日:2014年7月18日
【發明者】宋敏, 江龍才, 湯中會, 牛景平, 李正兵, 陳浩, 王孝友, 步冬靜, 霍朝輝, 程洪, 陳亨波 申請人:國家電網公司, 國網安徽省電力公司池州供電公司