一種軟體接口測試方法及系統的製作方法

2023-05-23 06:17:46 2

專利名稱：一種軟體接口測試方法及系統的製作方法
技術領域：
本發明涉及通訊領域測試技術，尤其涉及一種軟體接口測試方法及系統。
技術背景在自動化測試工作中，回歸測試是一種普遍使用的技術，回歸測試由於可有 效降低產品版本升級帶來的頻繁重複測試，提高測試效率而受到測試人員的廣 泛青睞。回歸測試主要用於對一個功能相對穩定的產品進行版本升級後的測試，並 且在產品版本升級前後輸入不變、輸入與輸出有固定對應關係的情況下，完成 對新版本輸出結果的驗證。這種驗證可以是手工進行，也可以才用自動化測試 手段進行。進行回歸測試必須同時滿足如下條件第一，恆定的輸入，即產品版本升 級後，測試時在新產品中的測試輸入與在上一個版本中的測試輸入完全相同； 第二，測試輸入作用於被測試產品後，具有固定的輸出，即輸入與輸出具有明 確的對應關係，多次重複相同的輸入得到的輸出結果應該相同；第三，前一個 版本準備有一套標準的輸出結果，用於本次測試輸出的比較模板；第四，版本 功能進入穩定期，沒有非常大的差異性變化。當這四個條件滿足時，才可以成 功的進行回歸測試。從上述分析可以看出，現有的回歸測試中需要製作標準輸出模板，並且在 被側對象版本功能較穩定無大變化情況下才能發揮作用。如果版本之間變化較 大，比如推出的是更新換代的替代產品，即使產品功能具有很大的延續性，但是對結果的處理存在一定的差異性，或者沒有固定的模板用於回歸比較，那末 上述回歸測試方法將失去〗介值。發明內容鑑於上述的分析，本發明的目的在於提供一種接口測試方法及系統，用以 解決現有技術中存在的回歸測試需要製作標準輸出模板，並且在被側對象版本 功能較穩定無大變化情況下才能發揮作用的問題。本發明的目的主要是通過以下技術方案實現的本發明提供了一種接口測試方法，所述方法包括步驟A:將多個待比較的被測對象接入同 一個子系統；步驟B:調入需要測試的測試用例，根據測試用例描述的測試步驟，分別作 用於各個待比較的被測對象；步驟C:測試平臺收集各個待比較的被測對象輸出的接口報文，並根據預定 的比較策略和比較方式對各個待比較的被測對象輸出的接口報文進行兩兩相互 比較，同時記錄比較結果。進一步地，所述步驟A中，多個待比較的^皮測對象通過測試平臺與子系統 連接，或者，多個待比較的被測對象直接接入同一個測試平臺，所述測試平臺 同時模擬子系統。進一步地，所述步驟A中，當多個待比較的被測對象通過測試平臺與子系 統連接時，所述步驟A具體包括測試平臺根據用戶的要求配置報文的比較策略；測試平臺配置完畢並啟動成功後，進入連接偵聽狀態，等待被測對象的連接 請求；被測對象啟動成功後，配置設備參數，並發起與測試平臺連接的請求。 當多個待比較的被測對象直接接入同一個測試平臺，所述測試平臺同時模擬為子系統時，所述步驟A具體包括測試平臺模擬為一個子系統，並根據用戶的要求配置報文的比較策略； 測試平臺配置完畢並啟動成功後，進入連接偵聽狀態，等待被測對象的連接請求；被測對象啟動成功後，根據用戶的要求在其中創建該模擬子系統，並發起與 測試平臺連接的請求。進一步地，所述步驟C中的比較方式包括比較全部接口報文或比較選中 接口才艮文。進一步，所述步驟C中的比較結果包括被比較的被測對象中多出的接口 報文、被比較的被測對象中缺少的接口報文、被比較的被測對象中不一致的接 口報文及接口報文中不 一致的內容。本發明還提供了一種接口測試系統，所述系統包括測試單元、多個待比 較的被測對象、測試平臺和子系統，其中，多個所述待比較的被測對象通過所 述測試平臺與所述子系統相連，所述測試單元，用於調入需要測試的測試用例，並才艮據測試用例描述的測 試步驟，分別作用於各個待比較的被測對象；所述待比較的^f皮測對象，用於通過所述測試平臺管理所述子系統，根據測 試單元的要求進行相應的測試操作，並通過測試接口輸出接口報文；所述測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並 根據預定的比較策略對接收到的各個待比較的被測對象的接口報文進行兩兩相互比較，同時記錄比較結果；所述子系統，用於接受多個所述待比較的被測對象的管理。本發明還提供了另外一種接口測試系統，所述系統包括測試單元、多個 待比較的被測對象、測試平臺和由測試平臺模擬的子系統，其中，所述待比較 的被測對象直接與所述測試平臺連接，所述測試單元，用於調入需要測試的測試用例，才艮據測試用例描述的測試 步驟，分別作用於各個待比較的被測對象；所述待比較的被測對象，用於根據測試單元的要求進行相應的測試操作， 通過所述測試平臺管理所述模擬的子系統，並通過測試接口輸出接口報文；所述測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並 根據預定的比較策略和比較規則對接收到的各個待比較的被測對象的接口報文 進行兩兩相互比較，同時記錄比較結果；所述模擬的子系統，用於接受多個所述待比較的被測對象的管理。本發明有益效果如下本發明解決了現有回歸測試中需要製作標準輸出模板、被測對象版本功能 較穩定無大變化情況下才能發揮作用的問題，可以在無模板的情況下開展測試； 可以在被測對象測試版本變動較大的情況下進行對比測試；可以同時接入多個 待比較的被測對象進行對比測試；比較方式靈活多樣，可以互為參照。本發明的其他特徵和優點將在隨後的說明書中闡述，並且，部分的從說明 書中變得顯而易見，或者通過實施本發明而了解。本發明的目的和其他優點可 通過在所寫的說明書、權利要求書、以及附圖中所特別指出的結構來實現和獲得。


圖1為本發明實施例所述方法的流程示意圖；圖2為本發明實施例所述方法中的一種接入方式示意圖；圖3為本發明實施例所述方法中的另一種^^妄入方式示意圖；圖4為本發明實施例所述方法示例的流程示意圖；圖5為本發明實施例所述測試系統的結構示意圖；圖6為本發明實施例所述另一測試系統的結構示意圖。
具體實施方式
為了便於理解本發明，下面結合附圖來具體描述本發明的優先實施例，其 中，附圖構成本申請一部分，並與本發明的實施例一起用於闡釋本發明的原理。首先結合附圖1到附圖3對本發明實施例所述方法進行詳細說明。本發明實施例所述方法的主要內容包括由用戶設置實時比較策略，測試 平臺根據比較策略對接收到的來自不同被測對象的接口報文進行實時比較，記 錄測試結果。本發明實施例所述方法克服了傳統回歸測試方法的局限，具有高 度的靈活性，既適用於自動化回歸測試，又適用於手工實時測試。如圖1所示，圖1為本發明實施例所述方法的流程示意圖，具體可以包括 以下步驟步驟101:將多個待比較的被測對象接入同一個子系統； 具體接入方式如圖2和圖3所示，可以包括兩種圖2為一種接入方式的 示意圖，即將多個被測對象與子系統之間通過測試平臺連接；圖3為另一種接 入方式的示意圖，即將多個待比較的被測對象直接接入同一個測試平臺中，測 試平臺同時承擔模擬子系統角色。所述子系統是指與被測對象存在一定連接關係的系統，被測對象通過接口與子系統進行連接， 一個子系統可以同時接收多個被測對象的連接；當採用的是兩個或多個待比較的被測對象接入同 一個測試平臺中而不再接入其他子系統 的方式時，測試平臺本身相當於一個模擬子系統。步驟102:調入需要測試的測試用例，根據測試用例描述的測試步驟，分別 作用於各個待比較的被測對象。步驟103:測試平臺收集各個被測對象輸出的接口報文。步驟104:測試平臺對接收到的各個被測對象的接口報文根據用戶預定的比 較策略進行兩兩相互比較，同時記錄比較結果。所述比較策略是指用戶配置的 用於對接口報文進行比較的一系列規則，如需要過濾的接口報文、接口報文中 不需要比較的內容等。這裡，以三個被測對象為例，將各個接入的#1測對象分別表述為第一被測 對象、第二被測對象、第三被測對象，則所述兩兩比較的含義為以第一被測 對象的輸出為參照，將第二、第三被測對象的輸出與第一被測對象的輸出進行 比較；以第二被測對象為參照，將第一、第三被測對象的輸出與第二對象的輸 出進行比較；以第三被測對象的輸出為參照，將第一、第二被測對象的輸出與 第三被測對象的輸出進行比較。本發明實施例中，測試平臺提供了兩種對於接口報文的比較方式比較全部 接口報文，即對收集到的兩個網管的輸出報文全部進行比較；比較選定報文， 即只對收集到的兩個網管的輸出報文中的選定報文進行比較。比較時，第一網管對應的輸出報文集與第二網管對應的輸出報文集互為參 照。根據這一原則，第一網管輸出報文集中存在的報文而第二網管報文集中不存在的接口報文、第一網管中不存在的接口報文而第二網管中存在的接口報文、不一致的接口報文均會被對比列出。因此所述比較結果包括被比較對象中多 出的接口報文、缺少的接口報文、不一致的接口報文、接口報文中不一致的內 容等；需要包括的內容可以根據比較策略定製。為了更好的理解本發明，下面以附圖3所示的接入方式為例，結合附圖4 舉例對本發明所述方法作進一步說明。如圖4所示，圖4為本發明實施例所述方法示例的流程示意圖，其中，子系 統為SDH (同步數字體系)設備，待比較的測試對象為網元管理系統EMS1和網 元管理系統EMS2;測試平臺模擬一個SDH (同步數字體系)設備，兩個不同的 網元管理系統同時管理這個模擬設備，對接口數據處理的差異性進行對比測試， 所述方法具體可以包括如下步驟步驟401:啟動測試平臺，由測試平臺模擬一個SDH(同步數字體系)設備， 並根據用戶的要求配置接口報文的比較策略。測試平臺配置完畢並啟動成功後， 進入連接偵聽狀態，等待網元管理系統的連接請求。步驟402:啟動第一個網元管理系統EMS1，在EMS1中創建該模擬SDH設備， 並配置好設備參數。此時，EMS1將主動發起與模擬SDH設備(測試平臺)建立 連接的請求。步驟403:啟動第二個網元管理系統EMS2，同樣，在EMS2中創建該模擬SDH 設備，並配置好設備參數。此時，EMS2也將主動發起與模擬SDH設備(測試平 臺)建立連接的請求。步驟404:測試平臺分別接收EMS1和EMS2的連接請求，建立通訊連接。連 接建立成功後，EMS1、 EMS2與測試平臺(模擬SDH設備)之間實現正常的通訊，測試平臺監控到EMS1、 EMS2通過測試接口下發的所有接口報文。步驟405:調入需要測試的測試用例，#4居測試用例描述的測試步驟，在 EMS1中進行操作，測試平臺同步收集EMS1輸出的接口報文；測試用例操作完 畢，測試平臺將收集到的接口報文作為EMS 1輸出保存。步驟406:根據測試用例描述的測試步驟，根據測試用例描述的測試步驟， 在EMS2中進行操作，測試平臺同步收集EMS2在測試接口輸出的接口報文；測 試用例操作完畢，測試平臺將收集到的接口報文作為EMS1輸出保存。步驟407:判斷測試用例是否執行完畢，如果是，則執行步驟408，否則， 轉到步驟405，繼續執行測試用例。步驟408:測試平臺加載用戶預定的比較策略，根據比較策略啟動比較方式。 測試平臺提供兩種比較方式比較全部報文、比較選中報文。如果是比較全部 報文，則選中EMS1以及EMS2輸出集合中的所有接口報文，並執行步驟409。本 發明實施例所述方法中的步驟409到步驟416僅作舉例說明，實際應用中並不局 限於此種比較策略，所述比較策略可以由本領域普通技術人員根據實際情況進 行設定。步驟409:提取EMSl輸出集合中第一條選中的接口報文。步驟410:從EMS2輸出集合中最後一次標記為匹配的選中接口報文開始，尋找與EMS1中提取的報文相匹配的接口報文。第一次開始比較時，EMS2輸出集合中的標記視為從第 一條選中的接口報文開始。步驟411:判斷在EMS2輸出報文選定的集合中是否找到與EMS 1輸出集合中當前待比較的接口報文相匹配的接口報文。如果是，則執行步驟412，否則轉步驟414。步驟412:在EMS2輸出集合中，標記匹配接口報文的位置，比較EMS1輸出 集合中當前待比較接口報文與EMS2輸出集合中當前匹配接口報文的內容，記錄 比較結果。步驟413:將EMS2輸出結果報文集中當前標記為匹配的接口報文與EMS2輸 出結果報文集中上一次標記為匹配的接口報文之間的所有接口報文作為無匹配 接口報文計入比較結果。這些無匹配的接口報文在EMS 1輸出集合的選定報文中 沒有找到，相當於多出的接口報文。步驟414:判斷EMS1輸出報文集中選中的接口報文是否遍歷完畢，如果沒有 遍歷完畢，則執行步驟415，否則轉步驟416。步驟415:提取EMS1輸出報文中的下一條選中接口報文，轉步驟410繼續執行。步驟416:將EMS1輸出集合選定的接口報文中在EMS2輸出集合選定的接口 報文中沒有匹配項的接口報文計入比較結果中。這些接口報文在EMS1輸出集合 中出現而在EMS2輸出集合中沒有，是多出的接口報文。上述步驟409到步驟416描述的是比較全部接口報文的方式，對於比較選中接 口報文的比較方式，在處理上基本類似，本領域普通技術人員可以根據上述描 述的內容輕易實現，所以此處不再贅述。從以上方法描述中可以看出，本發明實施例可以對多個相同或相似功能的 被測對象在沒有標準模板的情況下，完成對輸出結果進行實時相互比較的測試， 解決了傳統回歸測試方法應用中面臨的諸多局限。下面結合附圖5對本發明實施例的測試系統進行詳細說明。如圖5所示，圖5為本發明實施例所述測試系統的結構示意圖，具體可以包括測試單元、多個待比較的被測對象、測試平臺和子系統，其中，多個所述待比較的被測對象通過所述測試平臺與所述子系統相連，下面分別予以說明。 測試單元，調入需要測試的測試用例，根據測試用例描述的測試步驟，分別作用於各個待比較的被測對象；所述測試用例可以根據用戶的需要自行設定， 也可以選用現有技術中已定的測試用例。待比較的被測對象，可以由兩個或兩個以上，用於才艮據測試單元的要求進 行相應的測試操作，通過所述測試平臺管理同一個子系統，並通過測試接口輸 出接口報文給測試平臺；測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並根據預 定的比較策略對接收到的各個待比較的被測對象的接口報文進行兩兩相互比 較，同時記錄比較結果；所述比較策略是指用戶配置的用於對接口報文進行比 較的一系列規則，如需要過濾的報文、報文中不需要比較的內容等。所述測試 平臺提供了兩種對於接口報文的比較方式比較全部報文，即對收集到的兩個 網管的輸出報文全部進行比較；比較選定報文，即只對收集到的兩個網管的輸 出報文中的選定報文進行比較。所述子系統，通過測試平臺與多個待比較的被測對象連接，用於接受多個 所述待比較的被測對象的管理。下面結合附圖6對本發明實施例的另 一測試系統進行詳細說明。如圖6所示，圖6為本發明實施例測試系統的結構示意圖，具體可以包括 測試單元、多個待比較的被測對象、測試平臺和由測試平臺模擬的子系統，其 中，所述待比較的被測對象直接與所述測試平臺連接，並且所述測試平臺同時 模擬子系統，下面分別予以說明。測試單元，用於調入需要測試的測試用例，根據測試用例描述的測試步驟，分別作用於各個待比較的被測對象；待比較的被測對象，用於根據測試單元的要求進行相應的測試操作，通過 所述測試平臺管理所述模擬的子系統，並通過測試接口輸出接口報文；測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並根據 預定的比較策略對接收到的各個待比較的被測對象的接口報文進行兩兩相互比 較，同時記錄比較結果；所述測試平臺同時用於模擬被多個待比較的被測對象 管理的子系統。所述模擬的子系統，用於接受多個所述待比較的被測對象的管理。對於本發明實施例所述系統的具體實施過程，請參照上面方法中的詳細描 述，此處不再贅述。綜上所述，本發明實施例提供了一種軟體接口測試方法及系統，解決了現有 回歸測試中需要製作標準輸出模板、被測對象版本功能較穩定無大變化情況下 才能發揮作用的問題。具有以下明顯的優點可以在無模板的情況下開展測試；可以在被測對象測試版本變動較大的情 況下進行對比測試；可以同時接入多個待比較的被測對象進行對比測試；比較 方式靈活多樣，可以互為參照。本發明既適合回歸測試，又適合實時比較測試， 從根本上擴大了自動化回歸測試的使用範圍和作用，提高測試效率。以上所述，僅為本發明較佳的具體實施方式
，但本發明的保護範圍並不局 限於此，任何熟悉本技術領域的技術人員在本發明揭露的技術範圍內，可輕易 想到的變化或替換，都應涵蓋在本發明的保護範圍之內。因此，本發明的保護 範圍應該以權利要求書的保護範圍為準。
權利要求
1. 一種軟體接口測試方法，其特徵在於，所述方法包括步驟A將多個待比較的被測對象接入同一個子系統；步驟B調入需要測試的測試用例，根據測試用例描述的測試步驟，分別作用於各個待比較的被測對象；步驟C測試平臺收集各個待比較的被測對象輸出的接口報文，並根據預定的比較策略和比較方式對各個待比較的被測對象輸出的接口報文進行兩兩相互比較，同時記錄比較結果。
2、 根據權利要求1所述的方法，其特徵在於，所述步驟A中，多個待比較 的被測對象通過測試平臺與子系統連接，或者，多個待比較的被測對象直接接 入同 一個測試平臺，所述測試平臺同時模擬子系統。
3、 根據權利要求2所述的方法，其特徵在於，當多個待比較的被測對象通 過測試平臺與子系統連接時，所述步驟A具體包括測試平臺根據用戶的要求配置報文的比較策略；測試平臺配置完畢並啟動成功後，進入連接偵聽狀態，等待被測對象的連接 請求；被測對象啟動成功後，配置設備參數，並發起與測試平臺連接的請求。
4、根據權利要求2所述的方法，其特徵在於，當多個待比較的被測對象直接 接入同一個測試平臺，所述測試平臺同時模擬為子系統時，所述步驟A具體包括 測試平臺模擬為一個子系統，並根據用戶的要求配置報文的比較策略； 測試平臺配置完畢並啟動成功後，進入連接偵聽狀態，等待被測對象的連接請求；被測對象啟動成功後，根據用戶的要求在其中創建該模擬子系統，並發起與測試平臺連接的請求。
5、 根據權利要求1到4中任意一項所述的方法，其特徵在於，所述步驟C中的比較方式包括比較全部接口報文或比較選中接口報文。
6、 根據權利要求1到4中任意一項所述的方法，其特徵在於，所述步驟C 中的比較結果包括被比較的被測對象中多出的接口報文、被比較的被測對象 中缺少的接口報文、被比較的被測對象中不一致的接口報文及接口報文中不一 致的內容。
7、 一種軟體接口測試系統，其特徵在於，所述系統包括測試單元、多個 待比較的被測對象、測試平臺和子系統，其中，多個所述待比較的被測對象通 過所述測試平臺與所述子系統相連，所述測試單元，用於調入需要測試的測試用例，並#4居測試用例描述的測 試步驟，分別作用於各個待比較的被測對象；所述待比較的被測對象，用於通過所述測試平臺管理所述子系統，根據測 試單元的要求進行相應的測試操作，並通過測試接口輸出接口報文；所述測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並 根據預定的比較策略對接收到的各個待比較的被測對象的接口報文進行兩兩相 互比較，同時記錄比較結果；所述子系統，用於接受多個所述待比較的被測對象的管理。
8、 一種軟體接口測試系統，其特徵在於，所述系統包括測試單元、多個 待比較的被測對象、測試平臺和由測試平臺模擬的子系統，其中，所述待比較 的被測對象直接與所述測試平臺連接，所述測試單元，用於調入需要測試的測試用例，才艮據測試用例描述的測試步驟，分別作用於各個待比較的被測對象；所述待比較的被測對象，用於根據測試單元的要求進行相應的測試操作， 通過所述測試平臺管理所述模擬的子系統，並通過測試接口輸出接口報文；所述測試平臺，用於收集各個所述待比較的被測對象輸出的接口報文，並 根據預定的比較策略和比較規則對接收到的各個待比較的被測對象的接口報文 進行兩兩相互比較，同時記錄比較結果；所述模擬的子系統，用於接受多個所述待比較的被測對象的管理。
全文摘要
本發明公開了一種軟體接口測試方法及系統，其中，所述方法包括將多個待比較的被測對象接入同一個子系統；調入需要測試的測試用例，根據測試用例描述的測試步驟，分別作用於各個待比較的被測對象；測試平臺收集各個待比較的被測對象輸出的接口報文，並根據預定的比較策略和比較方式對各個待比較的被測對象輸出的接口報文進行兩兩相互比較，同時記錄比較結果。本發明解決了現有回歸測試中需要製作標準輸出模板、被測對象版本功能較穩定無大變化情況下才能發揮作用的問題。
文檔編號G06F11/36GK101271423SQ20081009785
公開日2008年9月24日 申請日期2008年5月19日 優先權日2008年5月19日
發明者程兵旺, 譚向東 申請人:中興通訊股份有限公司