歡迎光臨
每天分享高質量文章

螞蟻金服開源自動化測試框架 SOFAACTS

SOFAStack  

Scalable Open Financial Architecture Stack 

是螞蟻金服自主研發的金融級分佈式架構,包含了構建金融級雲原生架構所需的各個組件,是在金融場景里錘煉出來的最佳實踐。

螞蟻金服在 SOFAStack 體系內研發了基於模型驅動的自動化接口測試框架 SOFAACTS。

GitHub 地址

https://github.com/alipay/sofa-acts

背景

伴隨著業務需求的爆發,螞蟻金服金融級分佈式架構質量測試活動變得複雜起來,表現在測試的業務場景複雜,諸如分佈式事務處理流程場景、併發性、賬戶狀態多樣性、冪等性和兼容性等等。在原有的自動化測試框架下,測試流程編排極易出現測試資料冗餘分散、可維護性差、人工編碼成本高和測試驗證點易遺漏的問題。

如何解決上面的問題呢?

螞蟻金服在 SOFAStack 體系內研發了基於模型驅動的自動化接口測試框架 SOFAACTS。

SOFAACTS 介紹

SOFAACTS 由 IDE 和測試引擎組成,下圖為產品架構圖:

框架適配 TestNg+Spring 的測試背景關係環境,以 YAML 為資料載體併在此上構建資料模型驅動,具有契合快速互聯網發展和複雜分佈式金融系統特點的優良特性:

  • 模型驅動和標準執行引擎;

  • 精細化校驗和資料的自動回寫;

  • 具有靈活的可擴展性;

  • 用例可視化維護。

1.模型驅動和標準化

在測試用例資料與測試代碼分離的探索上,很多測試框架採用資料驅動的方式,但這也無法從容應對金融級的複雜業務場景。框架對用例資料進行了深度抽象,提出模型驅動理念,研發出基於模型的資料驅動和標準化執行引擎,實現了資料和代碼的分離管理,同時對測試過程中的資料清理、資料準備、用例執行、結果校驗階段進行標準化,做到測試資料維護和測試代碼的簡潔優雅。用例執行時用戶無需關註資料如何加載,結果和期望資料如何比對,只需要關註測試資料和執行結果。

接下來,我們介紹如何使用 SOFAACTS 來高效率地完成一鍵生成資料模型生成和一鍵生成測試腳本。

資料模型生成

首先進行資料模型的準備,以方便之後模版化地快速創建物件和表,按照如下方式來準備 DB 資料、接口請求引數和傳回結果物件模型。

DB 資料模型生成

1.任意測試代碼中右擊-> SOFAACTS 功能->生成 DB 表結構模板;

2.選擇生成的標的測試工程;

3.點擊確認後選擇並添加需要生成模型的表即可生成。

類物件模型生成

1.待構建模型的類定義的任意方法上右擊-> SOFAACTS 功能->模板生成,生成當前物件的模型;

2.生成完成後,我們可以在下圖位置找到生成的資料物件模型;

3.按照上述步驟,這樣我們就生成了接口物件模板。

現在,我們開始進行腳本一鍵生成:

測試腳本生成

SOFAACTS IDE 提供測試腳本自動生成功能,無需手動編碼。操作方式如下:

1.被測接口方法上點擊,選擇 SOFAACTS 功能–>生成測試用例;

2.這時會彈出一個文本框,填寫腳本生成的位置和編碼格式,如下:

3.填寫完成後,點擊 OK 即可自動生成如下測試腳本,可以看出模型驅動生成的腳本精簡而優雅。

原來資料驅動下的腳本是如下麵圖這樣的,測試資料冗餘分散,人工編碼成本高維護性差。

實踐證明 SOFAACTS 用例的測試代碼構建效率提高 80% ,測試資料精簡到 1/case 數。

2.精細化校驗

在解決複雜業務場景下測試驗證難、易遺漏等問題時,SOFAACTS 基於代碼行為跟蹤和分析理念,通過反射機制和日誌解析實現結果資料的自動採集,以此做為場景用例校驗的資料基線,併在持續集成時進行基線全量因子匹配來達到精細化驗證。如下圖:

同時,為了提高自動採集後資料回填的效率,框架支持預校驗資料的自動寫入能力,進一步實現了資料的自動化精細校驗。如下圖:一鍵點擊即可採集到校驗資料基線,在螞蟻內部實踐中 ACTS 做到了結果校驗效率提升至少 80%,場景驗證 0 遺漏。

3.靈活可擴展

框架為了應對各種特殊業務測試情況而不需要過多改動,設計上應用高內聚與低耦合原則,支持既可以復用框架底層代碼又可以針對業務個性化情況做擴展的能力。整個框架提供了豐富的 API,測試執行過程每個方法、每個類以便測試執行過程的每個階段(如下圖)都能夠在測試腳本裡面被重新為其他方法或者被其他多型的子類替換,這樣讓框架變得更通用,既賦予了框架輕量性又增加了靈活性。

自定義的 API 如下:

API 的具體使用請詳細學習產品使用手冊。

4.用例可視化維護

框架支持研發集成環境的一站式編輯,高效的用例腳本和資料維護,有效減少重覆性的資料準備代碼。如下圖:

總結

以上是對 SOFAACTS 測試框架的基本介紹,SOFAACTS 還有諸多能力,歡迎查閱詳細的使用手冊(鏈接見底部)。

目前,SOFAACTS 已經在螞蟻金服大範圍使用,分鐘級用例編寫 10 倍效能提升,累計用例個數 10w 以上,高頻功能使用可達近 2000 次/日,並持續保持著旺盛的生命力。

當前,代碼已開源托管在 GitHub 上,歡迎關註,同時也歡迎業界愛好者共同創造更好的 SOFAACTS。

GitHub 專案地址:

https://github.com/alipay/sofa-acts

相關鏈接

  • SOFAACTS :

    https://github.com/alipay/sofa-acts

  • API 產品使用手冊:

    https://www.sofastack.tech/sofa-acts/docs/Usage-API

  • SOFAACTS 詳細使用手冊:

    https://www.sofastack.tech/sofa-acts/docs/Home

招聘

螞蟻金服金融核心測試技術團隊持續尋找對測試自動化、智慧風險管控等方向充滿熱情的小伙伴加入,有意者請聯繫 [email protected]

    赞(0)

    分享創造快樂