蚂蚁金服开源自动化测试框架 SOFAACTS
SOFAStack
Scalable Open Financial Architecture Stack 是螞蟻金服自主研發的金融級分布式架構,包含了構建金融級云原生架構所需的各個組件,是在金融場景里錘煉出來的最佳實踐。
螞蟻金服在 SOFAStack 體系內研發了基于模型驅動的自動化接口測試框架 SOFAACTS。
GitHub 地址:https://github.com/alipay/sofa-acts背景
伴隨著業務需求的爆發,螞蟻金服金融級分布式架構質量測試活動變得復雜起來,表現在測試的業務場景復雜,諸如分布式事務處理流程場景、并發性、賬戶狀態多樣性、冪等性和兼容性等等。在原有的自動化測試框架下,測試流程編排極易出現測試數據冗余分散、可維護性差、人工編碼成本高和測試驗證點易遺漏的問題。
如何解決上面的問題呢?
螞蟻金服在 SOFAStack 體系內研發了基于模型驅動的自動化接口測試框架 SOFAACTS。
SOFAACTS 介紹
SOFAACTS 由 IDE 和測試引擎組成,下圖為產品架構圖:
框架適配 TestNg+Spring 的測試上下文環境,以 YAML 為數據載體并在此上構建數據模型驅動,具有契合快速互聯網發展和復雜分布式金融系統特點的優良特性:
- 模型驅動和標準執行引擎;
- 精細化校驗和數據的自動回寫;
- 具有靈活的可擴展性;
- 用例可視化維護。
1.模型驅動和標準化
在測試用例數據與測試代碼分離的探索上,很多測試框架采用數據驅動的方式,但這也無法從容應對金融級的復雜業務場景??蚣軐τ美龜祿M行了深度抽象,提出模型驅動理念,研發出基于模型的數據驅動和標準化執行引擎,實現了數據和代碼的分離管理,同時對測試過程中的數據清理、數據準備、用例執行、結果校驗階段進行標準化,做到測試數據維護和測試代碼的簡潔優雅。用例執行時用戶無需關注數據如何加載,結果和期望數據如何比對,只需要關注測試數據和執行結果。
接下來,我們介紹如何使用 SOFAACTS 來高效率地完成一鍵生成數據模型生成和一鍵生成測試腳本。
數據模型生成
首先進行數據模型的準備,以方便之后模版化地快速創建對象和表,按照如下方式來準備 DB 數據、接口請求參數和返回結果對象模型。
DB 數據模型生成
1.任意測試代碼中右擊-> SOFAACTS 功能->生成 DB 表結構模板;
2.選擇生成的目標測試工程;
3.點擊確認后選擇并添加需要生成模型的表即可生成。
類對象模型生成
1.待構建模型的類定義的任意方法上右擊-> SOFAACTS 功能->模板生成,生成當前對象的模型;
2.生成完成后,我們可以在下圖位置找到生成的數據對象模型;
3.按照上述步驟,這樣我們就生成了接口對象模板。
現在,我們開始進行腳本一鍵生成:
測試腳本生成
SOFAACTS IDE 提供測試腳本自動生成功能,無需手動編碼。操作方式如下:
1.被測接口方法上點擊,選擇 SOFAACTS 功能-->生成測試用例;
2.這時會彈出一個文本框,填寫腳本生成的位置和編碼格式,如下:
3.填寫完成后,點擊 OK 即可自動生成如下測試腳本,可以看出模型驅動生成的腳本精簡而優雅。
原來數據驅動下的腳本是如下面圖這樣的,測試數據冗余分散,人工編碼成本高維護性差。
實踐證明 SOFAACTS 用例的測試代碼構建效率提高 80% ,測試數據精簡到 1/case 數。
2.精細化校驗
在解決復雜業務場景下測試驗證難、易遺漏等問題時,SOFAACTS 基于代碼行為跟蹤和分析理念,通過反射機制和日志解析實現結果數據的自動采集,以此做為場景用例校驗的數據基線,并在持續集成時進行基線全量因子匹配來達到精細化驗證。如下圖:
同時,為了提高自動采集后數據回填的效率,框架支持預校驗數據的自動寫入能力,進一步實現了數據的自動化精細校驗。如下圖:一鍵點擊即可采集到校驗數據基線,在螞蟻內部實踐中 ACTS 做到了結果校驗效率提升至少 80%,場景驗證 0 遺漏。
3.靈活可擴展
框架為了應對各種特殊業務測試情況而不需要過多改動,設計上應用高內聚與低耦合原則,支持既可以復用框架底層代碼又可以針對業務個性化情況做擴展的能力。整個框架提供了豐富的 API,測試執行過程每個方法、每個類以便測試執行過程的每個階段(如下圖)都能夠在測試腳本里面被重新為其他方法或者被其他多態的子類替換,這樣讓框架變得更通用,既賦予了框架輕量性又增加了靈活性。
自定義的 API 如下:
API 的具體使用請詳細學習產品使用手冊。
4.用例可視化維護
框架支持研發集成環境的一站式編輯,高效的用例腳本和數據維護,有效減少重復性的數據準備代碼。如下圖:
總結
以上便是對 SOFAACTS 測試框架的基本介紹,還有諸多能力各位可以查閱我們詳細的使用手冊。
目前,SOFAACTS 已經在螞蟻金服大范圍使用,分鐘級用例編寫 10 倍效能提升,累計用例個數 10w 以上,高頻功能使用可達近 2000 次/日,并持續保持著旺盛的生命力。
當前,代碼已開源托管在 GitHub 上,歡迎關注,同時也歡迎業界愛好者共同創造更好的 SOFAACTS。
GitHub 項目地址:https://github.com/alipay/sofa-acts
相關鏈接
- SOFAACTS :github.com/alipay/sofa…
- API 產品使用手冊:www.sofastack.tech/sofa-acts/d…
- SOFAACTS 詳細使用手冊:www.sofastack.tech/sofa-acts/d…
招聘
螞蟻金服金融核心測試技術團隊持續尋找對測試自動化、智能風險管控等方向充滿熱情的小伙伴加入,有意者請聯系 zhiqiang.li@antfin.com
公眾號:金融級分布式架構(Antfin_SOFA)
轉載于:https://juejin.im/post/5c8b086b6fb9a04a016537ab
總結
以上是生活随笔為你收集整理的蚂蚁金服开源自动化测试框架 SOFAACTS的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 学Excel函数公式,怎能不会这个组合套
- 下一篇: 每周一书《Spark与Hadoop大数据