主頁 >  其他 > 資料驅動測驗-從方法探研到最佳實踐

資料驅動測驗-從方法探研到最佳實踐

2022-12-16 07:23:41 其他

作者:劉紅妍

導讀

在自動化測驗實踐中,測驗資料是制造測驗場景的必要條件,本文主要講述了在溝通自動化框架如何分層,資料如何存盤,以及基于單元測驗pytest下如何執行,并通過實踐案例分享,提供資料驅動測驗的具體落地方案,

基本概念

資料驅動測驗(DDT)是一種方法,其中在資料源的幫助下重復執行相同順序的測驗步驟,以便在驗證步驟進行時驅動那些步驟的輸入值和/或期望值,在資料驅動測驗的情況下,環境設定和控制不是硬編碼的,換句話說,資料驅動的測驗是在框架中構建要與所有相關資料集一起執行的測驗腳本,該腳本利用了可重用的測驗邏輯,資料驅動的測驗提供了可重復性,將測驗邏輯與測驗資料分離以及減少測驗用例數量等優勢,

設計思路

2.1 測驗資料

在測驗程序中往往需要更加充分地測驗場景,而創建資料測驗,測驗資料包括輸入輸出,對輸出的自動化驗證等,創建測驗資料,可以通過手動拼裝,生產環境拷貝,或通過自動化工具生成,

2.2 資料存盤

資料驅動測驗中使用的資料源可以是Excel檔案,CSV檔案,Yaml檔案,資料池,ADO物件或ODBC源,

2.3 資料驅動優勢

  1. 如果應用程式開發還在進行當中,測驗者仍然可以進行腳本的撰寫作業,

  2. 減少了冗余和不必要的測驗腳本,

  3. 用較少的代碼生成測驗腳本,

  4. 所有資訊,如輸入、輸出和預期結果,都以適當的文本記錄形式進行存盤,

  5. 為應用程式的維護提供利了靈活性條件,

  6. 如果功能發生了變化,只需要調整特定的函式腳本,

實踐分享

基于Laputa框架現有測驗腳本,抽離測驗資料與測驗邏輯,實作資料驅動測驗,

Laputa框架簡介:Laputa框架基于 Pytest 集成了對API介面自動化, 以及對 Web應用, 移動端應用和 Windows 桌面應用 UI 等自動化的能力,具有可視化的Web界面工具, 便于配置執行規則,關聯執行腳本, 觸發用例執行,查看執行結果,提供CI集成服務,呼叫Jenkins API跟蹤持續集成結果,開放介面,實作流水線自動化測驗,

3.1 環境依賴

3.2.1 引數化配置方式

pytest引數化有兩種方式:

@pytest.fixture(params=[])

@pytest.mark.parametrize()

兩者都會多次執行使用它的測驗函式,但@pytest.mark.parametrize()使用方法更豐富一些,laputa更建議使用后者,

3.2.2 用 parametrize 實作引數化

parametrize( ) 方法原始碼:

【python】
def parametrize(self,argnames, argvalues, indirect=False, ids=None, scope=None):
  1. 主要引數說明

(1)argsnames :引數名,是個字串,如中間用逗號分隔則表示為多個引數名,

(2)argsvalues :引數值,引陣列成的串列,串列中有幾個元素,就會生成幾條用例,

  1. 使用方法

(1)使用 @pytest.mark.paramtrize() 裝飾測驗方法;

(2)parametrize('data', param) 中的 “data” 是自定義的引數名,param 是引入的引數串列;

(3)將自定義的引數名 data 作為引數傳給測驗用例 test_func;

(4)在測驗用例內部使用 data 的引數,

創建測驗用例,傳入三組引數,每組兩個元素,判斷每組引數里面運算式和值是否相等,代碼如下:

【python】
@pytest.mark.parametrize("test_input,expected",[("3+5",8),("2+5",7),("7*5",30)])
def test_eval(test_input,expected):
    # eval 將字串str當成有效的運算式來求值,并回傳結果
    assert eval(test_input) == expected

運行結果:

【python】

test_mark_paramize.py::test_eval[3+5-8]test_mark_paramize.py::test_eval[2+5-7] 

test_mark_paramize.py::test_eval[7*5-35]




============================== 3 passed in 0.02s ===============================

整個執行程序中,pytest 將引數串列 ("3+5",8),("2+5",7),("7*5",30) 中的三組資料取出來,每組資料生成一條測驗用例,并且將每組資料中的兩個元素分別賦值到方法中,作為測驗方法的引數由測驗用例使用,

3.2.3 多次使用 parametrize

同一個測驗用例還可以同時添加多個 @pytest.mark.parametrize 裝飾器, 多個 parametrize 的所有元素互相組合(類似笛卡兒乘積),生成大量測驗用例,

場景:比如登錄場景,用戶名輸入情況有 n 種,密碼的輸入情況有 m 種,希望驗證用戶名和密碼,就會涉及到 n*m 種組合的測驗用例,如果把這些資料一一的列出來,作業量也是非常大的,pytest 提供了一種引數化的方式,將多組測驗資料自動組合,生成大量的測驗用例,示例代碼如下:

【python】

@pytest.mark.parametrize("x",[1,2])@pytest.mark.parametrize("y",[8,10,11])

def test_foo(x,y):print(f"測驗資料組合x: {x} , y:{y}")

運行結果:

【python】
test_mark_paramize.py::test_foo[8-1] 
test_mark_paramize.py::test_foo[8-2] 
test_mark_paramize.py::test_foo[10-1] 
test_mark_paramize.py::test_foo[10-2] 
test_mark_paramize.py::test_foo[11-1] 
test_mark_paramize.py::test_foo[11-2]

分析如上運行結果,測驗方法 test_foo( ) 添加了兩個 @pytest.mark.parametrize() 裝飾器,兩個裝飾器分別提供兩個引數值的串列,2 * 3 = 6 種結合,pytest 便會生成 6 條測驗用例,在測驗中通常使用這種方法是所有變數、所有取值的完全組合,可以實作全面的測驗,

3.2.4 @pytest.fixture 與 @pytest.mark.parametrize 結合

下面講講結合 @pytest.fixture 與 @pytest.mark.parametrize 實作引數化,

如果測驗資料需要在 fixture 方法中使用,同時也需要在測驗用例中使用,可以在使用 parametrize 的時候添加一個引數 indirect=True,pytest 可以實作將引數傳入到 fixture 方法中,也可以在當前的測驗用例中使用,

parametrize 原始碼:

【python】
def parametrize(self,argnames, argvalues, indirect=False, ids=None, scope=None):

indirect 引數設定為 True,pytest 會把 argnames 當作函式去執行,將 argvalues 作為引數傳入到 argnames 這個函式里,創建“test_param.py”檔案,代碼如下:

【python】
# 方法名作為引數
test_user_data = https://www.cnblogs.com/Jcloud/p/['Tome', 'Jerry']
@pytest.fixture(scope="module")
def login_r(request):
    # 通過request.param獲取引數
    user = request.param
    print(f"\n 登錄用戶:{user}")return user


@pytest.mark.parametrize("login_r", test_user_data,indirect=True)
def test_login(login_r):
    a = login_r
    print(f"測驗用例中login的回傳值; {a}")
    assert a != "

運行結果:

【plain】
登錄用戶:Tome PASSED            [50%]測驗用例中login的回傳值; Tome
登錄用戶:Jerry PASSED           [100%]測驗用例中login的回傳值; Jerry

上面的結果可以看出,當 indirect=True 時,會將 login_r 作為引數,test_user_data 被當作引數傳入到 login_r 方法中,生成多條測驗用例,通過 return 將結果回傳,當呼叫 login_r 可以獲取到 login_r 這個方法回傳資料,

image.png

圖1 @pytest.fixture 與 @pytest.mark.parametrize 結合讀取資料圖例

3.2.5 conftest作用域

其作用范圍是當前目錄包括子目錄里的測驗模塊,

(1)如果在測驗框架的根目錄創建conftest.py檔案,檔案中的Fixture的作用范圍是所有測驗模塊,

(2)如果在某個單獨的測驗檔案夾里創建conftest.py檔案,檔案中Fixture的作用范圍,就僅局限于該測驗檔案夾里的測驗模塊,

(3)該測驗檔案夾外的測驗模塊,或者該測驗檔案夾外的測驗檔案夾,是無法呼叫到該conftest.py檔案中的Fixture,

(4)如果測驗框架的根目錄和子包中都有conftest.py檔案,并且這兩個conftest.py檔案中都有一個同名的Fixture,實際生效的是測驗框架中子包目錄下的conftest.py檔案中配置的Fixture,

3.3 代碼Demo

測驗資料存盤yaml檔案:

【YAML】
測驗流程:[
    {"name":"B2B貧訓運輸三方司機流程","senior":{"createTransJobResource":"B2B","createType":"三方","platformType":2}},
    {"name":"B2B貧訓運輸三方司機逆向流程","senior":{"isback":"True","createTransJobResource":"B2B","createType":"三方","platformType":2}},
  ]

測驗資料準備,定義統一讀取測驗資料方法:

【python】
def dataBuilder(key):dires = path.join(dires, "test_data.yaml")
    parameters = laputa_util.read_yaml(dires)[key]
    name = []
    senior = []
    for item in parameters:
        name.append(item['name'] if 'name' in item else '')
        senior.append(item['senior'] if 'senior' in item else '')
    return name, senior

測驗用例標識,通過@pytest.mark.parametrize方法驅動用例:

【python】
class TestRegression:
    case, param = dataBuilder('測驗流程')


    @pytest.mark.parametrize("param", param, ids=case)
    def test_regression_case(self, param):
        # 調度
        res = create_trans_bill(params)
        trans_job_code = res['data']['jobcode']
        carrier_type = params['createType'] if params['createType'] in ('自營', '三方') else '個體'


        # 執行
        work_info = select_trans_work_info_new(trans_job_code)
        trans_work_code = work_info['trans_work_code']
        if 'isback' in params and params['isback']:
            execute_param.update(isBack=params['isback'])
        execute_bill_core(**execute_param)


        # 結算
        if carrier_type != '自營':
            trans_fee_code = CreateTransFeeBillBase.checkTF(trans_job_code)
    receive_trans_bill_core(**bill_param)

總結

日常測驗程序中,無論是通過手動執行或者腳本執行,都需要利用資料驅動設計思路,這有助于提高測驗場景覆寫率,測驗用例的健壯性和復用性,及需求測驗效率,通過資料驅動測驗不僅可以得到更好的投資回報率,還可以達到質效合一的測驗流程,

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/540014.html

標籤:其他

上一篇:Jenkins實踐指南-04-Groovy基礎知識03

下一篇:淺析靜態應用安全測驗

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C#(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 2023年最新微信小程式抓包教程

    01 開門見山 隔一個月發一篇文章,不過分。 首先回顧一下《微信系結手機號資料庫被脫庫事件》,我也是第一時間得知了這個訊息,然后跟蹤了整件事情的經過。下面是這起事件的相關截圖以及近日流出的一萬條資料樣本: 個人認為這件事也沒什么,還不如關注一下之前45億快遞資料查詢渠道疑似在近日復活的訊息。 訊息是 ......

    uj5u.com 2023-04-20 08:48:24 more
  • web3 產品介紹:metamask 錢包 使用最多的瀏覽器插件錢包

    Metamask錢包是一種基于區塊鏈技術的數字貨幣錢包,它允許用戶在安全、便捷的環境下管理自己的加密資產。Metamask錢包是以太坊生態系統中最流行的錢包之一,它具有易于使用、安全性高和功能強大等優點。 本文將詳細介紹Metamask錢包的功能和使用方法。 一、 Metamask錢包的功能 數字資 ......

    uj5u.com 2023-04-20 08:47:46 more
  • vulnhub_Earth

    前言 靶機地址->>>vulnhub_Earth 攻擊機ip:192.168.20.121 靶機ip:192.168.20.122 參考文章 https://www.cnblogs.com/Jing-X/archive/2022/04/03/16097695.html https://www.cnb ......

    uj5u.com 2023-04-20 07:46:20 more
  • 從4k到42k,軟體測驗工程師的漲薪史,給我看哭了

    清明節一過,盲猜大家已經無心上班,在數著日子準備過五一,但一想到銀行卡里的余額……瞬間心情就不美麗了。最近,2023年高校畢業生就業調查顯示,本科畢業月平均起薪為5825元。調查一出,便有很多同學表示自己又被平均了。看著這一資料,不免讓人想到前不久中國青年報的一項調查:近六成大學生認為畢業10年內會 ......

    uj5u.com 2023-04-20 07:44:00 more
  • 最新版本 Stable Diffusion 開源 AI 繪畫工具之中文自動提詞篇

    🎈 標簽生成器 由于輸入正向提示詞 prompt 和反向提示詞 negative prompt 都是使用英文,所以對學習母語的我們非常不友好 使用網址:https://tinygeeker.github.io/p/ai-prompt-generator 這個網址是為了讓大家在使用 AI 繪畫的時候 ......

    uj5u.com 2023-04-20 07:43:36 more
  • 漫談前端自動化測驗演進之路及測驗工具分析

    隨著前端技術的不斷發展和應用程式的日益復雜,前端自動化測驗也在不斷演進。隨著 Web 應用程式變得越來越復雜,自動化測驗的需求也越來越高。如今,自動化測驗已經成為 Web 應用程式開發程序中不可或缺的一部分,它們可以幫助開發人員更快地發現和修復錯誤,提高應用程式的性能和可靠性。 ......

    uj5u.com 2023-04-20 07:43:16 more
  • CANN開發實踐:4個DVPP記憶體問題的典型案例解讀

    摘要:由于DVPP媒體資料處理功能對存放輸入、輸出資料的記憶體有更高的要求(例如,記憶體首地址128位元組對齊),因此需呼叫專用的記憶體申請介面,那么本期就分享幾個關于DVPP記憶體問題的典型案例,并給出原因分析及解決方法。 本文分享自華為云社區《FAQ_DVPP記憶體問題案例》,作者:昇騰CANN。 DVPP ......

    uj5u.com 2023-04-20 07:43:03 more
  • msf學習

    msf學習 以kali自帶的msf為例 一、msf核心模塊與功能 msf模塊都放在/usr/share/metasploit-framework/modules目錄下 1、auxiliary 輔助模塊,輔助滲透(埠掃描、登錄密碼爆破、漏洞驗證等) 2、encoders 編碼器模塊,主要包含各種編碼 ......

    uj5u.com 2023-04-20 07:42:59 more
  • Halcon軟體安裝與界面簡介

    1. 下載Halcon17版本到到本地 2. 雙擊安裝包后 3. 步驟如下 1.2 Halcon軟體安裝 界面分為四大塊 1. Halcon的五個助手 1) 影像采集助手:與相機連接,設定相機引數,采集影像 2) 標定助手:九點標定或是其它的標定,生成標定檔案及內參外參,可以將像素單位轉換為長度單位 ......

    uj5u.com 2023-04-20 07:42:17 more
  • 在MacOS下使用Unity3D開發游戲

    第一次發博客,先發一下我的游戲開發環境吧。 去年2月份買了一臺MacBookPro2021 M1pro(以下簡稱mbp),這一年來一直在用mbp開發游戲。我大致分享一下我的開發工具以及使用體驗。 1、Unity 官網鏈接: https://unity.cn/releases 我一般使用的Apple ......

    uj5u.com 2023-04-20 07:40:19 more