自動化測試：behave

来源:http://www.cnblogs.com/ASPNET2008/archive/2017/09/10/7500454.html
-Advertisement-
Play Games

在系統開發過程中，我們一般個人參與的開發都是局部的，自己負責的一部分與其它團隊成員的成果組合在一起才能實現用戶的完整行為。比如常見的電商系統就有幾個主要的流程 商品搜索 購物車 訂單 支付 物流 這些模塊複雜的足以形成各自的團隊，不同團隊相互之間依據一定的介面來配合協作。在開發階段可以基於介面各自獨 ...


在系統開發過程中，我們一般個人參與的開發都是局部的，自己負責的一部分與其它團隊成員的成果組合在一起才能實現用戶的完整行為。比如常見的電商系統就有幾個主要的流程

  • 商品搜索
  • 購物車
  • 訂單
  • 支付
  • 物流

這些模塊複雜的足以形成各自的團隊，不同團隊相互之間依據一定的介面來配合協作。在開發階段可以基於介面各自獨立開發，對於依賴其它模塊的介面可以通過介面mock來完成。但mock方式本身是有使用場景的，一旦依賴方介面穩定後，就會調用實際服務來代替mock介面。

場景A： 在上面提到的購物流程都完善的前提下，一個做物流系統的同事需要真實模似真實的用戶場景產生物流單，他需要去相應的環境進行商品搜索，加入購物車，登錄，下單，付款等眾多操作之後才會輪到他的模塊登場。想想都是件相當繁瑣的事情，所以希望有一種很快捷的方式代替人工去完成這些複雜且花時間的體力勞動。當然你也可以找測試妹子說：那個誰，幫我在某某環境下一個單我測試物流單邏輯。

期望只需要執行一條命令，就能快速得到指定條件的訂單。

場景B： 在上面提到的購物流程中，任意修改某個流程都有可能對整體流程構成不同程度的影響，有沒有快速簡捷的方式給我們確認新的修改是否會影響主流程的變更呢？一般的作法就是需要測試人員去回歸主流程，但這個成本比較高而且並一定那麼的可靠，我們需要一種成本低又不知疲倦的工具為我們完成上面的工作，即使達不到100%人工測試的效果。

期望在代碼提交後，每日構建工具能夠在修改之後的版本上執行主流程的測試用例，確保第一時間反饋出問題來，而不需要等到測試人員報BUG或者是線上用戶反饋出問題來才被動知道。

場景C：

在做一個稍微大型的功能後，為了確保各個子功能能夠相互協作正常，我們一般首先會對子功能做單元測試，然後對大功能做集成測試。在集成測試時，需要快速的定義測試用例並得到預期結果。

集成測試的方式可能有很多種，比如我之前對http api介面的集成測試就依靠谷歌的postman（當然你也可以用junit來搞集成測試，在裡面做各種斷言）。但這種方式需要人工判斷介面是否正確，因為此工具只具備執行能力並不具備判斷能力。所以需要一款脫離特定語言的測試用例工具來幫助我們完成，而且非常容易的能夠對環境進行擴展，比如定義開發環境，測試環境，預上線環境，生產環境等。

behave簡要說明

依賴項

與python配合完成，所以需要在執行測試用例的機器上至少需要安裝：

  • python
  • behave

另外可以為behave創建單獨的python環境，可以引入virtualenv。每次運行時通過source xxxenv/bin/activate來進入特定的python環境，source的目的就是替換環境變數。

其它組件

比如我主要測試http api，所以會用到下麵一些庫：

  • requests, 用於做http請求的
  • json,用於處理字元串與json之間的各種轉換
  • operator，操作符，比如a>b之類的函數表達

參考文檔

https://pythonhosted.org/behave/index.html

項目背景

針對HTTP API的集成測試的自動化。上面所說的場景A/B/C是我暫時理解的，不同的人在不現的階段對自動化測試的需求不一樣。比如我做為業務系統的開發者，場景C可以幫助在我提交大型功能前做聯調測試，系統穩定後，我們去修改一個功能但依賴其它模塊數據時，希望快速產生預期數據那麼場景A適合我們。當我們比較惶恐的修改某種功能時，場景B的主流程測試能夠給我們信心。

項目結構

這裡以文章前面說的購物場景為例。

envbehave

是創建的一個python獨立環境，可選。

features

behave相關的所有測試用例文件

  • dev 存放測試用例的目錄，可以按業務定義名稱好作區分，比如訂單相關的可以叫 order。
  • steps，存放配置測試用例文件的執行文件，behave+python
  • environment.py，是為了支持多環境而創建的，比如開發，測試，預上線，生產環境可任意切換
  • service.py，封裝了基礎功能，目的就是簡化step以及測試用例的代碼

代碼實現

多環境支持

behave提供了對於環境的控制，我們可以在如下函數中添加自己的邏輯：

  • before_step
  • before_scenario
  • before_feature
  • before_tag
  • before_all

根據之前所述，集成測試可能涉及到不同小組提供的api，所以可以定義如下數據：

CONFIG = {
    'dev': {
        'hosts': {
            'product': 'http://localhost:1234/api/product',
            'order':'http://localhost:1234/api/order',
            'cart': 'http://localhost:1234/api/cart',
            'pay': 'http://localhost:1234/api/pay',
            'user': 'http://localhost:1234/api/user',
            'logistics': 'http://localhost:1234/api/logistics',
        }
    },
    'test': {
        'hosts': {
            'product': 'http://test.jim.com/api/product',
            'order':'http://test.jim.com/api/order',
            'cart': 'http://test.jim.com/api/cart',
            'pay': 'http://test.jim.com/api/pay',
            'user': 'http://test.jim.com/api/user',
            'logistics': 'http://test.jim.com/api/logistics',
        }
    },


}

然後在before_all中進行數據初始化,環境參數可以通過命令行的-D參數來控制，比如: -D env=dev

env = 'dev'
def before_all(context):
    global env
    if (context.config.userdata.get('env')):
        env = context.config.userdata['env']

    for k, v in CONFIG[env]['hosts'].items():
        hosts[k] = v

基礎功能封裝

封裝通用的功能，便於使用測試用例簡單方便，容易管理。創建一個service.py,主體結構如下：

#coding=utf-8
import requests, json

hosts = {}
class BddService(object):
    def __init__(self, api, data={}, headers={}):
       # 數據初始化

    def __before__(self, context, data, url):

       # 處理數據，比如從測試用例中取參數，存放到context的requestData中，供後續的http請求使用

    def __after__(self, context, r, url):
       # 從http request中獲取數據，存放到context的responseData中，供後續的斷言使用

    def get(self, context, url, data={}):
       # 完成 http 調用
  • 測試用例參數指定

我們需要在用例下麵直觀靈活的指定參數，可以通過behave提供的文本功能實現，它可以讀一段多行文本到context.text變數中，然後我們對去做處理。

When 搜索商品
    """
    {"name":"product1"}
    """

在before函數中完成值的填充,將最終的請求參數存放在context的requestData變數中。


def __before__(self, context, data, url):

    if context.text:
        print (context.text)
        o = json.loads(context.text)
        print (o)
        for k in o:
            data[k] = o[k]
    context.requestData = data
  • HTTP請求結構處理

在after函數中完成取值，將HTTP請求的結構存放在context的responseData變數中。對於HTTP請求的結構支持兩類數據，一類是json數據，一類是簡單值（比如直接返回一個數字或者一個bool值或者是一個字元串）。

def __after__(self, context, r, url):
    try:
        context.response = r.json()
        if context.response.get('value', None):
            context.responseData = context.response.pop('value')
            try:
                if type(context.responseData) == str or type(context.responseData) == unicode:
                    context.responseData = json.loads(context.responseData)
           except:
        if not hasattr(context, 'responseData') or context.responseData == None:
   except:
        context.response = r.text

上面邏輯中的get('value')，是特殊的數據結構（約定HTTP介面都會按一定的固定格式返回），比如我這裡的結構,其中的value才是真正的業務數據。

{
    "result": true,
    "error": null,
    "value": [
        {
            "id": 1,
            "name": "product1",
            "productImage": null
        }
    ]
}

斷言

behave預設情況下進行斷言，需要在@then中完成斷言，就需要為每個測試用例編寫獨立的斷言函數，可以做統一的封裝，主體支持兩類操作。

  • 判斷請求響應是否正常
  • 判斷請求的值是否符合預期

創建一個assert.py

  • 編寫兩個斷言函數

從@then腳本後面讀取多行文本，如果為空直接跳過斷言。

@then(u'得到響應數據')
def step_impl(context):
    if not context.text:
        return
    try:
        expect = json.loads(context.text)
    except:
        expect = context.text
    assertObj(expect, context.responseData)

@then(u'得到響應')
def step_impl(context):
    if not context.text:
        return
    expect = json.loads(context.text)
    assertObj(expect, context.response)
  • 編寫斷言函數

需要判斷比較值的類型，因為只支持對基本類型的數據做斷言，如果是列表就需要迭代到成員對象，至於迭代到基本數據類型（比如字元串，數字），然後利用operator庫做處理。

def assertObj(expect, actual):
    if(type(expect) == list):
        for i in range(len(expect)):
            assertObj(expect[i], actual[i])
    elif type(expect)==bool or type(expect)==str or type(expect)==int:
        assertObjKey(None, expect, actual)
    else:
        for k in expect:
            if(type(expect[k]) == dict or type(expect[k]) == list):
                if(type(actual[k]) != type(expect[k])):
                    actual[k] = json.loads(actual[k])
                assertObj(expect[k], actual[k])
            else:
                assertObjKey(k, expect[k], actual[k])


def assertObjKey(k,originExpect,actualValue):
    #測試用例的值支持<,<=,<,<=,!=,==
    #樣例數據:{"premium":"ge$0"}
    expectArray = str(originExpect).split("$");

    if (len(expectArray) == 2):
        action = expectArray[0];
        realExpect = expectArray[1]
       if action == "ge":
            assert operator.ge(actualValue, long(realExpect))
        elif action == "gt":
            assert operator.gt(actualValue, long(realExpect))
        elif action == "le":
            assert operator.le(actualValue, long(realExpect))
        elif action == "lt":
            assert operator.lt(actualValue, long(realExpect))
        elif action == "ne":
            assert operator.ne(actualValue, realExpect)
        elif action == "eq":
            assert operator.eq(actualValue, realExpect)
        else:
            assert originExpect == actualValue
    else:
        assert originExpect == actualValue

編寫step

可以根據調用的不同業務介面創建不同的step文件，比如如下圖所示：

這裡貼一個登錄的step腳本示例,其餘的大同小異。

R = BddService('user')

@given(u'初始化數據')
def given_init(context):
    context.userName="jim"
    context.password="123456"

@when(u'登錄')
def step_impl(context):
    R.get(context,"/login",{"userName":context.userName,"password":context.password})

創建實例

python中創建實例時沒有關鍵字new，這與其它語言有比較大的區別，剛開始總是覺得彆扭，現在看還是彆扭。

完成測試用例

創建一個order.feature


Feature:訂單流程測試


Scenario:常規下單流程

    Given 初始化數據

    When 登錄
    Then 得到響應
    """
    {"result":true}
    """

    When 搜索商品
    """
    {"name":"product1"}
    """
    Then 得到響應
    """
    {"result":true}
    """

    When 加入購物車
    Then 得到響應
    """
    {"result":true}
    """

    When 提交訂單
    Then 得到響應數據
    """
    1
    """

    When 支付訂單
    Then 得到響應數據
    """
    1
    """

    When 生成物流單
    Then 得到響應數據
    """
    1
    """

執行測試用例

只需要在對應的目錄執行如下腳本即可愉快的執行測試用例。

behave -D env=test features/dev/order.feature

如果運行正常，會看出如下的輸出，黃色的代表執行通過，如果執行失敗會列印出錯誤信息，以及用例執行到哪一步報錯。另外說明下，behave在執行正常的情況下會屏蔽通過print輸出的日誌，貌似可以通過參數調，有興趣的可以研究研究。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 流暢的python和cookbook學習筆記（六）
    1.同時迭代多個序列（zip（函數）） 使用zip()函數可以同時迭代多個序列。 zip(a, b)的作用是創建一個迭代器，產生元組（x， y），x取自a序列，y取自b序列，當a，b序列中其中一個沒有元素可以繼續迭代時，整個迭代過程結束。 如果想對多餘的序列進行迭代，即上面a中的4，5，6元素，可以 ...
  • 建立一個漂亮的PHP驗證碼類文件及調用方式
    //驗證碼類class ValidateCode { private $charset = 'abcdefghkmnprstuvwxyzABCDEFGHKMNPRSTUVWXYZ23456789';//隨機因數 private $code;//驗證碼 private $codelen = 4;//驗 ...
  • 4.spring di
    spring di,即依賴註入，從應用的淺顯意義來講就是對屬性賦值 1.用setter賦值,在spring的applicationContext.xml配置文件的bean下的property標簽 屬性name指定屬性名,屬性value指定值，一般用於基本數據 類型的包裝類型 屬性ref指定值，一般用 ...
  • 互聯網世界中的C語言——我的golang學習筆記：1（基礎語法快速過）
    前言 學習任何知識都會有一個學習背景 最近，我們團隊乃至我司整個雲服務，上go的呼聲越來越高！新服務已經開始用go開發，部分現有Java版的服務重構為go也只是時間問題而已，故相關技術積累勢在必行！在雲網路的分散式服務乃至在一切高併發，分散式後臺服務中，golang都有著很大的優勢。 據我對國內互聯 ...
  • 3.springioc bean 的幾個屬性
    1.lazy-init="false" 預設值為false，指的是bean的創建時機的spring容器一啟動就會載入這些類.有點是及時發現bean的相關錯誤，因為spring容器啟動，bean也都會創建完畢，如果bean有什麼差錯都會報出，缺點就是如果bean對象的開銷較大，那會提前占用記憶體. 如果 ...
  • Python中numpy.apply_along_axis()函數的用法
    numpy.apply_along_axis(func, axis, arr, *args, **kwargs)： 必選參數：func,axis,arr。其中func是我們自定義的一個函數，函數func(arr)中的arr是一個數組，函數的主要功能就是對數組裡的每一個元素進行變換，得到目標的結果。 ...
  • 課堂練習：Python-三級菜單
    #!/usr/bin/env python # _authon bruce # @date: 2017/09/09 15:47 menu = { "江西":{ "贛州":{ "興國":{}, "於都":{} }, "南昌":{}, "吉安":{} }, "上海"... ...
  • 2.springioc實例化bean的三個方法
    1.構造器 也就是在上一篇講的那個例子，調用預設的無參構造函數 2.靜態工廠方法 1）創建需要執行的方法的類 2)創建靜態工廠 3)編寫applicationContext.xml配置文件 4)啟動容器,創建對象，調用方法 3.實例工廠方法(略) ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類