《 自动化测试最佳实践:来自全球的经典自动化测试案例解析》一一1.6 正确度量...
1.6 正確度量
如何知道我們是否取得進步了呢?如何衡量成功?我們需要一些度量。我們的構建過程會對測試進行統計,所以很容易跟蹤每一個層次的測試數量:JUnit、FitNesse斷言和測試頁面、Cannoo WebTest斷言等。
這些原始數據并不能代表整個趨勢。我們,包括業務經理,都希望看到這些數字在每次迭代中都在增長。在每一次迭代中,指定一份染色的日歷——如果某天所有的回歸測試至少通過了一次,則將其日期標記為綠色,否則標記為紅色。業務人員也非常關注這些數據,如果他們在一行里面看到兩個標記為紅色的日期,他們會向我們詢問原因。他們也會記錄每一次迭代中JUnit、FitNesse和Canoo WebTest的測試數量。當測試數量減少時,他們也會關注并詢問原因。
【真知灼見】
讓經理看到自動化測試的好處。你需要不斷“推銷”自動化的好處。
讓測試結果對外可見也是一種宣傳的形式,可在整個公司范圍內加強公眾對自動化回歸測試的了解。客戶看到測試數量增加,并且發布的功能點越來越多。所以,當我們申請時間來重構產品或者改善構建過程時,我們的客戶就能夠理解了。
我們需要快速的反饋,所以每一次構建花費的時間是一種重要的度量。如果運行JUnit測試的持續構建花費的時間超過10分鐘,就開始備份檢入信息,那么就很難找出是哪一個測試導致了失效。當JUnit構建花費的時間超過10分鐘時,我們停下來查看是什么原因導致了運行緩慢。我們重構測試、添加硬件、升級操作系統、配置測試使其并發運行等,這些都會使反饋循環更快。對運行更高級測試的構建也是這么做的。如果FitNesse測試要花好幾個小時來運行,那么反饋太慢。我們要在測試覆蓋和速度之間權衡。幸運的是,虛擬機可以同時運行多個測試套件,減少反饋周期并且非常廉價。
【小竅門】
不要使自動化停滯不前:在需要的時候進行重構、使用新的硬件、重組測試。記住我們的目標(這里指更快速的反饋),并修改自動化測試來達到我們的目標。
總結
以上是生活随笔為你收集整理的《 自动化测试最佳实践:来自全球的经典自动化测试案例解析》一一1.6 正确度量...的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 创建用于云支持的枢纽
- 下一篇: 数据存储和云安全是选择云服务的关键