自动化测试工作考核指标
自動(dòng)化測(cè)試工作考核指標(biāo)
覆蓋率
web UI自動(dòng)化
主要指可以使用自動(dòng)化測(cè)試執(zhí)行的用例數(shù)與手工執(zhí)行的用例數(shù)量的一個(gè)比率,例如當(dāng)前功能手工測(cè)試用例數(shù)為A,自動(dòng)化實(shí)現(xiàn)的測(cè)試用例數(shù)為B,說明當(dāng)前功能自動(dòng)化測(cè)試覆蓋率為 B / A * 100,
其中優(yōu)先級(jí)為P0級(jí)別的用例需要達(dá)到100%,P1級(jí)別的用例60%,P2級(jí)別的用例20%,整體的需要達(dá)到60%及以上。
接口自動(dòng)化
- 接口測(cè)試覆蓋率應(yīng)該指的API文檔中的接口覆蓋率,這一塊的自動(dòng)化程度比功能測(cè)試用例要好做,我們應(yīng)該是盡量去覆蓋,測(cè)試環(huán)境需要95%以上,能夠做到100%就100%覆蓋,線上環(huán)境執(zhí)行需要達(dá)到80%,由于線上對(duì)于post請(qǐng)求的接口可能會(huì)造成數(shù)據(jù)污染。
- 接口可以從業(yè)務(wù)邏輯測(cè)試、業(yè)務(wù)邊界測(cè)試、參數(shù)組合、異常情況、性能測(cè)試、安全測(cè)試等方面進(jìn)行測(cè)試,其中接口自動(dòng)化用例需要包含單接口業(yè)務(wù)邏輯和接口關(guān)聯(lián)業(yè)務(wù)邏輯的用例
通過率
大部分人說通過率主要指測(cè)試執(zhí)行過程中用例通過數(shù)/執(zhí)行總數(shù),但是我們認(rèn)為應(yīng)該將通過率定義為自動(dòng)化用例執(zhí)行通過后,我們功能的正確性來進(jìn)行判斷,例如回歸自動(dòng)化里面,如果全部用例執(zhí)行通過,需要保證執(zhí)行用例的功能沒有P1級(jí)別以上的問題
但是需要注意為了用例執(zhí)行的通過率,減少了必要的檢查點(diǎn),這是不可取的。
有效性
- 指自動(dòng)化用例的有效性,例如同一個(gè)功能寫了大量用例,其中只有50%的用例是有效的,這是重復(fù)的工作,我們應(yīng)該保證用例有效率在90%以上,每條用例都是有效檢查點(diǎn)。
- 是指用例執(zhí)行的有效性,其中用例執(zhí)行失敗,代表存在問題,而不是代碼本身、環(huán)境等相關(guān)問題,我們應(yīng)該保證用例執(zhí)行的有效性在95%以上
穩(wěn)定性
主要只框架、用例執(zhí)行過程的穩(wěn)定性,例如用例時(shí)而執(zhí)行成功,時(shí)而失敗,這種情況的失敗率不超過5%。
自動(dòng)化的產(chǎn)出比
- 研發(fā)效率:為研發(fā)效率提升做的自動(dòng)化測(cè)試或者工具,看研發(fā)使用之后,對(duì)他們作用怎么樣,例如減少了他們手工測(cè)試多少時(shí)間,例如原來需要1人天,使用了自動(dòng)化,減少到0.5天
- 測(cè)試效率:項(xiàng)目加入自動(dòng)化后,減少了多少人力,對(duì)于重復(fù)執(zhí)行、回歸測(cè)試方面
- 測(cè)試質(zhì)量:發(fā)現(xiàn)了多少問題,大家項(xiàng)目測(cè)試未關(guān)注到的點(diǎn),主要是關(guān)聯(lián)功能的
代碼質(zhì)量
- 測(cè)試框架:合適的框架選型、業(yè)界流行的框架
- 編碼:穩(wěn)定性、可維護(hù)性、擴(kuò)展性、應(yīng)用性
效能工具開發(fā)
- 測(cè)試工具開發(fā):需要具備提升相關(guān)工作的效率,而不是為了寫工具而寫工具,例如寫了一個(gè)一鍵測(cè)試賬號(hào)、賬號(hào)授權(quán)等,這個(gè)就方便研發(fā)、測(cè)試需要賬號(hào)時(shí)加快了效率
- 流程推動(dòng):在產(chǎn)品、研發(fā)、測(cè)試流程中引入相關(guān)的工具流程,提升產(chǎn)品質(zhì)量,加快研發(fā)效率等
以上為內(nèi)容純屬個(gè)人理解,如有不足,歡迎各位大神指正,轉(zhuǎn)載請(qǐng)注明出處!
如果覺得文章不錯(cuò),歡迎關(guān)注微信公眾號(hào),微信公眾號(hào)每天優(yōu)先推送相關(guān)測(cè)試技術(shù)文章
總結(jié)
以上是生活随笔為你收集整理的自动化测试工作考核指标的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 用户管理和文件权限部分练习题
- 下一篇: 如果只定一个指标,市场运营的考核指标应该