[[399106]]

【51CTO.com快譯】軟件測試面臨的挑戰(zhàn)被大大低估了，難免沒有得到重視。即便是看似基礎(chǔ)的應(yīng)用程序，比如常見的移動應(yīng)用程序，您也可能采用數(shù)量驚人的測試方法、演練大量的路徑和條件，并對大量的設(shè)備配置進(jìn)行測試。在如今近乎持續(xù)的發(fā)布周期中，確保每次更新都增加價(jià)值，又不干擾用戶體驗(yàn)是一項(xiàng)艱巨的任務(wù)。

對于大企業(yè)組織而言，尤其困難重重。大規(guī)模環(huán)境下的測試需兼顧以下方面：

• 復(fù)雜的應(yīng)用程序堆棧，平均涉及900個應(yīng)用程序。單筆事務(wù)平均涉及82種不同的技術(shù)，從大型機(jī)和舊式自定義應(yīng)用程序到微服務(wù)和云原生應(yīng)用程序，不一而足。
• 根深蒂固的手動測試流程，它們專為瀑布式交付節(jié)奏和外包測試而設(shè)計(jì)，而不是面向敏捷、DevOps和“一切持續(xù)”模式。
• 要求極高的可靠性。據(jù)IDC聲稱，企業(yè)環(huán)境中一小時的停機(jī)時間可能造成50萬美元到100萬美元的損失。在許多行業(yè)，“快速行動時破壞系統(tǒng)”行不通。

尤其在大企業(yè)環(huán)境，測試是交付延遲的第一大原因，手動測試仍然很普遍(只有15%是自動化測試)，測試成本平均耗用IT支出總額的23%到35%。

不過，許多知名組織找到了克服這些障礙的方法。它們將測試轉(zhuǎn)化為數(shù)字化轉(zhuǎn)型計(jì)劃的助推器，從而加快交付，并騰出預(yù)算用于創(chuàng)新。

它們的做法有何不同?貴組織相比之下又如何?

引入企業(yè)應(yīng)用程序測試基準(zhǔn)

為了闡明行業(yè)領(lǐng)導(dǎo)者如何測試其公司乃至全世界依賴的軟件，Tricentis發(fā)布了首份《全球知名組織如何測試?》報(bào)告，介紹了全球知名組織在如何進(jìn)行測試。這些數(shù)據(jù)是通過與代表多個團(tuán)隊(duì)的高級質(zhì)量經(jīng)理和IT主管進(jìn)行一對一訪談收集而來的。參與者代表的團(tuán)隊(duì)使用各種注重質(zhì)量保證(QA)的功能測試自動化工具：開源及其他商業(yè)工具。開發(fā)人員測試和安全測試活動不在本文探討范圍。

該報(bào)告重點(diǎn)關(guān)注從采訪的100家知名組織收集而來的數(shù)據(jù)：《財(cái)富》 500強(qiáng)企業(yè)以及美洲、歐洲和亞太地區(qū)的知名政府實(shí)體。這里的所有營利性公司的收入不少于50億美元。

考慮到平均團(tuán)隊(duì)規(guī)模和團(tuán)隊(duì)數(shù)量，我們估計(jì)該報(bào)告顯示了這些領(lǐng)先組織中成千上萬測試人員的活動。

幾大要點(diǎn)

總的來看，來自這些知名組織的結(jié)果顯示了39%的測試自動化，但是誤報(bào)率高、低風(fēng)險(xiǎn)覆蓋率以及異常慢的測試周期。以下是幾個具體的要點(diǎn)。

• 缺乏穩(wěn)定性的自動化：平均測試自動化率(39%)比較高，但誤報(bào)率也比較高(22%)。對于缺乏穩(wěn)定做法(比如測試數(shù)據(jù)管理和服務(wù)虛擬化)的早期測試自動化工作而言，這很常見。
• 測試與風(fēng)險(xiǎn)不符：需求覆蓋率(63%)高，但風(fēng)險(xiǎn)覆蓋率低(25%)。團(tuán)隊(duì)可能會為每個需求分配數(shù)量相同的測試資源，而不是將精力集中在對業(yè)務(wù)最重要的功能上。
• 開發(fā)和測試周期不同步：平均測試周期時間(23天)非常不適合當(dāng)今快節(jié)奏的開發(fā)周期(其中87%早在2018年是兩周或更短)。由于測試周期這么漫長，測試難免落后于開發(fā)。
• 質(zhì)量很高(在一些情況下)：報(bào)告的缺陷泄漏率(3.75%)很低，通常<10%被認(rèn)為可以接受，<5%被認(rèn)為很好，<1%則很罕見。然而，只有約10%的受訪者跟蹤了缺陷泄漏，因此總的缺陷泄漏率可能更高。跟蹤該度量指標(biāo)的組織往往擁有更成熟的流程。
• 良好的基礎(chǔ)：組織在掌握測試成功的基本要素(采用適當(dāng)?shù)慕巧?、建立測試環(huán)境以及培養(yǎng)協(xié)作文化)等方面取得了長足的進(jìn)步。
• “一切持續(xù)”還沒有發(fā)生……很少有組織擁有> 75%的測試自動化率，或者采用諸如服務(wù)虛擬化和測試數(shù)據(jù)管理之類的穩(wěn)定實(shí)踐。有鑒于此，有限的CI / CD集成不足為奇。但是這一切在組織的優(yōu)先級列表上處于靠前的位置。
• 最大差距：領(lǐng)導(dǎo)者和落后者之間的最大差距在于，每天執(zhí)行的自動化測試的百分比、風(fēng)險(xiǎn)覆蓋率、泄漏到用戶驗(yàn)收測試(UAT)的缺陷和測試周期時間等方面。
• 主要改進(jìn)目標(biāo)：眾多組織希望在六個月內(nèi)做出最大短期改進(jìn)的三個方面是：風(fēng)險(xiǎn)覆蓋率、泄漏到UAT的缺陷、誤報(bào)率和測試周期時間。

原文標(biāo)題：How the World’s Top Organizations Test，作者：Cynthia Dunlop

【51CTO譯稿，合作站點(diǎn)轉(zhuǎn)載請注明原文譯者和出處為51CTO.com】