隨著科技飛速發(fā)展，以大模型為代表的新一代人工智能技術正成為軟件領域智能化轉型的核心驅動力。2024 年《政府工作報告》首次提出 “人工智能 +” 戰(zhàn)略行動，旨在推動人工智能賦能千行百業(yè) 。大模型不僅為傳統(tǒng)軟件注入新智力，提升生產(chǎn)效率、改善軟件質量、加速軟件創(chuàng)新迭代，還推動了軟件產(chǎn)品形態(tài)、軟件技術層面以及軟件與行業(yè)場景的深度變革。

在大模型行業(yè)蓬勃發(fā)展的浪潮下，APP 作為技術落地和用戶交互的關鍵載體，其質量直接影響著用戶體驗和企業(yè)的市場競爭力。一款出現(xiàn)諸多軟件缺陷的 APP，可能會出現(xiàn)閃退、崩潰、兼容性差等問題，這不僅會導致用戶投訴，更會使企業(yè)上線時間延遲，錯失市場先機，損害企業(yè)的品牌形象和口碑。因此，APP 測試這個環(huán)節(jié)，成為大模型技術能夠真正為用戶帶來優(yōu)質服務和體驗的關鍵防線，亦是各大模型產(chǎn)品上市前的必經(jīng)流程。

近期，Testin云測與國內(nèi)某頭部大模型廠商達成合作，共同攻克了大模型APP研發(fā)期間的質量保障問題。該企業(yè)是一家在 AI 大模型、人工智能基礎研究領域嶄露頭角的新銳企業(yè)，其業(yè)務范圍廣泛，涵蓋工程和技術研究與試驗發(fā)展、技術服務、軟件開發(fā)、計算機系統(tǒng)服務、人工智能應用軟件開發(fā)等多個領域。在軟件開發(fā)的進程中，該大模型廠商把大量的時間和精力都投入了產(chǎn)研方面，致力于打造先進的大模型產(chǎn)品。然而，在軟件測試領域，該廠商面臨著諸多挑戰(zhàn)。

由于缺乏專業(yè)的測試人員和充分的硬件機型設備， 短期內(nèi)實現(xiàn)APP兼容適配各大機型較為困難。這導致在產(chǎn)品上線前，該大模型APP缺陷難以被全面發(fā)現(xiàn)和修復。在測試過程中,該APP也頻繁出現(xiàn)各類問題：如在部分安卓和 iOS 設備上顯示異常、功能無法正常使用等，這些問題嚴重影響了產(chǎn)品的質量和上線進度，質量保障的不夠完備也對該產(chǎn)品上市造成了底層風險。該廠商作為一家對產(chǎn)品質量極其重視的新興科技公司，十分關注軟件測試這一過程難題，并積極與國內(nèi)AI測試頭部服務商Testin云測接洽，協(xié)商合作。

Testin 云測基于超300萬款APP測試項目經(jīng)驗，豐富的測試設備資源以及先進的測試技術和工具資源，經(jīng)過專業(yè)溝通與項目梳理，Testin云測為其規(guī)劃了匹配且專業(yè)的深度兼容測試服務。針對該大模型APP需要適配不同地區(qū)、不同系統(tǒng)設備的需求，Testin云測利用自身豐富的資源，提供了覆蓋國內(nèi)外主流終端版本的深度兼容測試服務。

在測試技術工具方面，Testin云測運用自主研發(fā)的 UI 自動化工具,該工具能夠模擬用戶在各種設備上的操作行為，高效地對該大模型APP 進行功能測試和兼容性測試。同時，通過自然語言處理技術，測試過程可實現(xiàn)無碼化腳本編寫，大大降低了測試腳本編寫的難度和時間成本，使得測試人員能夠更專注于測試策略的制定和優(yōu)化。結合強化學習技術，該大模型廠商能夠實時根據(jù)測試結果調(diào)整測試策略，提高測試的覆蓋率和有效性。

2024 年 11 月，該大模型廠商在完成功能測試等前期工作后，正式與Testin云測對接兼容測試相關需求與痛點。短時間內(nèi)，雙方迅速對接并組建了專項項目團隊，Testin云測調(diào)度了具備一線大模型測試經(jīng)驗的高級測試工程師、技術專家以及項目經(jīng)理參與其中，確保項目的順利進行。

在測試執(zhí)行過程中，一方面，由于該大模型APP涉及大量復雜的數(shù)據(jù)交互和處理的業(yè)務屬性，數(shù)據(jù)整合成為一大難題。不同模塊之間的數(shù)據(jù)格式、數(shù)據(jù)接口存在差異，給測試數(shù)據(jù)的準備和驗證增加了困難。另一方面，該大模型的部分團隊成員對Testin云測所采用的AI技術及模式，如無碼化腳本編寫、強化學習調(diào)整測試策略等，初期接受度較低，對新技術是否增加測試的風險和不確定性存在一定顧慮。

而針對數(shù)據(jù)整合難題，Testin云測團隊與該廠商開發(fā)團隊緊密合作，共同梳理數(shù)據(jù)流程和接口規(guī)范。通過開發(fā)專項數(shù)據(jù)轉換工具和腳本，實現(xiàn)了異格式數(shù)據(jù)的有效整合和驗證，確保了測試數(shù)據(jù)的準確性和完整性。為了推進大模型廠商內(nèi)部團隊對AI測試模式的進一步理解與認可，Testin云測協(xié)調(diào)了數(shù)次AI測試技術培訓和項目交流會議，詳細介紹AI測試技術的原理、優(yōu)勢以及實際應用案例。通過現(xiàn)場演示和實際操作，該大模型廠商內(nèi)部成員親歷體驗AI測試帶來的高效和便捷。同時，Testin云測還提供了后備技術支持和保障措施，確保在項目實施過程中，隨時解決項目因耦合AI測試技術應用可能出現(xiàn)的協(xié)調(diào)問題。

經(jīng)過雙方協(xié)作與努力，Testin云測高效完成并輸出了兼容性測試報告，初版報告顯示該大模型APP通過率較低，需盡快對產(chǎn)品進行進一步優(yōu)化。在后續(xù)的一個月里，該廠商開發(fā)團隊全力投入 Bug 優(yōu)化工作中，進一步優(yōu)化用戶體驗。2024年12 月中下旬，雙方再度合作，開展了一輪次深度兼容測試。經(jīng)過雙方的共同協(xié)作，產(chǎn)品順利通過測試，成功上線國內(nèi)和海外的應用市場。然而，產(chǎn)品上線后還遇到了 APP Store 的清榜問題。該大模型廠商第一時間向Testin云測咨詢，Testin云測迅速組織對應的專家團隊，深入分析問題的根源，經(jīng)過深入溝通并細致盤查，最終找到了問題的解決方案，幫助其迅速解決了上架被清榜問題

在與Testin云測緊密協(xié)作，攻克質量大關后，該大模型廠商在市場上取得了顯著成果。行業(yè)成績方面，該大模型宣布開源發(fā)布引起了行業(yè)震動，各大平臺紛紛為其宣傳推廣，成為推動AI領域進步的重要力量。下載量方面，該大模型在國內(nèi)外雙端應用市場 AI 大模型軟件下載量中位居榜首，迅速占領市場高地，產(chǎn)品功能與質量贏得了用戶和各行業(yè)的廣泛認可。

隨著 AI 大模型行業(yè)的持續(xù)發(fā)展，未來，Testin云測將繼續(xù)與大模型廠商緊密合作，不斷優(yōu)化測試服務和技術，助力其在激烈的市場競爭中持續(xù)創(chuàng)新和發(fā)展，共同推動 AI 大模型行業(yè)邁向新的高度。