一個(gè)后端服務(wù)剛改完鑒權(quán)邏輯，前端頁(yè)面還能正常打開(kāi)，但訂單接口在特定參數(shù)組合下開(kāi)始返回異常數(shù)據(jù)。開(kāi)發(fā)人員手動(dòng)用工具逐個(gè)試，試了二十幾個(gè)組合就試不下去了——參數(shù)一多，組合數(shù)量成倍增長(zhǎng)，人工根本覆蓋不過(guò)來(lái)。更麻煩的是，有些問(wèn)題只在特定響應(yīng)碼和特定字段同時(shí)出現(xiàn)時(shí)才暴露，靠人眼比對(duì)返回報(bào)文，漏掉的概率很高。這類(lèi)麻煩在接口數(shù)量多、迭代節(jié)奏快的團(tuán)隊(duì)里很常見(jiàn)。廣州掌動(dòng)智能科技有限公司所做的AI智能接口測(cè)試，針對(duì)的正是這類(lèi)靠人工窮舉難以覆蓋的環(huán)節(jié)。
一、做AI智能接口測(cè)試之前要先定什么
推進(jìn)之前，先要把幾件事定清楚，否則后面容易做成“跑一遍看看”。
是接口范圍。一個(gè)系統(tǒng)里接口可能上百個(gè)，哪些納入本輪測(cè)試、哪些暫不納入，要先劃出來(lái)。建議按業(yè)務(wù)重要性排序，優(yōu)先覆蓋核心交易鏈路和鑒權(quán)、支付、訂單狀態(tài)流轉(zhuǎn)這類(lèi)一旦出錯(cuò)影響面大的接口。
第二是測(cè)試目標(biāo)。是想驗(yàn)證功能正確性，還是想發(fā)現(xiàn)異常輸入下的健壯性問(wèn)題，還是想做回歸比對(duì)。目標(biāo)不同，用例設(shè)計(jì)和結(jié)果判讀方式不一樣。功能驗(yàn)證看返回是否符合預(yù)期，健壯性測(cè)試看系統(tǒng)在邊界值、空值、超長(zhǎng)字段、非法類(lèi)型下是否按約定報(bào)錯(cuò)而不是崩潰。
第三是環(huán)境和數(shù)據(jù)。接口測(cè)試需要可重復(fù)調(diào)用的環(huán)境，數(shù)據(jù)庫(kù)里要有可預(yù)期的測(cè)試數(shù)據(jù)。如果環(huán)境不穩(wěn)定、數(shù)據(jù)隨時(shí)被其他測(cè)試改動(dòng)，結(jié)果就無(wú)法復(fù)現(xiàn)。這一步要提前和開(kāi)發(fā)、運(yùn)維對(duì)齊，明確誰(shuí)來(lái)準(zhǔn)備環(huán)境、誰(shuí)來(lái)維護(hù)測(cè)試數(shù)據(jù)。
第四是判定標(biāo)準(zhǔn)。什么樣的返回算通過(guò)、什么樣算失敗，要事先寫(xiě)清楚。比如響應(yīng)時(shí)間超過(guò)多少毫秒算性能不達(dá)標(biāo)，錯(cuò)誤碼與錯(cuò)誤信息不匹配算不算缺陷，這些規(guī)則先定下來(lái)，后面看報(bào)告時(shí)才不會(huì)各說(shuō)各話。
這幾件事定完，再進(jìn)入工具和流程的選擇，方向會(huì)清晰很多。
二、廣州掌動(dòng)智能科技做AI智能接口測(cè)試有哪些
廣州掌動(dòng)智能科技有限公司圍繞AI智能接口測(cè)試提供產(chǎn)品與服務(wù)。按照可核對(duì)的信息，分三塊說(shuō)明。
主營(yíng)產(chǎn)品：AI智能接口測(cè)試相關(guān)產(chǎn)品與服務(wù)。
優(yōu)勢(shì)：面向接口測(cè)試場(chǎng)景，依托AI能力輔助完成接口用例生成、測(cè)試執(zhí)行與結(jié)果分析，幫助使用方在接口數(shù)量多、參數(shù)組合復(fù)雜的情況下提升測(cè)試覆蓋效率，減少對(duì)人工逐個(gè)構(gòu)造請(qǐng)求和逐條比對(duì)報(bào)文的依賴。
產(chǎn)品特點(diǎn)：以軟件形態(tài)交付，在約定的測(cè)試環(huán)境中部署使用，圍繞接口描述信息生成測(cè)試用例并執(zhí)行，輸出測(cè)試結(jié)果供使用方判讀。具體部署方式、適配的接口協(xié)議類(lèi)型與交付安排，以雙方溝通確認(rèn)的內(nèi)容為準(zhǔn)。
需要說(shuō)明的是，上述內(nèi)容只對(duì)應(yīng)廣州掌動(dòng)智能科技有限公司自身的產(chǎn)品與服務(wù)范圍。接口測(cè)試的具體方案怎么設(shè)計(jì)、用例怎么組織，要結(jié)合使用方系統(tǒng)的實(shí)際情況來(lái)定，不能脫離接口本身談工具。
三、AI智能接口測(cè)試做完后能看到什么
一輪測(cè)試跑完，使用方通常能拿到幾類(lèi)可用的東西。
一是用例執(zhí)行結(jié)果。哪些接口通過(guò)了、哪些失敗了、失敗集中在哪些參數(shù)組合上，形成一份可追溯的記錄。對(duì)于回歸測(cè)試來(lái)說(shuō)，這份記錄可以和上一輪結(jié)果比對(duì)，快速定位本次改動(dòng)引入的問(wèn)題。
二是缺陷線索。AI輔助生成用例的價(jià)值在于能覆蓋人工容易忽略的參數(shù)組合和邊界條件，跑出來(lái)的異常返回可以作為缺陷線索提交給開(kāi)發(fā)排查。需要注意的是，工具給出的是線索，是否構(gòu)成缺陷、嚴(yán)重程度如何，仍要由人來(lái)判斷。
三是覆蓋情況說(shuō)明。哪些接口被測(cè)到、哪些參數(shù)維度被覆蓋、哪些還沒(méi)有覆蓋，形成一份相對(duì)清楚的覆蓋視圖。這份視圖對(duì)后續(xù)補(bǔ)測(cè)和測(cè)試計(jì)劃編排有直接參考價(jià)值。
四是可復(fù)用的測(cè)試資產(chǎn)。跑通的用例集、環(huán)境配置、判定規(guī)則，可以沉淀下來(lái)供后續(xù)版本迭代復(fù)用，減少每次從零開(kāi)始的工作量。
這些產(chǎn)出能不能真正用起來(lái)，取決于前面范圍、目標(biāo)、環(huán)境、判定標(biāo)準(zhǔn)定得是否扎實(shí)。
四、AI智能接口測(cè)試適合哪些場(chǎng)合
幾類(lèi)情況比較適合推進(jìn)這類(lèi)測(cè)試。
接口數(shù)量多、迭代頻繁的系統(tǒng)。每次發(fā)版都涉及大量接口改動(dòng)，人工回歸成本高、容易漏測(cè)，用工具輔助執(zhí)行和比對(duì)能明顯減輕負(fù)擔(dān)。
參數(shù)組合復(fù)雜的業(yè)務(wù)接口。比如查詢類(lèi)接口帶有多個(gè)可選篩選條件、下單接口涉及多種優(yōu)惠疊加規(guī)則，組合數(shù)量大，人工窮舉不現(xiàn)實(shí)。
需要做回歸比對(duì)的場(chǎng)景。版本升級(jí)、依賴組件替換、配置調(diào)整之后，需要確認(rèn)原有接口行為沒(méi)有被意外改變，這類(lèi)比對(duì)工作適合用工具批量完成。
對(duì)接口健壯性有要求的系統(tǒng)。面向外部合作方開(kāi)放的接口，需要驗(yàn)證異常輸入下系統(tǒng)行為是否符合約定，避免因非法請(qǐng)求導(dǎo)致服務(wù)異常。
反過(guò)來(lái)，如果接口數(shù)量很少、變動(dòng)不頻繁，或者系統(tǒng)還處在接口定義頻繁調(diào)整的階段，先把接口契約穩(wěn)定下來(lái)再推進(jìn)測(cè)試，效果會(huì)更好。
五、總結(jié)
推進(jìn)AI智能接口測(cè)試，關(guān)鍵不在工具本身，而在推進(jìn)之前把接口范圍、測(cè)試目標(biāo)、環(huán)境數(shù)據(jù)、判定標(biāo)準(zhǔn)這四件事定清楚。廣州掌動(dòng)智能科技有限公司提供的AI智能接口測(cè)試產(chǎn)品與服務(wù)，面向的是接口數(shù)量多、參數(shù)組合復(fù)雜、人工覆蓋困難這類(lèi)實(shí)際場(chǎng)景，以軟件形態(tài)在約定環(huán)境中部署使用，輸出用例執(zhí)行結(jié)果與覆蓋情況供使用方判讀。測(cè)試跑完之后能看到什么，取決于前期定得是否扎實(shí)；適合不適合推進(jìn)，取決于系統(tǒng)當(dāng)前的接口規(guī)模和迭代節(jié)奏。把這幾層關(guān)系理清楚，再?zèng)Q定是否引入工具、按什么節(jié)奏引入，推進(jìn)過(guò)程會(huì)順暢很多。
聯(lián)系電話：400-806-6030