多PVC的G.SHDSL接口卡測(cè)試方法研究

3.2.3 性能測(cè)試用例

這里主要考慮兩項(xiàng)重要的性能指標(biāo)的測(cè)試：吞吐量和時(shí)延。用到的測(cè)試工具即上面所提到的SmartBits測(cè)試儀。設(shè)計(jì)用例如下：(1)吞吐量：G.SHDSL接口卡上下行速率對(duì)稱，可以同時(shí)測(cè)試。包括1、2、4口接口卡的分別測(cè)試，對(duì)PVC值的選取可以遵循邊界取值法，再隨機(jī)取一個(gè)值測(cè)試。同時(shí)關(guān)注1、2、4口的吞吐量是否是倍數(shù)關(guān)系。(2)時(shí)延：此項(xiàng)測(cè)試是在吞吐量的范圍內(nèi)進(jìn)行的，選取吞吐量的20%、40%、60%、80%分別進(jìn)行測(cè)試[2]。測(cè)試的前提是無(wú)丟包，如果發(fā)現(xiàn)由于某些外界因素而造成的丟包需要重新測(cè)試,這樣才能保證測(cè)試數(shù)據(jù)的有效性。

3.2.4 異常測(cè)試用例

此部分是對(duì)G.SHDSL接口卡在壓力下的穩(wěn)定性測(cè)試，設(shè)計(jì)用例如下：(1)承載大流量的情況下長(zhǎng)時(shí)間(72 h以上)反復(fù)配置/刪除配置操作，可以借助自動(dòng)化腳本，隨時(shí)抽取檢測(cè)鏈路流量是否正常流通，且設(shè)備是否存在內(nèi)存泄漏等;(2)承載大流量的情況下長(zhǎng)時(shí)間(72 h以上)對(duì)接口卡反復(fù)執(zhí)行激活/去激活，包括shutdown/undo shutdown和active/deactive操作;(3)長(zhǎng)時(shí)間(72 h以上)超出吞吐量范圍打流，測(cè)試儀上設(shè)置多條不同流量(包括不同包長(zhǎng)、不同協(xié)議流量、分片報(bào)文等)，觀察設(shè)備是否出現(xiàn)內(nèi)存泄漏、重啟[2]。

4 測(cè)試執(zhí)行及有效性分析

4.1 用例執(zhí)行

(1) 接口卡遍歷。對(duì)以上用例的執(zhí)行需要在1、2、4口接口卡上分別執(zhí)行，相對(duì)來(lái)說(shuō)工作量較大，因此對(duì)于PVC值的選取或是PPPoE最大用戶的測(cè)量可以借助簡(jiǎn)單的自動(dòng)化腳本實(shí)現(xiàn)。但需要DSLAM端配合的用例則只能手動(dòng)執(zhí)行。

(2) 測(cè)試參數(shù)選取。由于接口卡重啟需要大約30~40 s的時(shí)間，對(duì)執(zhí)行shutdown/undo shutdown和active/deactive操作時(shí)要考慮進(jìn)去。

(3) 注意事項(xiàng)。某些缺陷的暴露是在設(shè)備長(zhǎng)期運(yùn)行情況下產(chǎn)生的，因此對(duì)其性能及壓力穩(wěn)定性的測(cè)試需要長(zhǎng)時(shí)間觀察。對(duì)設(shè)備接口可以交替變化使用，如GE、FE、5FE等，對(duì)上面的測(cè)試組網(wǎng)可以靈活變換。對(duì)每次測(cè)試的組網(wǎng)及條件需要明確，這對(duì)缺陷的分析及問題復(fù)現(xiàn)有很大幫助。

4.2 缺陷提交及測(cè)試有效性分析

(1) 缺陷發(fā)現(xiàn)的統(tǒng)計(jì)

根據(jù)測(cè)試過(guò)程中發(fā)現(xiàn)的缺陷按照提示、一般、嚴(yán)重和致命的級(jí)別提交的問題單統(tǒng)計(jì)如圖2所示。

圖2是軟件產(chǎn)品整個(gè)測(cè)試過(guò)程中問題單個(gè)數(shù)的統(tǒng)計(jì)值，因G.SHDSL是新研發(fā)出來(lái)的接口卡，所以出現(xiàn)的致命、嚴(yán)重問題單個(gè)數(shù)較多。圖3是軟件交付的問題統(tǒng)計(jì)。

這里按照缺陷的級(jí)別及數(shù)目可以計(jì)算出特性問題單的DI值：

DI值=問題單數(shù)目×每個(gè)問題單的權(quán)值

其中提示、一般、嚴(yán)重和致命問題的權(quán)值分別是0.1、1、4、10。由此可以計(jì)算出圖2中的DI值=564.1，圖3中的DI值=19.2。

由上面計(jì)算出的DI值可以看出，以上的測(cè)試方法對(duì)軟件產(chǎn)品質(zhì)量的改進(jìn)提供了一定的保障。

(2) 測(cè)試有效性分析

用例的設(shè)計(jì)遍歷到特性的功能、互操作性、性能、壓力、穩(wěn)定性的測(cè)試范圍，且實(shí)驗(yàn)室模擬現(xiàn)網(wǎng)環(huán)境執(zhí)行用例。由Bug提交的DI值可以看出，以上用例的執(zhí)行覆蓋了大部分功能及場(chǎng)景，對(duì)開發(fā)人員修改代碼提供了依據(jù)，通過(guò)不斷修改代碼、反復(fù)測(cè)試的過(guò)程保證了產(chǎn)品的質(zhì)量。

本文提出了對(duì)多PVC的G.SHDSL接口卡測(cè)試的具體方法, 由實(shí)驗(yàn)結(jié)果可以看出,這些用例的設(shè)計(jì)確實(shí)對(duì)G.SHDSL接口卡缺陷的發(fā)現(xiàn)提供了保障。當(dāng)然并不可能發(fā)現(xiàn)全部的問題，測(cè)試是一個(gè)很靈活的過(guò)程，需要測(cè)試人員不斷測(cè)試、分析等逐步地改進(jìn)測(cè)試方法，這是一個(gè)反復(fù)操作、不斷循環(huán)、逐步提高的過(guò)程，以達(dá)到產(chǎn)品質(zhì)量的提高。