測試報告編寫指南
由安博測試空間技術(shù)中心http:///提供 摘要
測試報告是把測試的過程和結(jié)果寫成文檔,并對發(fā)現(xiàn)的問題和缺陷進行分析,為糾正軟件的存在的質(zhì)量問題提供依據(jù),同時為軟件驗收和交付打下基礎(chǔ)。本文提供測試報告模板以及如何編寫的實例指南。
關(guān)鍵字
測試報告 缺陷
正文
測試報告是測試階段最后的文檔產(chǎn)出物,優(yōu)秀的測試經(jīng)理應(yīng)該具備良好的文檔編寫能力,一份詳細(xì)的測試報告包含足夠的信息,包括產(chǎn)品質(zhì)量和測試過程的評價,測試報告基于測試中的數(shù)據(jù)采集以及對最終的測試結(jié)果分析。
下面以通用的測試報告模板為例,詳細(xì)展開對測試報告編寫的具體描述。
PARTⅠ 首頁
0.1頁面內(nèi)容:
密級
通常,測試報告供內(nèi)部測試完畢后使用,因此密級為中,如果可供用戶和更多的人閱讀,密級為低,高密級的測試報告適合內(nèi)部研發(fā)項目以及涉及保密行業(yè)和技術(shù)版權(quán)的項目。XXXX項目/系統(tǒng)測試報告
報告編號
可供索引的內(nèi)部編號或者用戶要求分布提交時的序列號
部門經(jīng)理 ______項目經(jīng)理______
開發(fā)經(jīng)理______測試經(jīng)理______
XXX公司 XXXX單位 (此處包含用戶單位以及研發(fā)此系統(tǒng)的公司)
XXXX年XX月XX日
0.2格式要求:
標(biāo)題一般采用大體字(如一號),加粗,宋體,居中排列
副標(biāo)題采用大體小一號字(如二號)加粗,宋體,居中排列
其他采用四號字,宋體,居中排列
0.3版本控制:
版本 作者 時間 變更摘要
新建/變更/審核
PARTⅡ 引言部分
1.1編寫目的
本測試報告的具體編寫目的,指出預(yù)期的讀者范圍。
實例:本測試報告為XXX項目的測試報告,目的在于總結(jié)測試階段的測試以及分析測試結(jié)果,描述系統(tǒng)是否符合需求(或達(dá)到XXX功能目標(biāo))。預(yù)期參考人員包括用戶、測試人員、、開發(fā)人員、項目管理者、其他質(zhì)量管理人員和需要閱讀本報告的高層經(jīng)理。
提示:通常,用戶對測試結(jié)論部分感興趣,開發(fā)人員希望從缺陷結(jié)果以及分析得到產(chǎn)品開發(fā)質(zhì)量的信息,項目管理者對測試執(zhí)行中成本、資源和時間予與重視,而高層經(jīng)理希望能夠閱讀到簡單的圖表并且能夠與其他項目進行同向比較。此部分可以具體描述為什么類型的人可參考本報告XXX頁XXX章節(jié),你的報告讀者越多,你的工作越容易被人重視,前提是必須讓閱讀者感到你的報告是有價值而且值得浪費一點時間去關(guān)注的。
1.2項目背景
對項目目標(biāo)和目的進行簡要說明。必要時包括簡史,這部分不需要腦力勞動,直接從需求或者招標(biāo)文件中拷貝即可。
1.3系統(tǒng)簡介
如果設(shè)計說明書有此部分,照抄。注意必要的框架圖和網(wǎng)絡(luò)拓?fù)鋱D能吸引眼球。
1.4術(shù)語和縮寫詞
列出設(shè)計本系統(tǒng)/項目的專用術(shù)語和縮寫語約定。對于技術(shù)相關(guān)的名詞和與多義詞一定要注明清楚,以便閱讀時不會產(chǎn)生歧義。
1.5參考資料
1.需求、設(shè)計、測試用例、手冊以及其他項目文檔都是范圍內(nèi)可參考的東東。
2.測試使用的國家標(biāo)準(zhǔn)、行業(yè)指標(biāo)、公司規(guī)范和質(zhì)量手冊等等
PARTⅢ 測試概要
測試的概要介紹,包括測試的一些聲明、測試范圍、測試目的等等,主要是測試情況簡介。(其他測試經(jīng)理和質(zhì)量人員關(guān)注部分)
2.1測試用例設(shè)計
簡要介紹測試用例的設(shè)計方法。例如:等價類劃分、邊界值、因果圖,以及用這類方法(3-4句)。
提示:如果能夠具體對設(shè)計進行說明,在其他開發(fā)人員、測試經(jīng)理閱讀的時候就容易對你的用例設(shè)計有個整體的概念,順便說一句,在這里寫上一些非常規(guī)的設(shè)計方法也是有利的,至少在沒有看到測試結(jié)論之前就可以了解到測試經(jīng)理的設(shè)計技術(shù),重點測試部分一定要保證有兩種以上不同的用例設(shè)計方法。
2.2測試環(huán)境與配置
簡要介紹測試環(huán)境及其配置。
提示:清單如下,如果系統(tǒng)/項目比較大,則用表格方式列出
數(shù)據(jù)庫服務(wù)器配置
CPU:
內(nèi)存:
硬盤:可用空間大小
操作系統(tǒng):
應(yīng)用軟件:
機器網(wǎng)絡(luò)名:
局域網(wǎng)地址:
應(yīng)用服務(wù)器配置
…….
客戶端配置
…….
對于網(wǎng)絡(luò)設(shè)備和要求也可以使用相應(yīng)的表格,對于三層架構(gòu)的,可以根據(jù)網(wǎng)絡(luò)拓?fù)鋱D列出相關(guān)配置。
2.3測試方法(和工具)
簡要介紹測試中采用的方法(和工具)。
提示:主要是黑盒測試,測試方法可以寫上測試的重點和采用的測試模式,這樣可以一目了然的知道是否遺漏了重要的測試點和關(guān)鍵塊。工具為可選項,當(dāng)使用到測試工具和相關(guān)工具時,要說明。注意要注明是自產(chǎn)還是廠商,版本號多少,在測試報告發(fā)布后要避免大多工具的版權(quán)問題。
PARTⅣ 測試結(jié)果及缺陷分析
整個測試報告中這是最激動人心的部分,這部分主要匯總各種數(shù)據(jù)并進行度量,度量包括對測試過程的度量和能力評估、對軟件產(chǎn)品的質(zhì)量度量和產(chǎn)品評估。對于不需要過程度量或者相對較小的項目,例如用于驗收時提交用戶的測試報告、小型項目的測試報告,可省略過程方面的度量部分;而采用了CMM/ISO或者其他工程標(biāo)準(zhǔn)過程的,需要提供過程改進建議和參考的測試報告-主要用于公司內(nèi)部測試改進和缺陷預(yù)防機制-則過程度量需要列出。
3.1測試執(zhí)行情況與記錄
描述測試資源消耗情況,記錄實際數(shù)據(jù)。(測試、項目經(jīng)理關(guān)注部分)
3.1.1測試組織
可列出簡單的測試組架構(gòu)圖,包括:
測試組架構(gòu) (如存在分組、用戶參與等情況)
測試經(jīng)理(領(lǐng)導(dǎo)人員)
主要測試人員
參與測試人員
3.1.2測試時間
列出測試的跨度和工作量,最好區(qū)分測試文檔和活動的時間。數(shù)據(jù)可供過程度量使用。例如 XXX子系統(tǒng)/子功能
實際開始時間-實際結(jié)束時間
總工時/總工作日
任務(wù) 開始時間 結(jié)束時間 總計
合計
對于大系統(tǒng)/項目來說最終要統(tǒng)計資源的總投入,必要時要增加成本一欄,以便管理者清楚的知道究竟花費了多少人力去完成測試。
測試類型 人員成本 工具設(shè)備 其他費用
總計
在數(shù)據(jù)匯總時可以統(tǒng)計個人的平均投入時間和總體時間、整體投入平均時間和總體時間,還可以算出每一個功能點所花費的時/人。
用時人員 編寫用例 執(zhí)行測試 總計
合計
這部分用于過程度量的數(shù)據(jù)包括文檔生產(chǎn)率和測試執(zhí)行率。
生產(chǎn)率人員 用例/編寫時間 用例/執(zhí)行時間 平均
合計
3.1.3測試版本
給出測試的版本,如果是最終報告,可能要報告測試次數(shù)回歸測試多少次。列出表格清單則便于知道那個子系統(tǒng)/子模塊的測試頻度,對于多次回歸的子系統(tǒng)/子模塊將引起開發(fā)者關(guān)注。
3.2覆蓋分析
3.2.1需求覆蓋
需求覆蓋率是指經(jīng)過測試的需求/功能和需求規(guī)格說明書中所有需求/功能的比值,通常情況下要達(dá)到100%的目標(biāo)。
需求/功能(或編號) 測試類型 是否通過 備注
[Y][P][N][N/A]
根據(jù)測試結(jié)果 ,按編號給出每一測試需求的通過與否結(jié)論。P表示部分通過,N/A表示不可測試或者用例不適用。實際上,需求跟蹤矩陣列出了一一對應(yīng)的用例情況以避免遺漏,此表作用為傳達(dá)需求的測試信息以供檢查和審核。
需求覆蓋率計算 Y項/需求總數(shù) ×100%
3.2.2測試覆蓋
需求/功能(或編號) 用例個數(shù) 執(zhí)行總數(shù) 未執(zhí)行 未/漏測分析和原因
實際上,測試用例已經(jīng)記載了預(yù)期結(jié)果數(shù)據(jù),測試缺陷上說明了實測結(jié)果數(shù)據(jù)和與預(yù)期結(jié)果數(shù)據(jù)的偏差;因此沒有必要對每個編號在此包含更詳細(xì)的說明的缺陷記錄與偏差,列表的目的僅在于更好的查看測試結(jié)果。
測試覆蓋率計算 執(zhí)行數(shù)/用例總數(shù) ×100%
3.2缺陷的統(tǒng)計與分析
缺陷統(tǒng)計主要涉及到被測系統(tǒng)的質(zhì)量,因此,這部分成為開發(fā)人員、質(zhì)量人員重點關(guān)注的部分。
3.3.1缺陷匯總
被測系統(tǒng) 系統(tǒng)測試 回歸測試 總計
合計
按嚴(yán)重程度
嚴(yán)重 一般 微小
按缺陷類型
用戶界面 一致性 功能 算法 接口 文檔 用戶界面 其他
按功能分布
功能一 功能二 功能三 功能四 功能五 功能六 功能七
最好給出缺陷的餅狀圖和柱狀圖以便直觀查看。俗話說一圖勝千言,圖標(biāo)能夠使閱讀者迅速獲得信息,尤其是各層面管理人員沒有時間去逐項閱讀文章。
圖例
3.3.2缺陷分析
本部分對上述缺陷和其他收集數(shù)據(jù)進行綜合分析
缺陷綜合分析
缺陷發(fā)現(xiàn)效率 = 缺陷總數(shù)/執(zhí)行測試用時
可到具體人員得出平均指標(biāo)
用例質(zhì)量 = 缺陷總數(shù)/測試用例總數(shù) ×100%
缺陷密度 = 缺陷總數(shù)/功能點總數(shù)
缺陷密度可以得出系統(tǒng)各功能或各需求的缺陷分布情況,開發(fā)人員可以在此分析基礎(chǔ)上得出那部分功能/需求缺陷最多,從而在今后開發(fā)注意避免并注意在實施時予與關(guān)注,測試經(jīng)驗表明,測試缺陷越多的部分,其隱藏的缺陷也越多。
測試曲線圖
描繪被測系統(tǒng)每工作日/周缺陷數(shù)情況,得出缺陷走勢和趨向
重要缺陷摘要
缺陷編號 簡要描述 分析結(jié)果 備注
3.3.3殘留缺陷與未解決問題
殘留缺陷
編號:BUG號
缺陷概要:該缺陷描述的事實
原因分析:如何引起缺陷,缺陷的后果,描述造成軟件局限性和其他限制性的原因預(yù)防和改進措施:彌補手段和長期策略
未解決問題
功能/測試類型:
測試結(jié)果:與預(yù)期結(jié)果的偏差
缺陷:具體描述
評價:對這些問題的看法,也就是這些問題如果發(fā)出去了會造成什么樣的影響PARTⅤ 測試結(jié)論與建議
報告到了這個部分就是一個總結(jié)了,對上述過程、缺陷分析之后該下個結(jié)論,此部分為項目經(jīng)理、部門經(jīng)理以及高層經(jīng)理關(guān)注,請清晰扼要的下定論。
4.1測試結(jié)論
1. 測試執(zhí)行是否充分(可以增加對安全性、可靠性、可維護性和功能性描述)
2. 對測試風(fēng)險的控制措施和成效
3. 測試目標(biāo)是否完成
4. 測試是否通過
5. 是否可以進入下一階段項目目標(biāo)
4.2建議
1.對系統(tǒng)存在問題的說明,描述測試所揭露的軟件缺陷和不足,以及可能給軟件實施和運行帶來的影響
2.可能存在的潛在缺陷和后續(xù)工作
3.對缺陷修改和產(chǎn)品設(shè)計的建議
4.對過程改進方面的建議
測試報告的內(nèi)容大同小異,對于一些測試報告而言,可能將第四和第五部分合并,逐項列出測試項、缺陷、分析和建議,這種方法也比較多見,尤其在第三方評測報告中,此份報告模板僅供參考。
參考文獻(xiàn)
《實用軟件測試方法與應(yīng)用》 電子工業(yè)出版
來源:網(wǎng)絡(luò)整理 免責(zé)聲明:本文僅限學(xué)習(xí)分享,如產(chǎn)生版權(quán)問題,請聯(lián)系我們及時刪除。