概念:
迴歸測試是指修改了舊代碼後,重新進行測試以確認修改沒有引入新的錯誤或導致其他代碼產生錯誤。自動迴歸測試將大幅降低系統測試、維護升級等階段的成本。迴歸測試包括兩部分:函數本身的測試、其他代碼的測試。在對被修改的函數重新測試。如果函數的設計功能沒有變化,直接運行函數測試就可以了。如果修改了設計功能,則要根據增減的功能點,增加或刪除測試案例。另外,還要完成白盒覆蓋。
函數代碼的修改可能導致調用該函數的代碼產生錯誤,所以需要測試其他代碼。如果函數是私人函數並且未涉及到全域變數,應運行類測試,否則應運行工程測試。在函數列表中選擇類測試或工程測試,編譯運行測試工程,即可執行對其他代碼的迴歸測試。
本文描述了軟體迴歸測試的概念和進行迴歸測試的基本步驟,介紹了可用於迴歸測試的測試案例庫的維護方法,給出了幾種可以可保證迴歸測試效率和有效性的迴歸測試策略,總結了迴歸測試時應該注意的一些實際問題。
一、 概述
在軟體生命週期中的任何一個階段,只要軟體發生了改變,就可能給該軟體帶來問題。軟體的改變可能是源於發現了錯誤並做了修改,也有可能是因為在整合或維護階段加入了新的模組。當軟體中所含錯誤被發現時,如果錯誤跟蹤與管理系統不夠完善,就可能會遺漏對這些錯誤的修改;而開發人員對錯誤理解的不夠透徹,也可能導致所做的修改只修正了錯誤的外在表現,而沒有修複錯誤本身,從而造成修改失敗;修改還有可能產生副作用從而導致軟體未被修改的部分產生新的問題,使本來工作正常的功能產生錯誤。同樣,在有新代碼加入軟體的時候,除了新加入的代碼中有可能含有錯誤外,新代碼還有可能對原有的代碼帶來影響。因此,每當軟體發生變化時,我們就必須重新測試現有的功能,以便確定修改是否達到了預期的目的,檢查修改是否損害了原有的正常功能。同時,還需要補充新的測試案例來測試新的或被修改了的功能。為了驗證修改的正確性及其影響就需要進行迴歸測試。
迴歸測試在軟體生命週期中扮演著重要的角色,因忽視迴歸測試而造成嚴重後果的例子不計其數,導致阿里亞娜5型火箭發射失敗的軟體缺陷就是由於複用的代碼沒有經過充分的迴歸測試造成的。
迴歸測試作為軟體生命週期的一個組成部分,在整個軟體測試過程中佔有很大的工作量比重,軟體開發的各個階段都會進行多次迴歸測試。在漸進和快速反覆式開發法中,新版本的連續發布使迴歸測試進行的更加頻繁,而在極端編程方法中,更是要求每天都進行若干次迴歸測試。因此,通過選擇正確的迴歸測試策略來改進迴歸測試的效率和有效性是非常有意義的。
二、 迴歸測試策略
對於一個軟體開發項目來說,項目的測試組在實施測試的過程中會將所開發的測試案例儲存到“測試案例庫”中,並對其進行維護和管理。當得到一個軟體的基準版本時,用於基準版本測試的所有測試案例就形成了基準測試案例庫。在需要進行迴歸測試的時候,就可以根據所選擇的迴歸測試策略,從基準測試案例庫中提取合適的測試案例組成迴歸測試包,通過運行迴歸測試包來實現迴歸測試。儲存在基準測試案例庫中的測試案例可能是自動化的測試指令碼,也有可能是測試案例的手工實現過程。
迴歸測試需要時間、經費和人力來計劃、實施和管理。為了在給定的預算和進度下,儘可能有效率和有效力地進行迴歸測試,需要對測試案例庫進行維護並依據一定的策略選擇相應的迴歸測試包。
1、測試案例庫的維護
為了最大限度地滿足客戶的需要和適應應用的要求,軟體在其生命週期中會頻繁地被修改和不斷推出新的版本,修改後的或者新版本的軟體會添加一些新的功能或者在軟體功能上產生某些變化。隨著軟體的改變,軟體的功能和應用介面以及軟體的實現發生了演變,測試案例庫中的一些測試案例可能會失去針對性和有效性,而另一些測試案例可能會變得過時,還有一些測試案例將完全不能運行。為了保證測試案例庫中測試案例的有效性,必須對測試案例庫進行維護。同時,被修改的或新增添的軟體功能,僅僅靠重新運行以前的測試案例並不足以揭示其中的問題,有必要追加新的測試案例來測試這些新的功能或特徵。因此,測試案例庫的維護工作還應包括開發新測試案例,這些新的測試案例用來測試軟體的新特徵或者覆蓋現有測試案例無法覆蓋的軟體功能或特徵。
測試案例的維護是一個不間斷的過程,通常可以將軟體開發的基準作為基準,維護的主要內容包括下述幾個方面。
(1)、刪除過時的測試案例
因為需求的改變等原因可能會使一個基準測試案例不再適合被測試系統,這些測試案例就會過時。例如,某個變數的界限發生了改變,原來針對邊界值的測試就無法完成對新邊界測試。所以,在軟體的每次修改後都應進行相應的過時測試案例的刪除。
(2)、改進不受控制的測試案例
隨著軟體項目的進展,測試案例庫中的用例會不斷增加,其中會出現一些對輸入或運行狀態十分敏感的測試案例。這些測試不容易重複且結果難以控制,會影響迴歸測試的效率,需要進行改進,使其達到可重複和可控制的要求。
(3)、刪除冗餘的測試案例
如果存在兩個或者更多個測試案例針對一組相同的輸入和輸出進行測試,那麼這些測試案例是冗餘的。冗餘測試案例的存在降低了迴歸測試的效率。所以需要週期性整理測試案例庫,並將冗餘的用例刪除掉。
(4)、增添新的測試案例
如果某個程式段、構件或關鍵的介面在現有的測試中沒有被測試,那麼應該開發新測試案例重新對其進行測試。並將新開發的測試案例合并到基準測試包中。
通過對測試案例庫的維護不僅改善了測試案例的可用性,而且也提高了測試庫的可信性,同時還可以將一個基準測試案例庫的效率和效用保持在一個較高的層級上。
2、迴歸測試包的選擇
在軟體生命週期中,即使一個得到良好維護的測試案例庫也可能變得相當大,這使每次迴歸測試都重新運行完整的測試包變得不切實際。一個完全的迴歸測試包括每個基準測試案例,時間和成本約束可能阻礙運行這樣一個測試,有時測試組不得不選擇一個縮減的迴歸測試包來完成迴歸測試。
迴歸測試的價值在於它是一個能夠檢測到迴歸錯誤的受控實驗。當測試組選擇縮減的迴歸測試時,有可能刪除了將揭示迴歸錯誤的測試案例,消除了發現迴歸錯誤的機會。然而,如果採用了代碼相依性分析等安全的縮減技術,就可以決定哪些測試案例可以被刪除而不會讓迴歸測試的意圖遭到破壞。
選擇迴歸測試策略應該兼顧效率和有效性兩個方面。常用的選擇迴歸測試的方式包括:
(1)、再測試全部用例
選擇基準測試案例庫中的全部測試案例組成迴歸測試包,這是一種比較安全的方法,再測試全部用例具有最低的遺漏迴歸錯誤的風險,但測試成本最高。全部再測試幾乎可以應用到任何情況下,基本上不需要進行分析和重新開發,但是,隨著開發工作的進展,測試案例不斷增多,重複原先所有的測試將帶來很大的工作量,往往超出了我們的預算和進度。
(2)、基於風險選擇測試
可以基於一定的風險標準來從基準測試案例庫中選擇迴歸測試包。首先運行最重要的、關鍵的和可疑的測試,而跳過那些非關鍵的、優先順序別低的或者高穩定的測試案例,這些用例即便可能測試到缺陷,這些缺陷的嚴重性也僅有三級或四級。一般而言,測試從主要特徵到次要特徵。
(3)、基於操作剖面選擇測試
如果基準測試案例庫的測試案例是基於軟體操作剖面開發的,測試案例的分布情況反映了系統的實際使用方式。迴歸測試所使用的測試案例個數可以由測試預算確定,迴歸測試可以優先選擇那些針對最重要或最頻繁使用功能的測試案例,釋放和緩解最進階別的風險,有助於儘早發現那些對可靠性有最大影響的故障。這種方法可以在一個給定的預算下最有效提高系統可靠性,但實施起來有一定的難度。
(4)、再測試修改的部分
當測試者對修改的局部化有足夠的信心時,可以通過相依性分析識別軟體的修改情況並分析修改的影響,將迴歸測試局限於被改變的模組和它的介面上。通常,一個迴歸錯誤一定涉及一個新的、修改的或刪除的程式碼片段。在允許的條件下,迴歸測試儘可能覆蓋受到影響的部分。
再測試全部用例的策略是最安全的策略,但已經運行過許多次的迴歸測試不太可能揭示新的錯誤,而且很多時候,由於時間、人員、裝置和經費的原因,不允許選擇再測試全部用例的迴歸測試策略,此時,可以選擇適當的策略進行縮減的迴歸測試。
3、迴歸測試的基本過程
有了測試案例庫的維護方法和迴歸測試包的選擇策略,迴歸測試可遵循下述基本過程進行:
(1). 識別出軟體中被修改的部分;
(2). 從原基準測試案例庫T中,排除所有不再適用的測試案例,確定那些對新的軟體版本依然有效測試案例,其結果是建立一個新的基準測試案例庫T0。
(3). 依據一定的策略從T0中選擇測試案例測試被修改的軟體。
(4). 如果必要,產生新的測試案例集T1,用於測試T0無法充分測試的軟體部分。
(5). 用T1執行修改後的軟體。
第(2)和第(3)步測實驗證修改是否破壞了現有的功能,第(4)和第(5)步測實驗證 修改工作本身。
三、 迴歸測試實踐
在實際工作中,迴歸測試需要反覆進行,當測試者一次又一次地完成相同的測試時,這些迴歸測試將變得非常令人厭煩,而在大多數迴歸測試需要手工完成的時候尤其如此,因此,需要通過自動化的測試來實現重複的和一致的迴歸測試。通過測試自動化可以提高迴歸測試效率。為了支援多種迴歸測試策略,自動化的測試工具應該是通用的和靈活的,以便滿足達到不同迴歸測試目標的要求。
在測試軟體時,應用多種測試技術是常見的。當測試一個修改了的軟體時,測試者也可能希望採用多於一種迴歸測試策略來增加對修改軟體的信心。不同的測試者可能會依據自己的經驗和判斷選擇不同的迴歸測試技術和策略。
迴歸測試並不減少對系統新功能和特徵的測試需求,迴歸測試包應包括新功能和特徵的測試。如果迴歸測試包不能達到所需的覆蓋要求,必須補充新的測試案例使覆蓋率達到規定的要求。
迴歸測試是重複性較多的活動,容易使測試者感到疲勞和厭倦,降低測試效率,在實際工作中可以採用一些策略減輕這些問題。例如,安排新的測試者完成手工迴歸測試,分配更有經驗的測試者開發新的測試案例,編寫和調試自動化的測試指令碼,做一些探索性的或ad hoc測試。還可以在不影響測試目標的情況下,鼓勵測試者創造性地執行測試案例,變化的輸入、按鍵和配置能夠有助於激勵測試者又能揭示新的錯誤。
在組織迴歸測試時需要注意兩點,首先是各測試階段發生的修改一定要在本測試階段內完成迴歸,以免將錯誤遺留到下一測試階段。其次,迴歸測試期間應對該軟體版本凍結,將迴歸測試發現的問題集中修改,集中迴歸。
在實際工作中,可以將迴歸測試與相容性測試結合起來進行。在新的配置條件下運行舊的測試可以發現相容性問題,而同時也可以揭示編碼在迴歸方面的錯誤。
迴歸測試的概述
驗收測試是部署軟體之前的最後一個測試操作。驗收測試的目的是確保軟體準備就緒,並且可以讓終端使用者將其用於執行軟體的既定功能和任務。
驗收測試是向未來的使用者表明系統能夠像預定要求那樣工作。經整合測試後,已經按照設計把所有的模組組裝成一個完整的軟體系統,介面錯誤也已經基本排除了,接著就應該進一步驗證軟體的有效性,這就是驗收測試的任務,即軟體的功能和效能如同使用者所合理期待的那樣。
通過綜合測試之後,軟體已完全組裝起來,介面方面的錯誤也已排除,軟體測試的最後一步——驗收測試即可開始。驗收測試應檢查軟體能否按合約要求進行工作,即是否滿足軟體需求說明書中的確認標準。
1.驗收測試標準 實現軟體確認要通過一系列墨盒測試。驗收測試同樣需要制訂測試計劃和過程,測試計劃應規定測試的種類和測試進度,測試過程則定義一些特殊的測試案例,旨在說明軟體與需求是否一致。無是計劃還是過程,都應該著重考慮軟體是否滿足合約規定的所有功能和效能,文檔資料是否完整、準確人機介面和其他方面(例如,可移植性、相容性、錯誤恢複能力和可維護性等)是否令使用者滿意。 驗收測試的結果有兩種可能,一種是功能和效能指標滿足軟體需求說明的要求,使用者可以接受;另一種是軟體不滿足軟體需求說明的要求,使用者無法接受。項目進行到這個階段才發現嚴重錯誤和偏差一般很難在預定的工期內改正,因此必須與使用者協商,尋求一個妥善解決問題的方法。
2.配置複審 驗收測試的另一個重要環節是配置複審。複審的目的在於保證軟體配置齊全、分類有序,並且包括軟體維護所必須的細節。
3.α、β測試 事實上,軟體開發人員不可能完全預見使用者實際使用程式的情況。例如,使用者可能錯誤的理解命令,或提供一些奇怪的資料群組合,亦可能對設計者自認明了的輸出資訊迷惑不解,等等。因此,軟體是否真正滿足終端使用者的要求,應由使用者進行一系列“驗收測試”。驗收測試既可以是非正式的測試,也可以有計劃、有系統的測試。有時,驗收測試長達數周甚至數月,不斷暴露錯誤,導致開發延期。一個軟體產品,可能擁有眾多使用者,不可能由每個使用者驗收,此時多採用稱為α、β測試的過程,以期發現那些似乎只有終端使用者才能發現的問題。 α測試是指軟體開發公司組織內部人員類比各類使用者行對即將面市軟體產品(稱為α版本)進行測試,試圖發現錯誤並修正。α測試的關鍵在於儘可能逼真地類比實際運行環境和使用者對軟體產品的操作並盡最大努力涵蓋所有可能的 使用者操作方式。經過α測試調整的軟體產品稱為β版本。緊隨其後的β測試是指軟體開發公司組織各方面的典型使用者在日常工作中實際使用β版本,並要求使用者報告異常情況、提出批評意見。然後軟體開發公司再對β版本進行改錯和完善。 一般包括功能度、安全可靠性、易用性、可擴充性、相容性、效率、資源佔用率、使用者文檔八個方面。
一、施驗收測試的常用策略
施驗收測試的常用策略有三種,它們分別是:
• 正式驗收
• 非正式驗收或 Alpha 測試
• Beta 測試
您選擇的策略通常建立在合約需求、組織和公司標準以及應用領域的基礎上。
正式驗收測試
正式驗收測試是一項管理嚴格的過程,它通常是系統測試的延續。計劃和設計這些測試的周密和詳細程度不亞於系統測試。選擇的測試案例應該是系統測試中所執行測試案例的子集。不要偏離所選擇的測試案例方向,這一點很重要。在很多組織中,正式驗收測試是完全自動執行的。
對於系統測試,活動和工件是一樣的。在某些組織中,開發組織(或其獨立的測試小組)與終端使用者組織的代表一起執行驗收測試。在其他組織中,驗收測試則完全由終端使用者組織執行,或者由終端使用者組織選擇人員組成一個客觀公正的小組來執行。
這種測試形式的優點是:
• 要測試的功能和特性都是已知的。
• 測試的細節是已知的並且可以對其進行評測。
• 這種測試可以自動執行,支援迴歸測試。
• 可以對測試過程進行評測和監測。
• 可接受性標準是已知的。
缺點包括:
• 要求大量的資源和計劃。
• 這些測試可能是系統測試的再次實施。
• 可能無法發現軟體中由於主觀原因造成的缺陷,這是因為您只尋找預期要發現的缺陷。
非正式驗收測試
在非正式驗收測試中,執行測試過程的限定不象正式驗收測試中那樣嚴格。在此測試中,確定並記錄要研究的功能和業務任務,但沒有可以遵循的特定測試案例。測試內容由各測試員決定。這種驗收測試方法不象正式驗收測試那樣組織有序,而且更為主觀。
大多數情況下,非正式驗收測試是由終端使用者組織執行的。
這種測試形式的優點是:
• 要測試的功能和特性都是已知的。
• 可以對測試過程進行評測和監測。
• 可接受性標準是已知的。
• 與正式驗收測試相比,可以發現更多由於主觀原因造成的缺陷。
缺點包括:
• 要求資源、計劃和管理資源。
• 無法控制所使用的測試案例。
• 終端使用者可能沿用系統工作的方式,並可能無法發現缺陷。
• 終端使用者可能專註於比較新系統與遺留系統,而不是專註於尋找缺陷。
• 用於驗收測試的資源不受項目的控制,並且可能受到壓縮。
Beta 測試
在以上三種驗收測試策略中,Beta 測試需要的控制是最少的。在 Beta 測試中,採用的細節多少、資料和方法完全由各測試員決定。各測試員負責建立自己的環境、選擇資料,並決定要研究的功能、特性或任務。各測試員負責確定自己對於系統目前狀態的接受標準。
Beta 測試由終端使用者實施,通常開發(或其他非終端使用者)組織對其的管理很少或不進行管理。Beta 測試是所有驗收測試策略中最主觀的。
這種測試形式的優點是:
• 測試由終端使用者實施。
• 大量的潛在測試資源。
• 提高客戶對參與人員的滿意程度。
• 與正式或非正式驗收測試相比,可以發現更多由於主觀原因造成的缺陷。
缺點包括:
• 未對所有功能和/或特性進行測試。
• 測試流程難以評測。
• 終端使用者可能沿用系統工作的方式,並可能沒有發現或沒有報告缺陷。
• 終端使用者可能專註於比較新系統與遺留系統,而不是專註於尋找缺陷。
• 用於驗收測試的資源不受項目的控制,並且可能受到壓縮。
• 可接受性標準是未知的。
• 您需要更多輔助性資源來管理 Beta 測試員。
二、驗收測試過程
1. 軟體需求分析:瞭解軟體功能和效能要求、軟硬體環境要求等,並特別要瞭解軟體的品質要求和驗收要求。
2. 編製《驗收測試計劃》和《項目驗收準則》:根據軟體需求和驗收要求編製測試計劃,制定需測試的測試項,制定測試策略及驗收通過準則,並經過客戶參與的計劃評審。
3. 測試設計和測試案例設計:根據《驗收測試計劃》和《項目驗收準則》編製測試案例,並經過評審。
4. 測試環境搭建:建立測試的硬體環境、軟體環境等。(可在委託客戶提供的環境中進行測試)
5. 測試實施:測試並記錄測試結果。
6. 測試結果分析:根據驗收通過準則分析測試結果,作出驗收是否通過及測試評價。
7. 測試報告:根據測試結果編製缺陷報告和驗收測試報告,並提交給客戶。
三、驗收測試的總體思路
使用者驗收測試是軟體開發結束後,使用者對軟體產品投入實際應用以前進行的最後一次品質檢驗活動。它要回答開發的軟體產品是否符合預期的各項要求,以及使用者能否接受的問題。由於它不只是檢驗軟體某個方面的品質,而是要進行全面的品質檢驗,並且要決定軟體是否合格,因此驗收測試是一項嚴格的正式測試活動。需要根據事先制訂的計劃,進行軟體配置評審、功能測試、效能測試等多方面檢測。
使用者驗收測試可以分為兩個大的部分:軟體組態稽核和可執行程式測試,其大致順序可分為:文檔審核、原始碼審核、配置指令碼審核、測試程式或指令碼審核、可執行程式測試。
要注意的是,在開發方將軟體提交使用者方進行驗收測試之前,必須保證開發方本身已經對軟體的各方面進行了足夠的正式測試(當然,這裡的“足夠”,本身是很難準確定量的)。
使用者在按照合約接收並清點開發方的提交物時(包括以前已經提交的),要查看開發方提供的各種審核報告和測試報告內容是否齊全,再加上平時對開發方工作情況的瞭解,基本可以初步判斷開發方是否已經進行了足夠的正式測試。
使用者驗收測試的每一個相對獨立的部分,都應該有目標(本步驟的目的)、啟動標準(著手本步驟必須滿足的條件)、活動(構成本步驟的具體活動)、完成標準(完成本步驟要滿足的條件)和度量(應該收集的產品與過程資料)。在實際驗收測試過程中,收集度量資料,不是一件容易的事情。
軟體組態稽核
對於一個外包的軟體項目而言,軟體承包方通常要提供如下相關的軟體配置內容:
●可執行程式、來源程式、配置指令碼、測試程式或指令碼。
●主要的開發類文檔:《需求分析說明書》、《概要設計說明書》、《詳細設計說明書》、《資料庫設計說明書》、《測試計劃》、《測試報告》、《程式維護手冊》、《程式員開發手冊》、《使用者操作手冊》、《項目總結報告》。
●主要的管理類文檔:《專案計劃書》、《品質控制計劃》、《組態管理計劃》、《使用者培訓計劃》、《品質總結報告》、《評審報告》、《會議記錄》、《開發進度月報》。
在開發類文檔中,容易被忽視的文檔有《程式維護手冊》和《程式員開發手冊》。
《程式維護手冊》的主要內容包括:系統說明(包括程式說明)、作業環境、維護過程、原始碼清單等,編寫目的是為將來的維護、修改和再次開發工作提供有用的技術資訊。
《程式員開發手冊》的主要內容包括:系統目標、開發環境使用說明、測試環境使用說明、編碼規範及相應的流程等,實際上就是程式員的培訓手冊。
不同大小的項目,都必須具備上述的文檔內容,只是可以根據實際情況進行重新組織。
對上述的提交物,最好在合約中規定階段提交的時機,以免發生糾紛。
通常,正式的審核過程分為5個步驟:計劃、預備會議(可選)、準備階段、審核會議和問題追蹤。預備會議是對審核內容進行介紹並討論。準備階段就是各責任人事先審核並記錄發現的問題。審核會議是最終確定工作產品中包含的錯誤和缺陷。
審核要達到的基本目標是:根據共同制定的審核表,儘可能地發現被審核內容中存在的問題,並最終得到解決。在根據相應的審核表進行文檔審核和原始碼審核時,還要注意文檔與原始碼的一致性。
在實際的驗收測試執行過程中,常常會發現文檔審核是最難的工作,一方面由於市場需求等方面的壓力使這項工作常常被弱化或延遲,造成期間變長,加大文檔審核的難度;另一方面,文檔審核中不易把握的地方非常多,每個項目都有一些特別的地方,而且也很難找到可用的參考資料。
可執行程式的測試
在文檔審核、原始碼審核、配置指令碼審核、測試程式或指令碼審核都順利完成,就可以進行驗收測試的最後一個步驟——可執行程式的測試,它包括功能、效能等方面的測試,每種測試也都包括目標、啟動標準、活動、完成標準和度量等五部分。
要注意的是不能直接使用開發方提供的可執行程式用於測試,而要按照開發方提供的編譯步驟,從原始碼重建可執行程式。
在真正進行使用者驗收測試之前一般應該已經完成了以下工作(也可以根據實際情況有選擇地採用或增加):
●軟體開發已經完成,並全部解決了已知的軟體缺陷。
●驗收測試計劃已經過評審並批准,並且置於文檔控制之下。
●對軟體需求說明書的審查已經完成。
●對概要設計、詳細設計的審查已經完成。
●對所有關鍵模組的代碼審查已經完成。
●對單元、整合、系統測試計劃和報告的審查已經完成。
●所有的測試指令碼已完成,並至少執行過一次,且通過評審。
●使用組態管理工具且代碼置於配置控制之下。
●軟體問題處理流程已經就緒。
●已經制定、評審並批准驗收測試完成標準。
具體的測試內容通常可以包括:安裝(升級)、啟動與關機、功能測試(正例、重要演算法、邊界、時序、反例、錯誤處理)、效能測試(正常的負載、容量變化)、壓力測試(臨界的負載、容量變化)、配置測試、平台測試、安全性測試、恢複測試(在出現掉電、硬體故障或切換、網路故障等情況時,系統是否能夠正常運行)、可靠性測試等。
效能測試和壓力測試一般情況下是在一起進行,通常還需要協助工具輔助的支援。在進行效能測試和壓力測試時,測試範圍必須限定在那些使用頻度高的和時間要求苛刻的軟體功能子集中。由於開發方已經事先進行過效能測試和壓力測試,因此可以直接使用開發方的協助工具輔助。也可以通過購買或自己開發來獲得協助工具輔助。具體的測試方法可以參考相關的軟體工程書籍。
如果執行了所有的測試案例、測試程式或指令碼,使用者驗收測試中發現的所有軟體問題都已解決,而且所有的軟體配置均已更新和審核,可以反映出軟體在使用者驗收測試中所發生的變化,使用者驗收測試就完成了。
四、測試報告形式
《驗收測試報告》
《缺陷報告》
《驗收測試計劃》中規定的其他文檔
五、驗收測試工作流程說明和注意事項
驗收測試業務恰談
雙方就測試專案及合約進行洽談
簽訂測試合約
委託方提交測試樣品及相關資料
委託方需提交的文檔有:
•基本文檔:(驗收測試必需的文檔)
使用者手冊
安裝手冊維護手冊
軟體樣品(可燒錄在光碟片)
•特殊文檔:(根據測試內容不同,委託方所需提交下列相應的文檔)
軟體產品開發過程中的測試記錄
軟體產品原始碼。
編製測試計劃並通過評審
進行項目相關知識培訓
測試設計
評測中心編製測試方案和設計測試案例集。
方案評審
評測中心測試群組成員、委託方代表一起對測試方案進行評審。
實施測試
評測中心對測試方案進行整改,並實施測試。在測試過程中每日提交測試附隨報告給委託方。
編製驗收測試報告並組織評審
評測中心編製驗收測試報告,並組織內部評審。
提交驗收測試報告
評測中心提交驗收測試報告。
http://baike.baidu.com/view/106720.htm
http://zhidao.baidu.com/question/2043399.html