時間:2015-06-28 00:00:00 來源:IT貓撲網(wǎng) 作者:網(wǎng)管聯(lián)盟 我要評論(0)
Web 服務(wù)處于分布式計算的核心位置,它們之間的交互通常很難測試。分布式開發(fā)、大型的開發(fā)者團(tuán)隊以及對代碼日益組件化的期望都有可能使 Web 服務(wù)的開發(fā)變得越來越容易隱藏錯誤。這些類型的錯誤極難檢測出來。壓力測試是檢測這類代碼錯誤的一種有效方法,但是只有在壓力系統(tǒng)設(shè)計得比較有效的情況下才能發(fā)揮作用。本文將讓您深入了解一下這種壓力系統(tǒng)的基本要求。
測試方法
傳統(tǒng)的測試方法包括某種形式的簡單單元測試,通常由開發(fā)人員執(zhí)行。設(shè)計這些測試需要了解軟件的內(nèi)部知識,并且這些測試幾乎總是針對產(chǎn)品的非常小的、特定的部分。這些類型的測試非常適合與其他代碼組件極少交互,甚至沒有交互的簡單 Web 服務(wù)。
功能驗證(Functional Verification) 也是一種測試過程,在這個過程中,對產(chǎn)品源代碼了解有限的設(shè)計者進(jìn)行測試以確認(rèn)產(chǎn)品或服務(wù)的核心功能。設(shè)計這種測試是為了證明這個核心功能符合某個規(guī)范。舉個例子,我的在線拍賣顯示的是輸入的正確出價嗎? 我的保險經(jīng)紀(jì)人系統(tǒng)找到最便宜的報價了嗎?如果這些測試失敗,通常就意味著檢測到了產(chǎn)品的一個基本問題(這個問題通常是可以直接修復(fù))。這種測試也是適合簡單的 Web 服務(wù),使您可以檢查服務(wù)是否能夠正確執(zhí)行它的各個功能。
系統(tǒng)測試(System Test) 通常是在功能驗證階段完成,驗證了核心功能后進(jìn)行。它傾向于把整個系統(tǒng)作為一個整體來查找問題 — 弄清 Web 服務(wù)作為系統(tǒng)的一部分怎樣運作,以及 Web 服務(wù)相互之間如何交互。由于系統(tǒng)測試是在開發(fā)生命周期快結(jié)束時才進(jìn)行,所以通常不能給它分配足夠的時間來完成。又因為緊張的發(fā)行日程安排以及開發(fā)的各個重要階段的后移,系統(tǒng)測試階段經(jīng)常被忽略,并且一些通常都可以發(fā)現(xiàn)的、少見的錯誤都不能被檢測到。即使發(fā)現(xiàn)了這種錯誤,這時也來不及確定錯誤的原因并設(shè)法修復(fù)它們了。因此,在查找代碼錯誤時,必需把系統(tǒng)測試應(yīng)用設(shè)計得盡可能高效。系統(tǒng)測試通常由三部分組成,它們是:
性能(Performance): 這涉及到確定相關(guān)的產(chǎn)品統(tǒng)計數(shù)據(jù)的過程。例如:每秒有多少條消息?一個服務(wù)可同時接受多少個用戶?
案例(Scenario): 這是重新創(chuàng)建客戶所需的確切配置的過程。因此在案例中發(fā)現(xiàn)的任何問題都可以在客戶使用該產(chǎn)品之前被檢測出來。
壓力(或稱工作負(fù)載平衡): 它與另兩個部分不同,因為它被設(shè)計為通過應(yīng)用很大的工作負(fù)載來使軟件超負(fù)荷運轉(zhuǎn)。如果壓力測試通過對產(chǎn)品保持高強度的使用(但不超過性能統(tǒng)計數(shù)字確定的限制)能有效地執(zhí)行,那么它就經(jīng)常能夠發(fā)現(xiàn)許多隱蔽的錯誤,而這些錯誤用上面提到的任何其他技術(shù)都是發(fā)現(xiàn)不了的(這些錯誤也經(jīng)常是最難修復(fù)的)。
從檢測代碼錯誤這方面來說,可以證明這三個系統(tǒng)測試組件中效率最高的是壓力測試部分。但由于這個過程經(jīng)常跟系統(tǒng)的其他要素或功能測試混淆在一起,所以這個過程涉及到的方法還沒有被正確著手處理或?qū)崿F(xiàn)。
壓力下的錯誤
使用壓力測試,您有希望找到很多種用其他測試方法更難發(fā)現(xiàn)的錯誤。有兩種錯誤類型是:
內(nèi)存泄漏(Memory leak): 一種極難檢測的現(xiàn)象。內(nèi)存泄漏經(jīng)常發(fā)生在已發(fā)行的產(chǎn)品中,原因很簡單,很難設(shè)計測試用例來檢測它們。使用簡單的功能測試,幾乎發(fā)現(xiàn)不了內(nèi)存泄漏問題,因為在產(chǎn)品完成之前測試沒對產(chǎn)品進(jìn)行足夠多的使用。內(nèi)存泄漏通常要求操作作要重復(fù)非常多的次數(shù)以使內(nèi)存消耗達(dá)到能引起注意的程度。盡管與其它編程語言(如 C/C++)相比,Java 程序更難引入內(nèi)存泄漏錯誤,但只要程序仍保持著對對象的引用,該對象仍有可能被實例化并且它占用的內(nèi)存永遠(yuǎn)不會被釋放。
并發(fā)與同步(Concurrency and Synchronization): 壓力測試在查找并發(fā)性問題上非常出眾,這是因為在任何一個測試生命周期中,它都應(yīng)用了許多不同的代碼路徑和定時條件。一般的規(guī)則是,壓力測試運行的時間越長,涉及并應(yīng)用的代碼路徑組合和定時條件就越多。當(dāng)然,這也的確使得這些問題很難再現(xiàn)(錯誤可以在 5 分鐘或 5 天后發(fā)生)。死鎖、線程泄漏以及任何一般的同步問題通常只能在壓力測試階段被檢測出來。這些類型的問題很難通過執(zhí)行單元測試來發(fā)現(xiàn)。開發(fā)人員不會一直考慮他或她的代碼將與其他地方的代碼(在執(zhí)行單元測試時這些代碼可能還沒寫出來)進(jìn)行交互。
現(xiàn)有的壓力測試工具
有許多聲稱能夠?qū)Ξa(chǎn)品進(jìn)行壓力測試的可用工具目前正在開發(fā)中。被廣泛應(yīng)用的是針對 Web 服務(wù)的那些工具。然而,這些工具中有許多只是簡單的 HTML/SOAP 生成器,它們模擬許多客戶機連接,并因此對 Web 服務(wù)器生成高負(fù)載(這對于查找 Web 服務(wù)器的問題很有用,但對于查找 Web 服務(wù)的問題就沒那么有用了)。這些工具對基本的壓力測試比較有用,但它們經(jīng)常是僅僅擴(kuò)展功能驗證階段來重復(fù)地執(zhí)行相同的功能任務(wù)。如果足夠的時間和資源可用,就可以通過創(chuàng)建定制構(gòu)建的壓力測試系統(tǒng)來實現(xiàn)更有效的測試。由于壓力系統(tǒng)的設(shè)計者通常對要測試的產(chǎn)品和 Web 服務(wù)有更多的了解,所以他們將能夠確保壓力系統(tǒng)可以用于哪些具體的代碼區(qū)域。
設(shè)計壓力應(yīng)用
設(shè)計試圖對 Web 服務(wù)進(jìn)行壓力測試的壓力測試系統(tǒng)時,要讓它們以某種特定的方式運行代碼。這些風(fēng)格超越了功能驗證,目的是要弄清楚被測試的 Web 服務(wù)是不是不僅能做我們認(rèn)為它能做的事,而且在被施加了某些高強度壓力的情況下仍然繼續(xù)正常運行。壓力測試必須對 Web 服務(wù)應(yīng)用四個基本條件。許多已建立的壓力系統(tǒng)應(yīng)用了這些條件。有效的壓力測試系統(tǒng)將應(yīng)用以下這些關(guān)鍵條件:
重復(fù) (Repetition): 或許最明顯的且最容易理解的壓力條件就是測試的重復(fù)。換句話說,測試的重復(fù)就是一遍又一遍地執(zhí)行某個操作作或功能,比如重復(fù)調(diào)用一個 Web 服務(wù)。功能驗證測試可以用來被弄清楚一個操作作能否正常執(zhí)行。而壓力測試將確定一個操作作能否正常執(zhí)行,并且能否繼續(xù)在每次執(zhí)行時都正常。這對于推斷一個產(chǎn)品是否適用于某種生產(chǎn)情況至關(guān)重要??蛻敉ǔ貜?fù)使用產(chǎn)品,因此壓力測試應(yīng)該在客戶之前發(fā)現(xiàn)代碼錯誤。許多最簡單的壓力系統(tǒng)只實現(xiàn)這一個條件,但簡單地擴(kuò)展功能驗證測試來多次重復(fù)并不能構(gòu)成一個有效的壓力測試。當(dāng)與下面的一些原則結(jié)合起來使用時,重復(fù)就可以發(fā)現(xiàn)許多隱蔽的代碼錯誤。
量級(Magnitude): 壓力系統(tǒng)應(yīng)該應(yīng)用于產(chǎn)品的另一個條件考慮到了每個操作作中的負(fù)載量。
壓力測試可以重復(fù)執(zhí)行一個操作作,但是操作作自身也要盡量給產(chǎn)品增加負(fù)擔(dān)。例如,一個 Web 服務(wù)允許客戶機輸入一條消息,您可以通過模擬輸入超長消息的客戶機來使這個單獨的操作作進(jìn)行高強度的使用。換句話說就是,您增加了這個操作作的量級。這個量級總是特定于應(yīng)用的,但是可以通過查找產(chǎn)品的可被用戶計量和修改的值來確定它。例如,數(shù)據(jù)的大小、延遲的長度、資金數(shù)量的轉(zhuǎn)移、輸入速度以及輸入的變化等等。單獨的高強度操作作自身可能發(fā)現(xiàn)不了代碼錯誤(或者僅能發(fā)現(xiàn)功能上的缺陷),但與其他壓力原則結(jié)合在一起時,您將可以增加發(fā)現(xiàn)問題的機會。
隨機變化: 最后一點,任何壓力系統(tǒng)都多多少少具有一些隨機性。如果您隨機使用前面的壓力原則中介紹的無數(shù)變化形式,您就能夠在每次測試運行時應(yīng)用許多不同的代碼路徑。下面是幾個關(guān)于怎樣在測試生命周期內(nèi)改變測試的示例。使用重復(fù)時,在重新啟動或重新連接服務(wù)之前,您可以改變重復(fù)操作作間的時間間隔、重復(fù)的次數(shù),或者也可以改變被重復(fù)的 Web 服務(wù)的順序。使用并發(fā),您可以改變一起執(zhí)行的 Web 服務(wù)、同一時間運行的 Web 服務(wù)數(shù)目,或者也可以改變關(guān)于是運行許多不同的服務(wù)還是運行許多同樣的實例的決定。量級或許是最容易更改的 — 每次重復(fù)測試時都可以更改應(yīng)用程序中出現(xiàn)的變量(例如,發(fā)送各種大小的消息或數(shù)字輸入值)。如果測試完全隨機的話,因為很難一致地重現(xiàn)壓力下的錯誤,所以一些系統(tǒng)使用基于一個固定隨機種子的隨機變化。這樣,用同一個種子,重現(xiàn)錯誤的機會就會更大。
一個壓力測試通常會結(jié)合上述的所有原則,并且在允許的范圍內(nèi)盡可能長時間地運行。測試被允許的執(zhí)行時間越長,就可以遍歷越多的代碼路徑,并且發(fā)現(xiàn)的錯誤也越多。當(dāng)然,一旦找到錯誤就必須診斷并修復(fù)它。由于一個代碼錯誤可以在壓力測試運行多日以后自己顯示出來,所以系統(tǒng)必須保證當(dāng)出現(xiàn)錯誤時所有可用的調(diào)試信息都被生成,否則可能就必須花費同樣多的時間來重現(xiàn)這個錯誤。
結(jié)束語
測試是軟件開發(fā)過程中至關(guān)重要的部分,并且一個重要的、經(jīng)常被曲解或忽略的部分是壓力測試。遵循上面詳細(xì)說明的原則,您就可以設(shè)計并實現(xiàn)有效的壓力測試系統(tǒng),用來查找一些與您的代碼相關(guān)的、比較隱蔽的問題。無論是利用預(yù)先寫好的工具,還是創(chuàng)建一個完全專用的壓力系統(tǒng),壓力測試都是用于查找 Web 服務(wù)(或其他任何程序)問題的本質(zhì)方法。
關(guān)鍵詞標(biāo)簽:Web網(wǎng)站
相關(guān)閱讀
熱門文章 ISAPI Rewrite實現(xiàn)IIS圖片防盜鏈 IIS6.0下配置MySQL+PHP5+Zend+phpMyAdmin 在Windows服務(wù)器上快速架設(shè)視頻編解碼器全攻略 win2000server IIS和tomcat5多站點配置
人氣排行 XAMPP配置出現(xiàn)403錯誤“Access forbidden!”的解決辦法 WIN2003 IIS6.0+PHP+ASP+MYSQL優(yōu)化配置 訪問網(wǎng)站403錯誤 Forbidden解決方法 如何從最大用戶并發(fā)數(shù)推算出系統(tǒng)最大用戶數(shù) Server Application Unavailable的解決辦法 報錯“HTTP/1.1 400 Bad Request”的處理方法 Windows Server 2003的Web接口 http 500內(nèi)部服務(wù)器錯誤的解決辦法(windows xp + IIS5.0)