探索式軟件測(cè)試

　　談?wù)撥浖|(zhì)量的方法有很多，感興趣的聽(tīng)眾也有很多。本書(shū)是為軟件測(cè)試人員而寫(xiě)的，寫(xiě)的是一種我認(rèn)為比其他任何缺陷都重要的特殊缺陷：即逃過(guò)所有各種檢測(cè)手段而最終存在于發(fā)布產(chǎn)品中的缺陷?！∪魏我粋€(gè)軟件公司發(fā)布的產(chǎn)品都有缺陷。缺陷是怎么引入的？為什么沒(méi)有在代碼審核、單元測(cè)試、靜態(tài)分析或其他面向開(kāi)發(fā)人員的活動(dòng)中把它們找出來(lái)？為什么自動(dòng)化測(cè)試沒(méi)有找出它們？那些缺陷有些什么特質(zhì)使其能逃過(guò)手工測(cè)試？　什么是找出產(chǎn)品缺陷的最好方法？　本書(shū)針對(duì)的正是最后一個(gè)問(wèn)題。在第2章“手工測(cè)試”中，我提出了一個(gè)觀點(diǎn)：因?yàn)橛脩?hù)是在使用軟件過(guò)程中找到這些缺陷的，所以我們的測(cè)試人員也應(yīng)該通過(guò)使用軟件來(lái)找到它們。無(wú)論使用自動(dòng)化測(cè)試和單元測(cè)試，還是其他一些手段，都難以接觸到這些缺陷。無(wú)論測(cè)試人員怎么實(shí)現(xiàn)自動(dòng)化測(cè)試，即使全部都自動(dòng)化，這些缺陷還是會(huì)處處作怪，并在產(chǎn)品中屢屢重現(xiàn)從而傷害最終用戶(hù)?！?wèn)題在于很多現(xiàn)代化手工測(cè)試實(shí)踐都缺乏目的性，隨機(jī)性強(qiáng)且重復(fù)性強(qiáng)。有些人可能還會(huì)加上一條：手工測(cè)試無(wú)聊透頂。本書(shū)試圖為手工測(cè)試流程提供一些指導(dǎo)、技術(shù)和規(guī)劃?！≡诘?章“局部探索式測(cè)試法”中，針對(duì)測(cè)試人員在運(yùn)行任何一個(gè)測(cè)試用例時(shí)都需要做出很多細(xì)微的戰(zhàn)術(shù)層面決定，我給出了詳盡的指導(dǎo)建議。測(cè)試人員必須決定對(duì)于某個(gè)特定的輸入字段應(yīng)該使用什么輸入值，或者給應(yīng)用程序使用的文件提供什么數(shù)據(jù)。在測(cè)試過(guò)程中，必須做出許多這樣的小決定。在缺乏指導(dǎo)的情況下，這些決定常常是未經(jīng)分析且不是最優(yōu)化的。在向一個(gè)文本框內(nèi)輸入一個(gè)數(shù)時(shí)，選擇整數(shù)4難道就勝過(guò)整數(shù)400么？應(yīng)該用長(zhǎng)度為32字節(jié)的字符串還是長(zhǎng)度為256字節(jié)的字符串？選擇一個(gè)而不選另一個(gè)是有一定道理的，這一切都取決于處理該輸入的軟件的具體情況。鑒于測(cè)試人員每天都要做出數(shù)百次這樣的小決定，在這里提供有效的指導(dǎo)建議顯得至關(guān)重要?！≡诘?章“全局探索式測(cè)試法”中，針對(duì)測(cè)試人員在編制測(cè)試計(jì)劃和測(cè)試用例設(shè)計(jì)時(shí)需要考慮哪些廣泛的戰(zhàn)略性問(wèn)題，我也給出了一些指導(dǎo)建議。這些技術(shù)都基于“漫游測(cè)試”（tour）概念，如同一個(gè)導(dǎo)游帶領(lǐng)旅游團(tuán)隊(duì)參觀大都市中一系列著名景點(diǎn)一樣，這種漫游測(cè)試法指出的路線可以指導(dǎo)測(cè)試人員如何探索軟件的方方面面。這里的探索并不一定是隨機(jī)的或者漫無(wú)目的的。本書(shū)所記錄的方法已經(jīng)成為微軟和谷歌的許多測(cè)試人員日常工作的一部分。諸如“地標(biāo)測(cè)試法”（landmark tour）和“極限測(cè)試法”（intellectual’s tour）等詞匯已經(jīng)列入了手工測(cè)試人員的標(biāo)準(zhǔn)詞匯表中。測(cè)試技術(shù)以前確實(shí)被稱(chēng)作“漫游”，但是用整個(gè)旅游業(yè)來(lái)隱喻軟件測(cè)試，并在測(cè)試實(shí)際發(fā)布的應(yīng)用程序時(shí)，大規(guī)模使用這些隱喻的名稱(chēng)，還屬于本書(shū)的一個(gè)創(chuàng)舉。　全局探索式測(cè)試法對(duì)于制定完整的測(cè)試策略給出了指導(dǎo)建議。例如，如何創(chuàng)建一組特性覆蓋率（feature coverage）較高的測(cè)試用例？如何確定是否要在一個(gè)單獨(dú)的測(cè)試用例中使用多個(gè)特性？如何創(chuàng)建一個(gè)完整的測(cè)試用例套件（test case suite），從而使軟件盡可能地滿(mǎn)負(fù)荷工作以便能找到更多重要的缺陷？這些都是設(shè)計(jì)測(cè)試用例和保證測(cè)試套件質(zhì)量時(shí)必須解決的重大問(wèn)題?！≡诘?章“混合探索測(cè)試技術(shù)”中，通過(guò)把探索式測(cè)試和傳統(tǒng)的腳本或基于場(chǎng)景的測(cè)試技術(shù)相結(jié)合，進(jìn)一步擴(kuò)展了漫游的概念。我們將討論如何修改各種端到端場(chǎng)景（end-to-end scenario）、測(cè)試腳本（test script）或用戶(hù)故事（user story），來(lái)創(chuàng)造更多的變化情況，以激發(fā)傳統(tǒng)靜態(tài)測(cè)試技術(shù)查找缺陷的潛力?！≡诘?章“探索式測(cè)試的實(shí)際應(yīng)用”中，來(lái)自微軟不同產(chǎn)品組的五位客串作者提供了他們使用漫游技術(shù)后得到的經(jīng)驗(yàn)報(bào)告。這些作者和他們的團(tuán)隊(duì)在真實(shí)的開(kāi)發(fā)環(huán)境中，把漫游方法應(yīng)用在真實(shí)的軟件上。他們記錄了各自是如何使用漫游、修改漫游甚至創(chuàng)建自己的漫游的。這些內(nèi)容來(lái)自于使用漫游法測(cè)試重要的關(guān)鍵軟件產(chǎn)品的測(cè)試人員，屬于真正的第一手資料?！∽詈螅矣脙烧聝?nèi)容總結(jié)前面各章所討論的內(nèi)容。在第7章“漫游測(cè)試的棘手問(wèn)題”中，描述了我認(rèn)為的測(cè)試中最困難的幾個(gè)問(wèn)題，以及如何將那些具有高度針對(duì)性的探索式測(cè)試方法融入一個(gè)更廣泛的解決方案中。在第8章“軟件測(cè)試的未來(lái)”中，我更進(jìn)一步討論在未來(lái)幾年中，諸如虛擬化、可視化甚至電視游戲之類(lèi)的技術(shù)將如何改變測(cè)試的面貌。附錄包括我對(duì)測(cè)試職業(yè)生涯的看法，收集了我以前一些深受讀者喜愛(ài)的文章（加入了一些新的注解），其中一些文章已經(jīng)無(wú)法在其他地方看到了?！?xiě)這本書(shū)對(duì)我來(lái)說(shuō)是一種享受，我希望你閱讀本書(shū)也是一種享受。

　　James A.Whittaker，近日已加入谷歌擔(dān)任測(cè)試工程主管，他曾在微軟擔(dān)任Visual Studio Team SysterTl架構(gòu)師，負(fù)責(zé)為微軟測(cè)試業(yè)務(wù)主導(dǎo)產(chǎn)品策略，并領(lǐng)導(dǎo)內(nèi)部團(tuán)隊(duì)?wèi)?yīng)用探索式軟件測(cè)試。Whittaker博士曾在佛羅里達(dá)理工學(xué)院擔(dān)任計(jì)算機(jī)科學(xué)教授一職。在校期間，他被The Jourhal of Systems and Software授予“首席學(xué)者”稱(chēng)號(hào)，并領(lǐng)導(dǎo)一個(gè)研究團(tuán)隊(duì)創(chuàng)建了許多領(lǐng)先的測(cè)試工具和技術(shù)，包括備受稱(chēng)贊的運(yùn)行時(shí)錯(cuò)誤注入工具Holodeck。Wtlittaker博士還著有《如何攻破軟件》、《如何破壞軟件安全》和《如何破壞網(wǎng)絡(luò)軟件》。他發(fā)表過(guò)50+有關(guān)軟件開(kāi)發(fā)和安全的同級(jí)評(píng)審論文。他持有安全測(cè)試和安全防御技術(shù)方面多項(xiàng)發(fā)明的專(zhuān)利。譯者簡(jiǎn)介：方敏，現(xiàn)任微軟業(yè)洲工程院UIS項(xiàng)目首席測(cè)試部門(mén)主管，擁有20年軟件測(cè)試管理和開(kāi)發(fā)的豐富經(jīng)驗(yàn)，曾參加過(guò)微軟多項(xiàng)重大產(chǎn)品和技術(shù)的研制，包括UIS，Windows Server／Client／Security，SQL Server，Exchange Server，MSN，COM+Services，Windows Medi和微軟內(nèi)部IT工具等。方敏曾在清華大學(xué)獲得電子工程學(xué)士和碩士學(xué)位，在美國(guó)新墨西哥技術(shù)學(xué)院獲得計(jì)算機(jī)碩士學(xué)位。張勝，現(xiàn)任微軟總部高級(jí)軟件開(kāi)發(fā)測(cè)試主管，擁有10余年軟件開(kāi)發(fā)測(cè)試和團(tuán)隊(duì)管理經(jīng)驗(yàn)，參與Visual Studio，SQL Server和Office Live的開(kāi)發(fā)測(cè)試與發(fā)布，現(xiàn)主管Office Communications Server本地化軟件開(kāi)發(fā)測(cè)試工作。張勝擁有復(fù)旦大學(xué)計(jì)算機(jī)系碩七和學(xué)上學(xué)位。