服務(wù)器對比測試要點

　　本節(jié)內(nèi)容主要是為了讓用戶快速了解服務(wù)器測試策略與方法，能夠用于選型測試中。在此僅僅以最重要的性能、內(nèi)存緩存性能、數(shù)據(jù)庫網(wǎng)絡(luò)應(yīng)用輔以基本對比測試來考察不同服務(wù)器間的性能。具體測試技術(shù)策略如下：

　　1）SPECCPU2000 v1.2

　　SPEC是標準性能評估公司（Standard Performance Evaluation Corporation）的簡稱。SPEC是由計算機廠商、系統(tǒng)集成商、大學、研究機構(gòu)、咨詢等多家公司組成的非營利性組織，這個組織的目標是建立、維護一套用于評估計算機系統(tǒng)的標準。

　　SPEC CPU2000是SPEC組織推出的一套CPU子系統(tǒng)評估軟件，它包括CINT2000和CFP2000兩個子項目，前者用于測量和對比整數(shù)性能，而后者 則用于測量和對比浮點性能。計算系統(tǒng)中的處理器、內(nèi)存和編譯器都會影響最終的測試性能，而I/O（磁盤）、網(wǎng)絡(luò)、操作系統(tǒng)和圖形子系統(tǒng)對于SPEC CPU2000的影響非常的小。

　　SPECfp測試過程中同時執(zhí)行多個實例（instance），測量系統(tǒng)執(zhí)行計算密集型浮點操作的能力，比如CAD/CAM、DCC以及科學計算等方面應(yīng)用可以參考這個結(jié)果。SPECint測試過程中同時執(zhí)行多個實例（instances），然后測試系統(tǒng)同時執(zhí)行多個計算密集型整數(shù)操作的能力， 可以很好的反映諸如數(shù)據(jù)庫服務(wù)器、電子郵件服務(wù)器和Web服務(wù)器等基于整數(shù)應(yīng)用的多處理器系統(tǒng)的性能。

　　在實際測試中，被測試服務(wù)器應(yīng)安裝Intel C++ 8.1 Compiler、Intel Fortran 8.1 Compiler這兩款SPEC CPU2000必需的編譯器，另外安裝了Microsoft Visual Studio 2003.net提供必要的庫文件。按照SPEC的要求我們根據(jù)自己的情況編輯了新的Config文件，可以滿足Base測試。然后我們根據(jù)被測系統(tǒng)實際 可同時處理的線程數(shù)量，設(shè)定用戶數(shù)量，分別運行SPEC base和SPEC rate base測試的結(jié)果（其中SPEC base代表系統(tǒng)執(zhí)行某個任務(wù)的速度，而SPEC base rate測試代表系統(tǒng)可以同時處理任務(wù)的能力）。

　　2）ScienceMark v2.0 Membench

　　ScienceMark v2.0是一款用于測試系統(tǒng)特別是處理器在科學計算應(yīng)用中的性能的軟件，MemBenchmark是其中針對處理器緩存、系統(tǒng)內(nèi)存而設(shè)計的功能模塊，它可以測試系統(tǒng)內(nèi)存帶寬、L1 Cache延遲、L2 Cache延遲和系統(tǒng)內(nèi)存延遲，另外還可以測試不同指令集的性能差異。

　　3）SiSoftware.Sandra.SP1 v2007

　　SiSoftware Sandra是一款可運行在32bit和64bit Windows操作系統(tǒng)上的分析軟件，這款軟件可以對于系統(tǒng)進行方便、快捷的基準測試，還可以用于查看系統(tǒng)的軟件、硬件等信息。目前新版本新增了4項基準測試，包括Power Management Efficiency、Memory Latency、Physical Disks和CD-ROM and DVD這四個項目。另外，它還對于原有的幾個基準測試模塊進行升級，比如在Arithmetic benchmarks中增加了對SSE3 & SSE4 SSE4的支持，在Multi-Media benchmark中增加了對于SSE4的支持，另外還升級了File System benchmark和Removable Storage benchmark兩個子項目。對于新的硬件的支持當然也是該軟件每次升級的重要內(nèi)容之一。SiSoftware Sandra所有的基準測試都針對SMP和SMT進行了優(yōu)化，最高可支持32/64路平臺。
 

4）IOMeter 2004.7.30

　　IOMeter是一款功能非常強大的IO測試軟件，它除了可以在本機運行測試本機的IO（磁盤）性能之外，還提供了模擬網(wǎng)絡(luò)應(yīng)用的能力。在這次的測試中，我們僅僅讓它在本機運行測試服務(wù)器的磁盤性能。為了全面測試被測服務(wù)器的IO性能，分別選擇了不同的測試腳本。

　　·　Max_throughput（read）：文件尺寸為64KB，100%讀取操作，隨機率為0%，用于檢測磁盤系統(tǒng)的最大讀取吞吐量

　　·　Max_IO（read）：文件尺寸為512B，100%讀取操作，隨機率為0%，用于檢測磁盤系統(tǒng)的最大讀取操作IO處理能力

　　·　Max_throughput（write）：文件尺寸為64KB，0%讀取操作，隨機率為0%，用于檢測磁盤系統(tǒng)的最大寫入吞吐量

　　·　Max_IO（write）：文件尺寸為512B，0%讀取操作，隨機率為0%，用于檢測磁盤系統(tǒng)的最大寫入操作IO處理能力

　　5）WebBench v5.0

　　WebBench是針對服務(wù)器作為Web Server時的性能進行測試，在被測服務(wù)器上安裝IIS6.0組件，以提供測試所需的Web服務(wù)。在測試中開啟N臺客戶端（受測試環(huán)境約束而定），分別使用了WebBench 5.0內(nèi)置的動態(tài)CGI以及靜態(tài)頁面腳本對服務(wù)器進行了測試。

　　靜態(tài)測試是由客戶端讀取預(yù)先放置在服務(wù)器Web Server下的Web頁面（wbtree），這項測試主要考察的是服務(wù)器磁盤系統(tǒng)以及網(wǎng)絡(luò)連接性能。使用了N臺客戶端，配合Static_mt.tst多線程靜態(tài)腳本測試向被測服務(wù)器發(fā)送請求。

　　動態(tài)測試偏重于對服務(wù)器CPU子系統(tǒng)的性能測試，它對于Web服務(wù)器提供了足夠的負載。使用C語言編寫的CGI源文件Simcigi.c編譯為Simcgi.exe，并將其作為動態(tài)測試中的CGI腳本。在測試過程中，每臺安裝了WebBench客戶端軟件的PC，會在300秒的時間內(nèi)持續(xù)向服務(wù)器發(fā)送CGI請求，而控制臺會紀錄并匯總服務(wù)器所響應(yīng)CGI請求的數(shù)據(jù)。CGI測試的成績高低，主要取決于服務(wù)器處理器子系統(tǒng)性能的優(yōu)劣。處理器子系統(tǒng)包括CPU、內(nèi)存以及內(nèi)存控制器，CPU頻率、緩存以及內(nèi)存容量大小和內(nèi)存帶寬，都會影響該項成績。

　　6）NetBench v7.03

　　NetBench是針對文件服務(wù)器的性能測試軟件，影響NetBench 性能的主要是服務(wù)器的磁盤子系統(tǒng)，服務(wù)器磁盤控制器、條帶大小、讀寫緩存、硬盤類型、組建磁盤陣列模式、內(nèi)存容量、網(wǎng)絡(luò)拓樸結(jié)構(gòu)等都會對測試結(jié)果有明顯的影響。我們在被測服務(wù)器上設(shè)立了文件服務(wù)器時，NetBench可配置N個客戶端來模擬網(wǎng)絡(luò)中的PC向文件服務(wù)器所發(fā)出的文件傳輸請求，文件服務(wù)器則將存儲在磁盤上的文件數(shù)據(jù)發(fā)送給相應(yīng)的客戶端。在測試過程中，客戶端會以每四臺一組的步進依次增加并且向服務(wù)器發(fā)送文件傳輸請求，測試結(jié)束后控制臺收集數(shù)據(jù)并繪制出服務(wù)器的數(shù)據(jù)傳輸變化曲線。

　　7）TPC benchmark

　　TPC現(xiàn)有的測試標準為：TPC-E、TPC-C、TPC-H、TPC-App。根據(jù)這4個測試基準，目前TPC主要包括的4個技術(shù)小組委員會：TPC-E 技術(shù)小組委員會、TPC-C 技術(shù)小組委員會、TPC-H技術(shù)小組委員會、TPC-App技術(shù)小組委員會。前期TPC使用過但目前已經(jīng)停止使用的測試標準有：TPC-A、TPC- B（數(shù)據(jù)庫處理能力測試標準）、TPC-D、TPC-R（決策支持系統(tǒng)測試標準，類TPC-H）、TPC-W（Web處理能力測試標準）。