一個ASP.NET項目在部署到生產(chǎn)環(huán)境時，當用戶并發(fā)量達到200左右時，IIS出現(xiàn)了明顯的請求排隊現(xiàn)象，發(fā)送的請求都進入等待，無法及時響應，系統(tǒng)基本處于不可用狀態(tài)。因經(jīng)驗不足，花了很多時間精力解決這個問題，本文記錄了我查找問題的過程和最后解決方案，供大家參考。

軟硬件環(huán)境：

IBM刀片服務器，Intel至強處理器，4物理核，16個邏輯核心，內(nèi)存32G

Windows Server2008 Enterprise R2， ASP.NET 4.0 Webform IIS7.5 集成模式

當發(fā)現(xiàn)請求明顯延遲，沒有被即時處理的現(xiàn)象，首先就要查看Windows自帶的性能日志Performance Monitor。

由于我注意到只有對于.aspx或.ashx的請求才會延遲，而.htm或.jpg文件都是即時響應的，所以很明顯問題出在ASP.NET上，于是我選擇了性能監(jiān)視器中的ASP.NET 4.0中的2個主要計數(shù)器：Requests Current（當前請求數(shù)）, Requests Queued（被排隊的請求數(shù)）進行觀察。通過觀察發(fā)現(xiàn)，當前請求數(shù)達到200左右時，被排隊的請求數(shù)就從0開始上升，一直到50左右，如果請求數(shù)繼續(xù)上升，則被排隊數(shù)也隨之上升。當被排隊的請求數(shù)>0時，就意味著這個時候去訪問任何.aspx頁面，頁面都會處于長時間等待中，沒有任何響應，直到IIS處理完了其他請求，才會開始處理隊列中的請求。也就是說，當排隊數(shù)長期>0時，系統(tǒng)基本處于不可用的狀態(tài)。

由于這個系統(tǒng)的頁面布局比較復雜，采用了大量的Ajax+.ashx的方式，將內(nèi)容分批展示在頁面上，所以對服務器的請求總數(shù)會比傳統(tǒng)aspx模式來的多一些，一個頁面全部加載完畢可能需要5-10秒，但我想這不應該是造成問題的主要原因，就算系統(tǒng)性能較差，IIS也應該足以承受這么小的并發(fā)量的。

為探究到底是系統(tǒng)寫的有問題，還是IIS本身的問題，我拋開我們的系統(tǒng)，寫了一個簡單的頁面，就一個aspx文件，page_load里sleep 10秒。假設這就是一個性能比較差的網(wǎng)站，每個頁面都要10秒才能展現(xiàn)，我將其部署在IIS上測試其性能，我使用的是Microsoft Web Application Stress Tool，模擬發(fā)起80個線程，每個連接有4個Socket，總共相當于320個并發(fā)請求。

測試開始后，可以從下圖中看到，當前請求數(shù)立刻攀升到300左右（圖中紅線），然后隊列中的請求數(shù)也上升到300左右（圖中綠線），就是說在300個并發(fā)請求下，幾乎所有的請求都被排隊了，系統(tǒng)基本不可用，通過簡單的測試，這個問題已經(jīng)得以重現(xiàn)了。

隨著時間推移，發(fā)現(xiàn)綠線慢慢減少，從300下降到100多，就是系統(tǒng)可用性漸漸提高，有一部分用戶可以正常使用，但大部分還在排隊。

過了6，7分鐘，隊列中的請求數(shù)下降到0左右，并有一些小幅波動。這個時候大部分請求可以被正常處理了。 按照這個現(xiàn)象分析的話，應該是IIS發(fā)現(xiàn)有大量請求在隊列中，就會試圖增加處理線程數(shù)以滿足要求，但是增長速度有些緩慢。

那是不是系統(tǒng)經(jīng)過了6，7分鐘的適應期之后，以后就一直可以在這個并發(fā)量下穩(wěn)定運作了呢？事實并非如此。我將壓力測試停了幾秒，當服務器的請求數(shù)降為0以后，再重新開啟320個請求的測試，IIS如何表現(xiàn)？從下圖可以看到，只要請求數(shù)有明顯上升，則等待隊列又開始達到最高值，然后緩慢下降，重復上面的過程。總結(jié)下來就是，當出現(xiàn)較大并發(fā)時，IIS的處理請求能力完全跟不上，需要很長時間才能開出足夠的線程。

然后我做了一個測試，看看IIS默認情況到底能承受多少請求而不排隊？似乎是在100個并發(fā)左右，表現(xiàn)尚可，未出現(xiàn)排隊。

當200個左右就不行了。

然后我將測試程序從sleep10秒改成3秒，對于一個應用系統(tǒng)來說，頁面平均3秒處理時間的性能該還算比較正常了。但可惜的是，排隊現(xiàn)象與處理時間并無太大關系，排隊仍然很嚴重。

針對以上問題，查閱了相關資料，是否出現(xiàn)排隊是和應用程序池的可用線程有關，通過2個方法可以查看系統(tǒng)總線程數(shù)和當前可用線程數(shù)。

ThreadPool.GetAvailableThreads( out availableWorker, out availableIO);

ThreadPool.GetMaxThreads(out maxWorker, out maxIO);

在隊列請求數(shù)達到120左右時，通過此方法，得到maxWorker=1600，而availableWorker=1472

因為服務器是16核的，ASP.NET4.0默認每核可以使用100個線程，所以maxWorker是1600，1600-120=1480，大致相等。

就是說當前有120個線程被用來處理請求，還有1400多個處于空閑。關鍵問題就是為什么這些空閑線程沒有被及時啟用？

ASP.NET提供的線程配置參數(shù)中，有一個參數(shù)是非常重要，但是可能被大家忽略的，就是minWorkerThreads。

意指最小工作線程，根據(jù)我們以上的測試結(jié)果，IIS托管線程啟動非常慢，微軟也認識到了這個問題，所以提供此參數(shù)用于設置正常情況下的最小工作線程數(shù)。比如我們系統(tǒng)白天的并發(fā)在200-300之間，則可以設置最小線程為300，這樣系統(tǒng)響應速度可以大幅提高。

據(jù)此，我對配置文件（machine.config）進行了如下修改。注意都是針對單個CPU的，系統(tǒng)會自動乘以邏輯CPU的數(shù)量。

相當于最小工作線程設置成了50*16=800。

重啟IIS后進行測試，我們得到了以下結(jié)果：

可以看到，由于設置了合理的最小工作線程數(shù)，使得IIS無需不斷創(chuàng)建新線程來處理請求，系統(tǒng)的響應能力已可以滿足并發(fā)要求。

除此之外，在IIS6之后引入了一個新功能叫Web Garden，其設計目的是為了在CPU占用較低，但是并發(fā)請求數(shù)比較多的情況下，提升服務器性能。這正符合我當前的情況，于是我啟用了Web Garden，將工作進程數(shù)從1調(diào)整到5，在任務管理器中可以看到w3wp進程從原來的1增加到了5，然后重新測試。

同樣的320個請求下，可以看到除了一開始的幾秒出現(xiàn)了一些排隊，后面基本上表現(xiàn)良好，沒有請求進入隊列。

通過以上兩種方式，都可以有效解決本文開頭提出的問題。但Web Garden是工作在多進程模式下，如果應用中用到了依賴進程的Session和Cache等對象都必須另想辦法，不能保存在服務器內(nèi)存中，而且Web Garden的多個進程切換時會有上下文復制，其資源消耗相對單進程要大，這些是需要考慮的因素。