網站流量超標排查
網站出現流量超標時分析及解決思路為：
查看網站訪問統計---->結合訪問統計分析網站訪問日志---->確定原因采取相應措施。
一．查看網站訪問統計
1. 登錄到虛擬主機管理面板，點擊“訪問統計”
圖片.png
2.首先查看訪問統計中瀏覽器與非瀏覽器流量確定流量類型。
圖片.png
3.根據流量類型詳細查看訪問統計數據：
3.1如是瀏覽器流量占用高，可查看
圖片.png
圖片.png
圖片.png
圖片.png
等統計數據，以確定網站中是哪類文件，哪些url地址被大量訪問，以及是哪些IP，哪些蜘蛛等訪問量大。
3.2如是非瀏覽器流量占用高，可查看
圖片.png
確定是什么狀態情況下產生的非瀏覽器流量。
二．分析網站訪問日志
根據網站訪問統計中按“按日期統計”數據找一天流量較大的日志下載至本地使用記事本編輯器打開對日志具體分析核實。
圖片.png
通常只需找最近三天左右的日志即可，
windows主機可以點擊“www日志”下載訪問日志到wwwroot目錄下，再通過ftp方式連接下載 至本地使用編輯器打開查看。
Linux主機通過ftp連接主機打開logs目錄下即可下載最近的日志。
如要下載歷史日志，可以點擊 “www日志”--“獲取歷史日志”。
三．處理措施
3.1 正常訪問情況主機流量配置低導致超標。如占用流量的文件類別、url網址、搜索蜘蛛、訪問IP等數據都較均衡，無明顯差異等。請升級主機至流量配額更大的型號。
3.2 網站頁面數據過大導致流量超標。如首頁中加載的圖片過大，同時圖片設計過大等，可聯系網站程序方人員減少頁面的圖片數，減小圖片大小等方式處理或者升級主機至流量更大的型號。
3.3 某類文件被大量請求下載等導致超標。如網站的mp4文件被外部盜鏈/下載等，可考慮將文件存放至其他第三方網站進行引用，或升級主機至不限流量的云服務器。
3.4 其他某搜索引擎蜘蛛、IP、useragent等導致流量超標異常的?？赏ㄟ^web.config或.htaccess進行攔截屏蔽。
屏蔽攔截搜索引擎蜘蛛、useragent的訪問抓取等：http://faq.myhostadmin.net/faq/list.asp?unid=662
屏蔽限制ip訪問：http://faq.myhostadmin.net/faq/list.asp?unid=681
四．相關案例
4.1 正常訪問情況主機流量配置低
圖片.png
圖片.png
圖片.png
從訪問統計可見占用流量的文件類別主要為php、js、png、css。訪問最多的網址為首頁。而訪問IP，搜索蜘蛛等占量無異常。
通過下載網站日志核實，日志中也均正常的訪問記錄無明顯異常請求。
此情況則為正常訪問而主機流量不足導致超標，應升級主機。
4.2 網站頁面數據過大
圖片.png
圖片.png
圖片.png
圖片.png
從統計可見占用流量最多的是圖片類文件，訪問網址最多的是首頁。
從訪問日志中可見，請求的圖片量較大，通過瀏覽器可見圖片也相對偏大。
此情況可考慮優化減小圖片大?。ㄍǔD片大小不應超過300KB），或升級主機。
4.3 非瀏覽器流量大某文件被下載
圖片.png
圖片.png
圖片.png
從訪問統計可見非瀏覽器206狀態占用大量流量，文件類別為mp4且文件較大。 206是斷點續傳下載，由此可判斷mp4文件被下載導致。
此情況可考慮將文件存放至其他第三方網站進行引用，或升級主機至不限流量的云服務器。
4.3 搜索引擎蜘蛛/機器人等占用流量
圖片.png
圖片.png
從訪問統計可見Googlebot（google蜘蛛）占用大量流量。
從訪問日志可見Googlebot對網站某個地址進行大量的訪問抓取，通過反查IP是真實的google蜘蛛。
此情況如不考慮seo優化影響情況下，可以通過規則對googlebot進行屏蔽。 類似情況還可能有Baiduspider（百度蜘蛛）對網站的大量訪問抓取。可通過來源IP核查是否為真實的百度蜘蛛等。屏蔽蜘蛛的抓取會對網站的seo優化產生影響，所以并不推薦將google，baidu的蜘蛛進行屏蔽。建議用戶可考慮升級主機解決。
五．驗證屏蔽規則是否生效
5.1 屏蔽IP驗證：
5.1.1訪問http://ip.tool.chinaz.com/獲取到本地公網IP。
5.1.2將.htaccess（linux主機）或web.cofnig (windows主機) 中規則攔截IP換成本地公網IP：
圖片.png
5.1.3再次訪問網站，如提示Forbidden訪問受限則規則正確生效，然后將IP對應更換為需要屏蔽的IP即可。
5.2 屏蔽蜘蛛或useragent驗證(以百度蜘蛛為例)：
5.2.1 訪問http://faq.myhostadmin.net/faq/listagent.asp?Unid=2289 安裝瀏覽器插件。
5.2.1 將.htaccess（linux主機）或web.cofnig (windows主機) 中規則中增加對Baiduspider的攔截
圖片.png
圖片.png
5.2.3再次訪問網站，如提示Forbidden訪問受限則規則正確生效，然后在規則文件中取消對Baiduspider的屏蔽，改為其他蜘蛛或useragent即可。
來源：西部數碼
