站點流量異常追查文檔-運維篇
- 威海seo技術提升 威海站點流量異常追查文檔
- 1383
站點流量異常原因之運維篇
1、CDN
一些網站會使用CDN加速服務，最近每周搜索資源平臺都會接到一兩個跟CDN加速問題有關的案例。CDN這里存在一個問題：不同的CDN服務商在全國分布的節點數不同，站點在使用CDN服務時，同一地區CDN給蜘蛛返回的IP地址要和給用戶的一致。那么現實情況是，部分CDN服務商出于成本考慮與資源使用率的問題，會在不告知用戶的情況下變更IP地址以節約成本，這樣就導致蜘蛛在去抓的時候，會遇到新IP和老IP的問題，在站點沒有告知更換IP的情況下，蜘蛛會認為站點目前存在問題，首先是減少抓取量，其次會判斷是否把不可訪問的頁面下掉，這時候就出現了用戶訪問IP與蜘蛛抓取IP不一致的情況。所以建議站點在選擇CDN服務時要選擇穩定的CDN服務商，其次如果IP更換最好通過搜索資源平臺抓取診斷工具抓取測試，如果IP不正確可以點擊下圖紅框“報錯”提示給搜索資源平臺
2、Robots
站長應該對robots都不陌生，但為什么還要提呢？有這樣一種情況：站點需要更新robots文件，對站內部分內容禁止或放開抓取。但由于操作后沒有檢查是否生效，站長會默認為已經生效。同時還有一個生效周期的問題，那么站點需要在百度搜索資源平臺提供的robots檢測工具中做一個抓取測試來驗證是否生效。
如果看到robots內容和你更改后的內容不一致，有幾種可能：第一種可能是網站沒有全面布局，因為有的站點服務器可能在很多地方，你需要確認robots是否已全部推送；第二種可能是百度沒有及時做更新，可以通過robots檢測工具下方的更新按鈕來告訴百度Robots有變化。
3、UA/IP
UA封禁一般不會是站點主觀錯誤操作，往往是意外情況，站點在程序中過濾誤操作UA封禁，而通常卻不知道自己封禁了蜘蛛。只有在逐步的排查才會發現這種概率很小的問題。所以在流量異常中我們在運維篇中把這項列進去，讓站點注意這些個細節。
那么當您的網站不希望Baiduspider訪問時，才需要該設置，如果您希望Baiduspider訪問您的網站，useragent相關的設置中是否有Baiduspider UA，并及時修改。禁止所有來自百度的抓取： User-agent: Baiduspider Disallow: /
IP封禁往往是遇到CC攻擊的時候不知道哪些是真百度蜘蛛和仿冒百度蜘蛛而封禁了蜘蛛IP，這里我們建議通過DNS反查方式讓站點了解哪些是真實蜘蛛，根據平臺不同驗證方法不同，如linux/windows/os三種平臺下的驗證方法分別如下：
A、在linux平臺下，您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
B、在windows平臺或者IBM OS/2平臺下，您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來判斷是否來自Baiduspider的抓取，Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
C、在mac os平臺下，您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來判斷是否來自Baiduspider的抓取，Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
更多內容請訪問：/college/articleinfo?id=34
4、安全/管理不善
安全問題在搜索資源平臺能觀察到的絕大多數屬于管理問題，站點被黑客鉆了漏洞而受到了懲罰等，且懲罰力度與站點漏洞的存在時間成正比。
A、域名泛解析
近幾個月域名泛解析是一個非常經典的案例，很多網站由于安全意識薄弱、密碼簡單被黑客鉆了空子，解析出了大量非本站內容的低質頁面，導致百度搜索引擎對整站采取了臨時措施，使得站點流量掉了很多甚至清零。
B、網站被黑
網站被黑跟泛解析也有相似之處，網站內有大量的垃圾頁面都是黑客創造出來的，導致受到懲罰，給站點帶來致命的打擊。
C、網頁被掛馬
其實這也是被黑的一種，但比被黑釋放垃圾頁面更為隱蔽，這類案例主要出現在企業網站或者是一些比較小的網站上，黑客直接在頁面上放置展現廣告代碼，而且會判斷來訪者是普通用戶還是蜘蛛，然后區別對待；或者是僅給某一個地區的用戶訪問掛馬頁面，給蜘蛛和其他大部分所在地展現正常頁面等，這些其實都是非常隱蔽的行為，沒有用戶舉報站點也很難發現，但百度搜索引擎無法容忍這樣的頁面出現在搜索結果里，自然這些站點會受到懲罰。
D、UGC站點被SPAMMER群發
最后說UGC站點，所有以用戶貢獻內容的站點在審核機制上一定要加強防范，目前平臺能夠接到的不少案例都是UGC站點存在監管不利，導致有大量的垃圾內容在線上，當垃圾內容與正常內容的比例達到一定閾值，就有可能整站被百度搜索引擎懲罰。
來源：百度搜索資源平臺 百度搜索學堂
