什么是模擬蜘蛛抓取
站長可以輸入自己網站上的任何一個網址，網管工具會發出Google蜘蛛，實時抓取頁面內容，并顯示出抓取的HTML代碼，包括服務器頭信息和頁面代碼。
另外工具也可以用來檢查頁面是否被黑。有時候黑客放入的代碼會檢查瀏覽器類型，如果是用戶使用普通瀏覽器訪問則返回正常內容，如果是搜索引擎蜘蛛訪問，才返回黑客加上去的垃圾內容和垃圾鏈接。所以站長自己訪問網站看不出異樣，Google蜘蛛抓取到的卻不是站長自己看到的內容。這個工具可以幫助站長檢查頁面是否存在安全漏洞。
來源：搜外網
Public @ 2011-01-25 16:22:34
