常見搜尋引擎蜘蛛大全

從**的iis日誌可以分析蜘蛛爬行和使用者訪問情況，經常檢視log記錄是個好習慣，這也是每位站長必備的基本功。以下是乙份國內常見的搜尋引擎蜘蛛列表，打算開站的朋友先混個眼熟，作為站長的你日後會經常跟它打交道。

名稱：googlebot

身份：谷歌

腳印：2009-10-13 07:25:05 get /default.asp 203.208.60.173 mozilla/5.0+(compatible;+googlebot/2.1;++ - www.joseo.cn 200 0 0 17706 296 718

名稱：yahoo!+slurp

身份：雅虎

腳印：2009-10-13 20:21:53 get /default.asp - 67.195.111.42 mozilla/5.0+(compatible;+yahoo!+slurp;+ - www.joseo.cn 200 0 0 297 189 218

名稱：msnbot

身份：微軟msn

腳印：2009-10-13 02:00:44 get /default.asp - 65.55.25.143 msnbot/1.1+(+ - www.joseo.cn 200 0 0 14823 193 703

名稱：sogou+web+spider

身份：搜狗

腳印：2009-10-13 06:00:47 get /default.asp 220.181.94.222 sogou+web+spider/4.0(+ - www.joseo.cn 200 0 0 910 361 468

名稱：youdaobot

身份：網易有道

腳印：2009-10-13 07:14:21 get /default.asp - 202.108.7.213 mozilla/5.0+(compatible;+youdaobot/1.0;+ 200 0 0