网络蜘蛛

　　指自动抓取网页内容的机器人Robots

　　这里列出世界各大搜索引擎蜘蛛名字,方便大家查看网站日志时查找:

　　google蜘蛛： googlebot

　　百度蜘蛛：baiduspider

　　yahoo蜘蛛：slurp

　　alexa蜘蛛：ia_archiver

　　msn蜘蛛：msnbot

　　altavista蜘蛛：scooter

　　lycos蜘蛛： lycos_spider_(t-rex)

　　alltheweb蜘蛛： fast-webcrawler/

　　inktomi蜘蛛： slurp

　　有道蜘蛛：YodaoBot和OutfoxBot