各大搜索引擎的蜘蛛User-Agent（UA）

小樱

百度：

1. Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

复制代码

搜狗：

1. Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)

复制代码

谷歌：

1. Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

复制代码

必应：

1. Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

复制代码

好搜：

1. Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0); 360Spider(compatible; HaosouSpider; http://www.haosou.com/help/help_3_2.html)

复制代码

Yahoo：

1. Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

复制代码

神马：

1. Yisouspider

复制代码

有道：

1. YoudaoBot

复制代码