网络建站推广,找忠诚网络!经验丰富,共创双赢  今天是 简体中文|繁体中文
服务热线
18925810630
东莞网络推广服务商|东莞SEO推广公司|东莞推广优化咨询|东莞忠诚网络|东莞忠诚科技有限公司
您当前的位置:主页 > 问题解答 >

各搜索引擎的对应蜘蛛是什么?

出处:http://www.liuweizhong.win发布时间:2016-05-26

各大搜索引擎说对应的网络蜘蛛已经整理出来了,下面是详细内容:

其中Google的有多种:
 

Google蜘蛛种类
名   称 说   明
Googlebot 网站索引和新闻索引中抓取网页 
Googlebot-Mobile 移动索引抓取网页
Googlebot-Image 图片索引抓取网页
Mediapartners-Google 抓取网页确定 AdSense 的内容。只有在你的网站上展示 AdSense 广告的情况下,Google才会使用此漫游器来抓取您的网站
Adsbot-Google 抓取网页来衡量 AdWords 目标网页的质量。只有在你使用 Google AdWords 为你的网站做广告的情况下,Google才会使用此漫游器












其中Baidu也的有多种:         

名称 说明
Baiduspider 网站网页索引
Baiduspider-mobile 无线搜索
Baiduspider-image 图片搜索
 Baiduspider-video 视频搜索
 Baiduspider-news 新闻搜索
Baiduspider-favo 百度搜藏
Baiduspider-cpro 百度联盟
Baiduspider-ads 商务搜索

 













其他的搜索引擎如下:

搜索引擎蜘蛛名

所属搜索引擎

baiduspider

百度

Googlebot

Google

MSNbot

LIVE(MSN)

Yahoo Slurp

雅虎

sogou spider

搜狗

YodaoBot

有道

Sosospider

搜搜

sogou spider

搜狗

ia_archiver

Alexa.com

Ask Jeeves/Teoma

爱问 (Ask.com)

Architext spider

Excite.com

FAST-WebCrawler

FAST (AllTheWeb.com)

Slurp

Inktomi.com

Scooter

AltaVista.com

crawler@fast

FAST (AllTheWeb.com)

Crawler

Crawler.de

InfoSeek sidewinder

InfoSeek.com

Lycos_Spider_(T-Rex)

Lycos.com

   


上面是主流搜索引擎的蜘蛛,希望对站长们写Robots协议的时候有所帮助!!