当前位置:首页 > 黑帽seo

各大搜索引擎蜘蛛名称

不详2020-12-06883人围观

各大搜索引擎蜘蛛名称

Baiduspider 【百度】

Sogou web spider 【搜狗】

Googlebot 【谷歌】

360Spider 【360】

YisouSpider 【神马】

Bytespider 【今日头条】

Bingbot 【必应】

Sosospider 【搜搜】

MSNBot,MSNot-media(MSN蜘蛛)

Yahoo! Slurp China(雅虎中国)或 Yahoo! Slurp(雅虎英文)

下面的蜘蛛建议屏蔽

YoudaoBot【有道】

JikeSpider【即刻】

EasouSpider(宜搜蜘蛛)

YYSpider:据说是个人写的蜘蛛程序

ToutiaoSpider(头条号)

MJ12bot: 英国的一个搜索引擎

YandexBot:国外的一个网站分析平台

Rogerbot:Moz 网站的机器人

DotBot  Moz 的官方机器人 DotBot

exabot:Exalead或Dassault Systemes网站的机器人。

ia_archiver(Alexa蜘蛛):Alexa 的网站和网站审计爬虫。

Teoma:是美国 Ask Jeeves 搜索引擎的蜘蛛,在美国占 5% 的搜索份额。

gigabot:搜索到的是一个 3D 打印公司,没什么乱用,屏蔽即可。

DOCOMO Sprider:日本 NTT DoCoMo 旗下的搜索引擎蜘蛛,是垃圾搜索引擎爬虫,有看到你的日志里面有这只蜘蛛,直接毫不犹豫的禁掉。

AhrefsBot:国外的一个网站监控工具
SemrushBot:应该也是一个网站分析工具。

 

    版权声明:

    博主在此发文(包括但不限于汉字、拼音、拉丁字母)均为随意敲击键盘所出,用于检验本人电脑键盘录入、屏幕显示的机械、光电性能,并不代表本人局部或全部同意、支持或者反对观点

    如需要详查请直接与键盘生产厂商法人代表联系。挖井挑水无水表,不会网购无快递。

    文章内容除非注明原创,否则来源于互联网,不代表本人的任何立场;涉及到的软件来源于互联网,仅供个人下载使用,请勿用于商业用途,版权归软件开发者所有,下载后请于24小时内删除,请支持正版!

    因下载本站任何资源造成的损失,全部责任由使用者本人承担!

    如果你是版权方,认为本文内容对您的权益有所侵犯,请联系博主,待博主进行严格地审查和背景调查后,情况属实的将在三天内将本文删除或修正。

    博主的文章没有高度、深度和广度,只是凑字数。由于博主的水平不高(其实是个菜B),不足和错误之处在所难免,希望大家能够批评指出。