DomainStatsBot是什么蜘蛛?

今天打开NGINX的log文件,查看百度爬虫记录的时候,发现一个奇怪的蜘蛛,DomainStatsBot。

蜘蛛记录如下:

136.243.222.140 - - [15/Jun/2020:17:33:59 +0800] "GET /?pn=3 HTTP/1.1" 200 7405 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.17.142 - - [15/Jun/2020:17:35:14 +0800] "GET /?pn=4 HTTP/1.1" 200 7715 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.59.237 - - [15/Jun/2020:17:36:27 +0800] "GET /p/237 HTTP/1.1" 200 14447 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.17.142 - - [15/Jun/2020:17:36:39 +0800] "GET /p/234 HTTP/1.1" 200 18154 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.17.142 - - [15/Jun/2020:17:39:10 +0800] "GET /p/238 HTTP/1.1" 200 13292 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.17.142 - - [15/Jun/2020:17:41:17 +0800] "GET /p/233 HTTP/1.1" 200 16765 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.222.140 - - [15/Jun/2020:17:41:29 +0800] "GET /p/222 HTTP/1.1" 200 20795 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.222.140 - - [15/Jun/2020:17:43:57 +0800] "GET /p/218 HTTP/1.1" 200 12768 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"
136.243.59.237 - - [15/Jun/2020:17:44:26 +0800] "GET /p/216 HTTP/1.1" 200 12596 "-" "DomainStatsBot/1.0 (https://domainstats.com/pages/our-bot)" "-"

虽然比较奇怪,但在决定要不要对其屏蔽的时候,我看了下这个蜘蛛来爬取的时间间隔。

15/Jun/2020:17:33:59

15/Jun/2020:17:35:14

15/Jun/2020:17:36:27

15/Jun/2020:17:36:39

15/Jun/2020:17:39:10

15/Jun/2020:17:41:17

15/Jun/2020:17:41:29

15/Jun/2020:17:43:57

15/Jun/2020:17:44:26


基本上,来访的时间间隔是一分钟,并非那种恶性蜘蛛,大规模的并发导致网站突发性的访问高涨,所以在安全范围内。

然后又访问了下domainstats.com,结果页面出现Sorry but we are currently blocking china,好吧,用代理翻墙看看到底是啥东西?官网标题是:Domainstats.com: Data, backlinks and metrics for domains。

看样子是一个域名的数据分析工具。

功能包括:

  1. 快速查看重要的反向链接;
  2. 对域名的价值估算;
  3. 还提供了api供第三方使用;
  4. 查看站点的特定问题,包括IP屏蔽,和垃圾邮件标志;
  5. 查看并且搜集跟域名有关联的有价值的数据和指标;
  6. 查看跟该域名共享的IP、adsense或analytics;
  7. 追踪Google搜索结果中,该域名的关键词权重指标;
  8. 还有其他的一些工具集的,包括Local Search,Link Intersection,Natural Languange Categories,Site Crawler,Broken Links,Check Keyword,Keyword Suggest,Bulk Domain Lookup,Bulk DomainScore Lookup,Bulk Backlinks Countries Lookup,Bulk Domains to IP Lookup,Bulk IP Lookup,DMCA Lookup,Bulk Analytics and Adsense Code Lookup。

总的来说,是一个国外的站长工具,良性,遵循robots协议,对网站友好。

购买或者交换友情链接需注意,什么样的友情链接才好的?
,360,搜狗,bing,神马均有收录,甚至有排名。   补充解释下。 什么建站历史长?我为何不说域名历史长? 当然,建站历史长的前提,肯定域名历史长,但域名历史长,却不一定有着很长的建站历史。一个建站...
网站的TKD什么
网站的TKD,T指的就title,也就标题;K就keyword,也就关键词;而D的意思,description,也就说明。 这三个为什么重要? 因为在一篇上千字的文章里,标题以及关键词...
【罗德纹章】蜘蛛新生
蜘蛛终于有消息了,和之前预计一样。。。蜘蛛简单加强,新生幅度有限,但不管怎么样也算变强了,反正无氪人手一只,氪金个个九合,祝大家好运。 技能: 冥府邪法:体技,己方全体(除蜘蛛自己以外)解除执念...
蜘蛛之战
对抗。这个被称为阿兹欧-奈幽的古老的地下王国由一个残忍的类人蜘蛛种族建立的,他们派出精锐部队袭击了寒冰皇冠,并使耐祖奥打消了征服他们的疯狂念头。耐祖奥沮丧地发现这些奈幽虫族对他的心灵控制完全免疫...
✎为什么做网站用老域名会对收录和排名有优势?
在站长圈子里,经常有站长提及做网站要用老域名好,许多人不明白为什么,今天就来解答这个问题。 首先,老域名什么意思?什么有效果的老域名? 域名的注册时间长:所谓注册时间长,就该域名,在域名注册商...
toaster.exe病毒?
电脑Windows系统的进程里,有个toaster.exe进程,发现占用内存和cpu颇高,开始怀疑病毒,不过仔细了解过后,发现并非病毒。 toaster.exe其实戴尔的一个文件,如果你用的...
魔兽世界艾泽拉斯的时间线和青铜龙就扯淡
魔兽世界,艾泽拉斯的时间线,青铜龙就扯淡,真要是能在时间线里窜来窜去,干嘛不窜到泰坦降临艾泽拉斯那个时间段?干嘛不窜到死亡之翼还龙蛋的那个时间段? 萨鲁法尔都能窜回上古砍萨格拉斯一斧头,玩时间的...
魔兽世界洛阿神灵大全以及种族
诸王之神莱赞(魔暴龙) 死亡之神邦桑迪(巨魔) 午夜之神希里克(蝙蝠) 兽群主宰贡克(迅猛龙) 风之主宰帕库(翼手龙) 血神/夺灵者/邪神哈卡(完全不知道物种,模型貌似风蛇) 拾荒者之神加尼(细颚...
伊利丹个什么样的人
感觉伊利丹本质上就是一个狠人,不达目的誓不罢休的那种。 人家的思维方式很明确:我恶魔猎手,众人皆醉我独醒,谁妨碍我我就杀谁,我一定能彻底消灭恶魔的。
什么样的友情链接比较好?
交换友情链接,几乎每一个站长必须经历的过程。 那么,什么样的友情链接比较好呢? 1、快照新的 事实上,友情链接的作用,不止权重的传递,更吸引爬虫的入口,一个快照新的网站,两天内,甚至一天内...
【dq10】 【副本】影之支配
这本主要打新降临和DQX老怪的强化装备的,顺便抽B书。 目前看来,一楼先碰到马琳和天魔随机一只,然后去二楼、走上面蜘蛛、走下面魔军师;然后去三楼,走哪好像都破戒王带俩鬼火,概率新降临;然后去四楼...
#showtooltip如何把定义宏图标里面的图标写进宏里面?
创建宏时, 有个 "改变名字/图标" 的选项, 只这个只能选一个图标, 如果想要写在#showtooltip后面, 以实现条件选择图标,实现的方法。 不需要在创建的时候考虑图标什么,那时候图标选...