全球主机交流论坛

标题: 华为爬虫不遵守协议高频抓爬如DDoS攻击 [打印本页]

作者: 心海漪澜    时间: 2020-5-11 19:08
提示: 作者被禁止或删除 内容自动屏蔽
作者: b66667777    时间: 2020-5-11 19:09
吃瓜预订   
作者: tir    时间: 2020-5-11 19:09
直接屏蔽就行了,小问题
作者: openos    时间: 2020-5-11 19:10
上次Google把我的网站爬挂了!
比CC还厉害的多
作者: chitycheng    时间: 2020-5-11 19:16
爬虫跟蜘蛛又区别吗?
作者: 心海漪澜    时间: 2020-5-11 19:22
提示: 作者被禁止或删除 内容自动屏蔽
作者: Venkio    时间: 2020-5-11 19:30
我每天一发布文章 爬虫就开始爬 然后CPU内存飙升 过几分钟那篇文章被收录了以后就好了

作者: loukky    时间: 2020-5-11 21:44
我直接ban了化为的asn

作者: 额头有王的喵    时间: 2020-5-11 22:41
华为爬虫充分显示国内企业的行为
作者: a141420    时间: 2020-5-11 22:46
为所欲也
作者: nico    时间: 2020-5-11 22:46
提示: 作者被禁止或删除 内容自动屏蔽
作者: maro666    时间: 2020-5-11 22:47
几大流氓爬虫 头条的和华为的 直接能把你网站爬死 和CC攻击差不多了
作者: iks    时间: 2020-5-12 00:43
maro666 发表于 2020-5-11 22:47
几大流氓爬虫 头条的和华为的 直接能把你网站爬死 和CC攻击差不多了

头条的已经被我全线 ban 了,华为的倒没注意,正在加入全部站点 ban UA 列表
作者: mryin    时间: 2020-5-12 01:31
提示: 作者被禁止或删除 内容自动屏蔽
作者: iks    时间: 2020-5-12 01:40
mryin 发表于 2020-5-12 01:31
骗人,我刚刚模拟头条爬虫访问你站点还能访问


签名都不是我的站
作者: mryin    时间: 2020-5-12 01:40
提示: 作者被禁止或删除 内容自动屏蔽
作者: trips    时间: 2020-5-12 01:53
我前段时间直接全IP段屏蔽了.恶心的一比~

作者: 御坂    时间: 2020-5-13 08:38
上次我防火墙拉黑了一堆IP... ...都是谷歌爬虫(好像是我设置成了一分钟五六次 频率过低了,正常访客也被拉黑了)华为的爬虫还真没遇见过


作者: xixinct    时间: 2020-5-13 09:08
我可以理解成你们这是在炫耀吗
我™博客站都没人访问
作者: 心海漪澜    时间: 2020-5-13 13:55
提示: 作者被禁止或删除 内容自动屏蔽




欢迎光临 全球主机交流论坛 (https://loc.imgfree.eu.org/) Powered by Discuz! X3.4