vps交流

google bing duckduckgo 有公开爬虫ip吗


一个建ovh杜甫上的英文站最近天天被c,不想上cdn,打算限制每ip24小时之内访问40个页面
知名国外搜索引擎不限制
cc策略不是这样的。cc攻击只是对你网站特定的一个文件疯狂拉取消耗流量cpu

bing爬虫比较厉害。目前我的防cc策略正拦截了bing爬虫20.122.39.53

ip不是固定的。还有bing搜索也有墙,我也就没加入白名单。

iiii.im 发表于 2021-11-12 11:34
cc策略不是这样的。cc攻击只是对你网站特定的一个文件疯狂拉取消耗流量cpu

bing爬虫比较厉害。目前我的防c …

我的是英文站,无所谓墙
这几天的cc url是随机的

有的

cf不是可以设置蜘蛛全部白名单。
百度一下有蜘蛛IP段的整理

naohion 发表于 2021-11-12 11:36
我的是英文站,无所谓墙
这几天的cc url是随机的

你这个策略想法不对。不是你这样的。这样也是防不住的。建议用宝塔防火墙。比较简单有效

google、bing、百度是查PTR
ddg公开了自己的IP