嘟嘟社区

服务器90%的流量来自亚马逊爬虫


本帖最后由 会翻车吗 于 2024-9-15 15:28 编辑

每天亚马逊的爬虫给我干出上G的流量,请求数也多的一匹,有人知道亚马逊爬虫是干啥的吗?亚马逊不是不做搜索引擎吗?为什么有爬虫来???

Maiw 发表于 2024-9-15 12:17
香港2核2G 15元 4核4G 25元 8核8G 50元 16核16G 100元  美国Cera机房8核8G30G数据盘100M带宽100G防御 33元  …

你怎么还没被封号

会不会是那个alex 的ai,他们拿来训练
不喜欢的话直接把亚马逊的asn禁止访问就好了
这不是az吗?怎么就亚马逊了?
都是训练AI用的
带不来网站流量
我把亚马逊和OPENAI蜘蛛都封了
服务器负载都低了好多

wps 发表于 2024-9-15 13:05
这不是az吗?怎么就亚马逊了?

我把ip复制错了 总之就是亚马逊哈

禁国外
cloudflare 可以只接受 搜索引擎爬虫
还有 seo爬虫 也是费资源,不能带来流量的 全禁止了。