本帖最后由 会翻车吗 于 2024-9-15 15:28 编辑
每天亚马逊的爬虫给我干出上G的流量,请求数也多的一匹,有人知道亚马逊爬虫是干啥的吗?亚马逊不是不做搜索引擎吗?为什么有爬虫来??? |
你怎么还没被封号 |
会不会是那个alex 的ai,他们拿来训练 |
不喜欢的话直接把亚马逊的asn禁止访问就好了 |
这不是az吗?怎么就亚马逊了? |
都是训练AI用的 带不来网站流量 我把亚马逊和OPENAI蜘蛛都封了 服务器负载都低了好多 |
我把ip复制错了 总之就是亚马逊哈 |
禁国外 |
cloudflare 可以只接受 搜索引擎爬虫 还有 seo爬虫 也是费资源,不能带来流量的 全禁止了。 |