vps交流

使用python requests时碰到CF校验怎么办


本帖最后由 深海空间 于 2021-12-11 18:17 编辑

我是用requests爬取的时候,返回回来的结果是CF的那个"Please Wait… | Cloudflare"的界面。
奇怪的是,如果我用浏览器挂代理访问时,他是正常的(没有CF那个等待界面),然后用那台代理的vps运行python爬取时却碰到了CF这个界面,所以应该不是IP的问题。
我把浏览器整个request header复制过去都是一样。
有可能是什么原因导致的呢?

使用python requests时碰到CF校验怎么办
使用python requests时碰到CF校验怎么办

改用chrome less
说明cf精准拦截
缺东西了吧
要支持渲染javascript
https://blog.csdn.net/xc_zhou/article/details/106589277

可能缺了什么?

wachyi 发表于 2021-12-11 17:40
要支持渲染javascript

我清理缓存后禁用这个网站的JS,发现他还是可以正常工作到达登录界面,这样应该排除JS的原因了。

回帖的都是爬虫大佬
直接隐身模式打开那个页面试试