本帖最后由 lanmp 于 2021-11-29 13:06 编辑
有一个网页的页面,我无论如何都抓不出它的网页内容,所以请教大家应该如何抓取呢?谢谢大家了。 原始页面:https://www.ixigua.com/6797613429713535501 应取页面:https://m.ixigua.com/item/6797613429713535501/?app=×tamp 我使用了PHP中的curl函数file_get_contents函数都看不到内容。 以下这个地址页面我用curl就可以正常抓取出来。 |
用curl设置ref试试 |
你可能需要phantomjs? |
我设置的来路就是这个页面的地址,是不是和这个有关? 其他的都可以,但就是这类型的不行。 |
只会简单的PHP,这个不会用 |
ck也设置一下,试试,curl都不行的话,这可能就需要用到python了 |
因为人家是动态加载的呀,你不能渲染js就抓不到 |
PHP中有什么方法吗?谢谢了,其他的可以正常抓取,就是影视厅的这些视频无法抓取 |
请吧:https://querylist.cc/ |
ck是什么属性?谢谢,python不会 |