vps交流

请教一个PHP抓取网页页面内容的问题!


本帖最后由 lanmp 于 2021-11-29 13:06 编辑

  有一个网页的页面,我无论如何都抓不出它的网页内容,所以请教大家应该如何抓取呢?谢谢大家了。

原始页面:https://www.ixigua.com/6797613429713535501
#这个页面用右键网页源码也看不到网页源码内容!

应取页面:https://m.ixigua.com/item/6797613429713535501/?app=×tamp
#这个页面可以使用右键网页源码看到完整的网页内容!

我使用了PHP中的curl函数file_get_contents函数都看不到内容。

以下这个地址页面我用curl就可以正常抓取出来。

https://www.ixigua.com/7033687202064237086

用curl设置ref试试
你可能需要phantomjs?

榆木 发表于 2021-11-25 19:40
用curl设置ref试试

我设置的来路就是这个页面的地址,是不是和这个有关? 其他的都可以,但就是这类型的不行。

liugogal 发表于 2021-11-25 19:40
你可能需要phantomjs?

请教一个PHP抓取网页页面内容的问题! 只会简单的PHP,这个不会用

ck也设置一下,试试,curl都不行的话,这可能就需要用到python了
因为人家是动态加载的呀,你不能渲染js就抓不到

电脑 发表于 2021-11-25 19:58
因为人家是动态加载的呀,你不能渲染js就抓不到

PHP中有什么方法吗?谢谢了,其他的可以正常抓取,就是影视厅的这些视频无法抓取

请吧:https://querylist.cc/请教一个PHP抓取网页页面内容的问题!

mjjok 发表于 2021-11-25 19:55
ck也设置一下,试试,curl都不行的话,这可能就需要用到python了

ck是什么属性?谢谢,python不会