当前位置：嘟嘟社区 > bbs > 正文

还有类似这种在线爬站的网站吗？

2024-08-04 分类：bbs

http://wget.oiweb.cn/

在 Linux 下，通过一个命令就可以把整个站相关的文件全部下载下来。
wget -r -p -k -np
参数说明：
-r：递归下载
-p：下载所有用于显示 HTML 页面的图片之类的元素
-k：在转换文件 X 前先将它备份为 X.orig 。
-np：不追溯至父目录
wget -r -np -nd http://example.com/
这条命令可以下载 http://example.com 网站根目录中的所有文件。其中，-np 的作用是不遍历父目录，-nd 表示不在本机重新创建目录结构。
wget -m -k (-H) http://www.example.com/
该命令可用来镜像一个网站，wget 将对链接进行转换。如果网站中的图像是放在另外的站点，那么可以使用 -H 选项。

复制代码

这个看着不错

挺牛逼啊

本站是利用wget来扒站的，所以点击提交任务一直转圈是正常现象。
稍微等一会，就会收到扒站成功的提示，如果没有很久很久没有提示，再刷新页面。如果长时间无法使用联系客服服务器不堪重负，无法承受扒站的运行了，要使用的话加群自己下载源码搭建吧，

他这不是说了，加群就行。

不错，就是服务器比较贵

赞(0)

版权声明：本贴采用知识共享署名4.0国际许可协议 [BY-NC-SA] 进行授权
帖子名称：《还有类似这种在线爬站的网站吗？》
帖子链接：https://bbs.toot.su/186886.html

标签：linux 源码

相关推荐