一条命令下载整个网站
在Linux系统下,你可以通过一条命令来下载整个网站,并按照网站的目录结构生成对应的文件夹及网页文件:
wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com
该命令只能下载整个网站的静态资源,通过JavaScript生成的动态内容无法下载;且资源需要在网页上能被爬取到;
使用这条命令需要确保你的磁盘有足够的空间。
在Linux系统下,你可以通过一条命令来下载整个网站,并按照网站的目录结构生成对应的文件夹及网页文件:
wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com
该命令只能下载整个网站的静态资源,通过JavaScript生成的动态内容无法下载;且资源需要在网页上能被爬取到;
使用这条命令需要确保你的磁盘有足够的空间。
原创内容,如需转载,请注明出处;
本文地址: https://www.perfcode.com/p/download-an-entire-website.html
关注微信公众号,免费向我提问;