一条命令下载整个网站

在Linux系统下,你可以通过一条命令来下载整个网站,并按照网站的目录结构生成对应的文件夹及网页文件

wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com

该命令只能下载整个网站的静态资源,通过JavaScript生成的动态内容无法下载;且资源需要在网页上能被爬取到;

使用这条命令需要确保你的磁盘有足够的空间。

原创内容,如需转载,请注明出处;

本文地址: https://www.perfcode.com/p/download-an-entire-website.html

分类: 计算机技术
推荐阅读:
Golang中的map数据类型 map 是一堆键值对的未排序集合;在Go语言中,使用map不需要引入库,它是一种内置的数据类型。
SSH证书登录提示WARNING: UNPROTECTED PRIVATE KEY FILE解决方法 使用SSH登录服务器时,出现 WARNING: UNPROTECTED PRIVATE KEY FILE! 提示,其原因是密钥文件权限太开放,SSH要求密钥文件不能被其他用户房访问;
python chr()函数 chr() 是 Python 内置函数之一,用于将整数转换为对应的 Unicode 字符。
使用Python求取前n个自然数的总和 给一个自然数n,使用Python求取前n个自然数的总和;
Linux系统删除目录下的所有空目录 在Linux系统下,你如果想删除某个目录下所有的空目录,那你可以通过这一条命令实现:
cannot use 1 (type int) as type bool in assignment错误的解决方法 在go语言中布尔类型不能接受其他类型的赋值,不支持自动或强制的类型转换。