下载整个网站

-p参数告诉wget包括所有文件,包括图像。 -e robots = off,您不希望wget遵守robots.txt文件-U mozilla作为浏览器身份。 --random-wait让wget选择一个随机的秒数等待,避免进入黑名单。 其他有用的wget参数:--limit-rate = 20k限制它下载文件的速率。 -b注销后继续wget。 -o $HOME/wget_log.txt记录输出
wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com

命令用途:下载整个网站

基本用法

wget --random-wait -r -p -e robots=off -U mozilla http://www.example.com

wget — 文件下载工具。

命令行下载工具,支持 HTTP、HTTPS、FTP 协议,支持断点续传、递归下载、限速等。

参数说明

  • wget — 命令名称
  • --random-wait -r -p -e robots=off -U mozilla http://www.example.com — 命令参数/选项

评论(0

暂无评论,来说两句吧

发表评论

回复 取消