同时也支持基于HTTP代理的下载

图片 1

什么是wget

    wget用原始扶植在那之中的爱尔兰语来讲正是:The non-interactive network
downloader,非人机联作式互联网下载器。它协助HTTP、HTTPS、FTP等合计,同一时间也支撑基于HTTP代理的下载。别的首要特色如下所示:

  • 能够干活于后台,而无需报到到系统
  • 能够追踪HTML、XHTML、CSS等文件,进而将服务器上的页面下载到本地开展离线浏览。
  • 扶植慢速和不安定网络下的下载和三番五次。

常用语法

wget [选项] [URL]

常用选项参数如下所示:

选项 说明
-V,–version 显示版本信息
-h,–help 显示帮助信息
-b,–backgroup 以后台形式进行运行
-e command,–execute command 如果命令属于.wgetrc,则执行命令
-o logfile,–output-file=logfile 将日志打印到文件中
-a logfile,–append-output=logfile 追加日志到文件中
-q,–quiet 静默模式,关闭wget的输出信息
-v,–verbose 显示详细的信息,wget默认模式
-i file,–inpu-file=file 从文件中读取URL下载地址
-B URL,–base=URL 设置连接的相对URL地址
–bind-address=ADDRESS 设置连接的IP地址或主机名
-t number,–tries=number 设置重试次数,0和inf则代表一直重试,默认值为20
-O file,–output-document=file 将下载文件中的内容保存到本地文件中
-nc,–no-clobber 如果下载文件已经存在,则不下载
-c,–continue 继续执行上次的下载任务
-N,–timestamping 增加时间戳
-S,–server-response 打印HTTP、FTP头部信息
-T seconds,–timeout=seconds 设置超时时间
–limit-rate=amount 限制下载速度
-X 设置下载排除项
-r,–recursive 递归下载文件
-nH, –no-host-directories 禁止创建以域名命令的文件夹
–cut-dirs=number 忽略下载地址中的层次目录

布署文件

    要想好好利用wget命令,照旧先掌握一下wget蒙蔽的有的潜准绳,地方在:

  • /etc/wgetrc
  • 家目录中的.wgetrc

1、wget命令有一点点精选可以应用逗号实行隔离,如-X能够安装杀绝项,要是黄金时代味是贰遍,则不在意,但假设短期均无需下载那一个目录,则能够将这几个免除项增添.wgetrc配置文件中

exclude_directories=test,tmp,temp

2、在率先种状态下,倏然又想下载这一个文件时,能够去掉配置文件中设置,也可以运用以下的章程:

wget -r -X '' ftp://192.168.8.8

常用示例

1、下载文件:

[root@localhost ]# wget https://ss0.bdstatic.com/5aV1bjqh_Q23odCf/static/superman/img/logo/logo_redBlue_32fe2c69.png
--2018-07-28 19:55:17--  https://ss0.bdstatic.com/5aV1bjqh_Q23odCf/static/superman/img/logo/logo_redBlue_32fe2c69.png
正在解析主机 ss0.bdstatic.com (ss0.bdstatic.com)... 180.163.198.32
正在连接 ss0.bdstatic.com (ss0.bdstatic.com)|180.163.198.32|:443... 已连接。
已发出 HTTP 请求,正在等待回应... 200 OK
长度:8618 (8.4K) [image/png]
正在保存至: “logo_redBlue_32fe2c69.png”

100%[=============================================================================================================================>] 8,618       --.-K/s 用时 0.002s

2018-07-28 19:55:17 (3.80 MB/s) - 已保存 “logo_redBlue_32fe2c69.png” [8618/8618])

2、下载目录和后台实践

[root@localhost test]# wget -r -b https://mirrors.aliyun.com/centos/7.5.1804/atomic/x86_64/adb/
继续在后台运行,pid 为 26252。
将把输出写入至 “wget-log”。
[root@localhost test]# ll
总用量 4
drwxr-xr-x 3 root root   38 7月  28 20:14 mirrors.aliyun.com
-rw-r--r-- 1 root root 1257 7月  28 20:14 wget-log
[root@localhost test]# cat wget-log 
--2018-07-28 20:14:11--  https://mirrors.aliyun.com/centos/7.5.1804/atomic/x86_64/adb/
正在解析主机 mirrors.aliyun.com (mirrors.aliyun.com)... 180.163.155.11, 180.163.155.8, 180.163.155.9, ...
正在连接 mirrors.aliyun.com (mirrors.aliyun.com)|180.163.155.11|:443... 已连接。
已发出 HTTP 请求,正在等待回应... 200 OK
长度:3518 (3.4K) [text/html]
正在保存至: “mirrors.aliyun.com/centos/7.5.1804/atomic/x86_64/adb/index.html”

3、禁绝生成下载地址中的多级目录

[root@localhost test]# wget -b -r -nH --cut-dir=6 https://mirrors.aliyun.com/centos/7.5.1804/atomic/x86_64/adb/
继续在后台运行,pid 为 34849。
将把输出写入至 “wget-log”。
[root@localhost test]# ll
总用量 12
-rw-r--r-- 1 root root 3518 7月  28 20:25 index.html
-rw-r--r-- 1 root root  295 10月 31 2017 robots.txt
-rw-r--r-- 1 root root 1113 7月  28 20:25 wget-log

下载目录路线如下所示:

情况 结果
-r mirrors.aliyun.com/centos/7.5.1804/atomic/x86_64/adb/
-nH centos/7.5.1804/atomic/x86_64/adb/
-nH –cut-dir=1 centos/7.5.1804/atomic/x86_64/adb/
-nH –cut-dir=4 adb/
-nH –cut-dir=6 .

4、将下载的文本保留到地头文件中

[root@localhost test]# wget -t 2 -o log.txt https://mirrors.aliyun.com/centos/7.5.1804/isos/x86_64/sha256sum.txt  -O test.txt
[root@localhost test]# ll
总用量 8
-rw-r--r-- 1 root root 554 7月  28 20:37 log.txt
-rw-r--r-- 1 root root 598 5月  10 03:59 test.txt
[root@localhost test]# cat log.txt
--2018-07-28 20:37:28--  https://mirrors.aliyun.com/centos/7.5.1804/isos/x86_64/sha256sum.txt
正在解析主机 mirrors.aliyun.com (mirrors.aliyun.com)... 180.163.155.9, 180.163.155.10, 180.163.155.11, ...
正在连接 mirrors.aliyun.com (mirrors.aliyun.com)|180.163.155.9|:443... 已连接。
已发出 HTTP 请求,正在等待回应... 200 OK
长度:598 [text/plain]
正在保存至: “test.txt”
     0K                    100%  175M=0s
2018-07-28 20:37:28 (175 MB/s) - 已保存 “test.txt” [598/598])

[root@localhost test]# cat test.txt
506e4e06abf778c3435b4e5745df13e79ebfc86565d7ea1e128067ef6b5a6345  CentOS-7-x86_64-DVD-1804.iso
b346daae2a93caed88e822e722e7284c648f9919d475ff98489b424350f99a45  CentOS-7-x86_64-LiveGNOME-1804.iso
040ddfb27d30e48efad8709c9df946202cec169077c843fd2cbe8d802187ff8e  CentOS-7-x86_64-LiveKDE-1804.iso
714acc0aefb32b7d51b515e25546835e55a90da9fb00417fbee2d03a62801efd  CentOS-7-x86_64-Minimal-1804.iso
99723c8b87dcec21df8aed23de1eb810346d42cfd2a3fafafe70a68296053417  CentOS-7-x86_64-Everything-1804.iso
937bf0a7b0932817f84f7230f15ed88911bbbd85c0c958680792b7f8d8f9c1a9  CentOS-7-x86_64-NetInstall-1804.iso

正文同步在Wechat订阅号上揭破,如各位小同伴们赏识笔者的篇章,也得以关切自个儿的Wechat订阅号:woaitest,或扫描上面包车型大巴二维码增添关心:
图片 1