Linux系统中wget的使用方法解析

12-07

功能说明: wget使用 HTTP 和 FTP 协议,支持代理服务器和断点续传,是基于控制台最强大的下载工具。

命令格式: wget [参数]

常用参数:

1. 启动选项:

-V : 显示 wget 的版本

-h : 显示 wget 的使用说明

-b : 启动之后转入后台执行,日志文件写在当前目录下”wget-log”文件中

-e : 执行一个 .wgetrc 里面的 指令

2. 日志文件与输入文件选项:

-o : 将命令的输出写入指定的 文件

-a : 将命令的输出以追加方式写入指定的 文件

-d : 显示调试信息

-q : 以安静模式执行(无输出)

-v : 输出详细信息

-nv : 关闭详细信息输出,但不是安静模式

-i : 从指定的 文件中读取 URL

-F : 把输入文件视为 HTML 文件(与 -i 参数同时使用)

-B : 与 -F 一同使用,优先考虑 -i 所指定文件中的 URL

3. 下载选项:

-t : 当wget无法与服务器建立连接时,尝试连接次,(0表示无限制)

-O : 将下载的文件保存为指定的

-nc : 不覆盖已有的文件

-c : 续传文件

-N : 不取回比本地旧的文件,只下载更新的文件

-S : 显示服务器响应

-T : 设定响应超时的秒数为

-w : 在两次尝试之间等待 秒

-Y : 通过代理服务器进行连接

-Q : 限制下载文件的总大小最多不能超过 ,单位为字节,可以使用 k,m 后缀

––limit-rate= : 限定下载传输率,单位为字节,可以使用 k,m 后缀

4. 目录选项:

-nd : 不下载目录结构,把从服务器所有指定目录下载的文件都堆到当前目录里

-x : 创建与远程完全一直的目录结构

-nH : 不创建以目标主机域名为目录名的目录,将目标主机的目录结构直接下到当前目录下

-P: 将文件保存到目录 PREFIX/…

––cut-dirs= : 忽略 层远程目录

5. HTTP 选项:

––http-user= : 指定 HTTP 用户验证的用户

––http-passwd= : 指定 HTTP 用户验证的用户口令

––no-cache : 禁用服务器端的数据缓存 (默认情况下为允许)

-C, –cache=on/off 允许/不允许服务器端的数据缓存 (一般情况下允许).

-E, –html-extension 将所有text/html文档以.html扩展名保存

–ignore-length 忽略 `Content-Length'头域

–header=STRING 在headers中插入字符串 STRING

––proxy-user= : 指定 Proxy 使用者为

––proxy-passwd= : 指定 Proxy 使用者口令为

-E : 将所有类型为 application/xhtml+xml 或 text/html 的文档以 .html 扩展名保存

-U : 设定代理的名称为 而不是 Wget/VERSION

–referer=URL 在HTTP请求中包含 `Referer: URL'头

-s, –save-headers 保存HTTP头到文件

-U, –user-agent=AGENT 设定代理的名称为 AGENT而不是 Wget/VERSION.

–no-http-keep-alive 关闭 HTTP活动链接 (永远链接).

–cookies=off 不使用 cookies.

--load-cookies=FILE 在开始会话前从文件 FILE中加载cookie

–save-cookies=FILE 在会话结束后将 cookies保存到 FILE文件

6. FTP 选项:

––ftp-user= : 指定 FTP 用户

––ftp-passwd= : 指定 FTP 用户口令

––no-remove-listing : 不移除临时的 .listing 文件

––no-glob : 关闭文件名的 globbing 机制(即不使用通配符)

–passive-ftp 使用被动传输模式 (缺省值).

–active-ftp 使用主动传输模式

––no-passive-ftp : 关闭默认的被动传输模式(即使用主动传输模式)

––retr-symlinks : 在递归时,将链接指向文件(而不是目录)

7. 使用递回方式获取选项:

-r : 打开递归下载

-l : 指定最大递归深度为 (inf 或 0 代表无穷)

––delete-after : 删除下载完毕的本地文件

-k : 转换非相对链接为相对链接

-K (大写), –backup-converted 在转换文件X之前,将之备份为 X.orig

-m : 开启适合用来镜像的选项,等价于 -N -r -l inf ––no-remove-listing

-p : 用以确保所有用于显示被下载网页的元素都被下载,如:图像,声音以及网页中用到的样式表

8. 递回方式的允许与拒绝选项:

-A: 在指定允许下载的扩展文件名(用逗号间隔)

-R: 在指定禁止下载的扩展文件名(用逗号间隔)

-D: 在指定允许下载的域名

––exclude-domains= : 在指定禁止下载的域名

––follow-ftp : 跟踪 HTML 文档中的 FTP 链接

––follow-tags= : 在中指定用逗号分隔的被跟踪的HTML标签列表

––ignore-tags= : 在中指定用逗号分隔的不被跟踪的HTML标签列表

-G, –ignore-tags=LIST 分号分隔的被忽略的HTML标签的列表

-H : 当递归时转到外部主机

-L : 仅仅跟踪相对链接

-I: 在指定允许下载的目录列表

-X: 在指定禁止下载的目录列表

-np : 不要追溯到父目录,即只下载目标站点指定目录及其子目录的内容