linux 下载插件wget 和 axel

点击量:33

axel 默认没有安装
yum install -y axel

AXEL

axel的全局配置文件是/etc/axel/axelrc,你可以根据需要对axel进行定制,
比如我取消了对alternate_output = 1一行的注释,以便让axel的输出比较简洁一些,
你也可以在这个文件中设置axel使用的线程数,默认是4个线程。 

使用很简单 axel url即可 

限速使用:加上 -s 参数,如 -s 10240,即每秒下载的字节数,这里是 10 Kb 

限制连接数:加上 -n 参数,如 -n 5,即打开 5 个连接。

axel -n 32 url

wget

wget [选项] [下载地址]

Wget常用参数

-b:后台下载,Wget默认的是把文件下载到当前目录。

-O:将文件下载到指定的目录中。

-P:指定保存文件的目录。

-N:don't re-retrieve files unless newer than

-t:尝试连接次数,当Wget无法与服务器建立连接时,尝试连接多少次。

-c:断点续传,如果下载中断,那么连接恢复时会从上次断点开始下载。

-a<日志文件>:在指定的日志文件中记录资料的执行过程;
-A<后缀名>:指定要下载文件的后缀名,多个后缀名之间使用逗号进行分隔;
-b:进行后台的方式运行wget;
-B<连接地址>:设置参考的连接地址的基地地址;
-c:继续执行上次终端的任务;
-C<标志>:设置服务器数据块功能标志on为激活,off为关闭,默认值为on;
-d:调试模式运行指令;
-D<域名列表>:设置顺着的域名列表,域名之间用“,”分隔;
-e<指令>:作为文件“.wgetrc”中的一部分执行指定的指令;
-h:显示指令帮助信息;
-i<文件>:从指定文件获取要下载的URL地址;
-l<目录列表>:设置顺着的目录列表,多个目录用“,”分隔;
-L:仅顺着关联的连接;
-r:递归下载方式;
-nc:文件存在时,下载文件不覆盖原有文件;
-nv:下载时只显示更新和出错信息,不显示指令的详细执行过程;
-q:不显示指令执行过程;
-nh:不查询主机名称;
-v:显示详细执行过程;
-V:显示版本信息;
--passive-ftp:使用被动模式PASV连接FTP服务器;
--follow-ftp:从HTML文件中下载FTP连接文件。
-np 指不搜索上层目录
-k则是指将绝对链接转换为相对链接

此外,Wget还可下载整个 网站,如下载http://man.chinaunix.net整个Man手册中心。

递归下载整个站点

只需输入如下命令即可: wget -r -p -np -k http://man.chinaunix.net 其中-r参数是指使用递归下载,

-p是指下载所有显示完整网页所以需要的文件,如图片等,
-np是指不搜索上层目录,
-k则是指将绝对链接转换为相对链接。 

wget 递归下载,这是个非常有意思的东西

注意,如果没有递归的,可能是进行了301,302的跳转,这个时候需要调整域名这些东西

发表评论

电子邮件地址不会被公开。

3 × 1 =