引言
无论是远程工作还是本地工作,我们经常需要从外部获取信息。在没有其他选择的情况下,使用命令行工具来获取这些信息是一个不错的选择。
本文将介绍一些通过命令行下载内容时最常使用的工具。
Wget
我们首先介绍一个广受欢迎的工具 wget。它是一个网络工具,支持通过 HTTP、HTTPS 和 FTP 协议下载内容。wget 可以在后台或前台运行,这让它在你需要下载大文件时非常有用,即便你已经退出登录,下载也不会中断。
wget 提供了丰富的选项,包括进行需要认证的下载、设置递归下载的深度限制、支持 URL 的正则表达式匹配、允许排除特定内容、从文件中读取 URL 等。wget 的功能非常全面,建议通过运行命令查看其帮助文档来了解更多选项。
$ wget -h
$ wget https://wordpress.org/latest.zip
- 从文件中列出的 URL 下载的示例。首先是我们的文件列表:
$ cat list.txt
https://wordpress.org/latest.zip
https://downloads.joomla.org/cms/joomla3/3-8-5/Joomla_3-9-4-Stable-Full_Package.zip
https://ftp.drupal.org/files/projects/drupal-8.4.5.zip
然后您可以使用以下命令运行下载:
$ wget -i list.txt
$ wget -b https://wordpress.org/latest.zip
- 如果您想使用 wget 结合 FTP 下载单个文件。
$ wget ftp://user:password@host:/path-to-file/file.txt
- 一个更有用的示例是使用后台和递归模式,以便您可以获得目录中的所有文件和文件夹。
$ wget -br ftp://user:password@ftp-host:/path-for-download/
许多现代 Linux 发行版上都预装了 Wget,但如果您需要安装它,可以使用:
$ sudo apt install wget # Debian/Ubuntu like distros
# yum install wget # CentOS/RHEL
# dnf install wget # Fedora
Curl
curl 是一个功能强大的数据传输工具,能够与服务器进行数据交换。它兼容多种网络协议,包括但不限于 DICT、FILE、FTP、FTPS、GOPHER、HTTP、HTTPS、IMAP、IMAPS、LDAP、LDAPS、POP3、POP3S、RTMP、RTSP、SCP、SFTP、SMB、SMBS、SMTP、SMTPS、TELNET 和 TFTP,根据其官方文档所述。
可以想象,有了这样的支持,curl 的应用场景非常广泛。你可能已经意识到,curl 不仅支持通过代理进行数据传输,还能够处理用户认证、FTP 的文件上传和下载、断点续传等功能。
下面是一些 curl 的使用实例:
$ curl -O https://wordpress.org/latest.zip
<./pre>
Download a file to output file by your choice:
$ curl -o wordpress.zip https://wordpress.org/latest.zip
$ curl -C - O https://wordpress.org/latest.zip
要安装curl,您可以使用:
$ sudo apt install curl # Debian/Ubuntu
# yum install curl # CentOS/RHEL
# dnf install curl # Fedora
Aria
Aria 是一款多功能的下载管理器,它支持包括 HTTP/HTTPS、FTP/SFTP、BitTorrent 和 Metalink 在内的各种协议。Aria 的一些独特之处在于,它能够同时从多个源点下载文件、处理磁力链接,并且具备完整的 BitTorrent 客户端功能。
作为 BitTorrent 客户端,Aria 支持分布式哈希表(DHT)、对等交换(PEX)、加密传输、磁力链接(Magnet URI)、网页播种、选择性下载以及本地对等体发现等高级特性。
以下提供了一些 Aria2 的基本使用示例:
$ aria2c http://releases.ubuntu.com/18.10/ubuntu-18.10-desktop-amd64.iso.torrent
$ aria2c -i downloadurls.txt
$ aria2c -c http://releases.ubuntu.com/18.10/ubuntu-18.10-desktop-amd64.iso.torrent
$ aria2c --http-user=xxx --http-password=xxx https://protectedwebsite.com/file
$ sudo apt install aria2 # Debian/Ubuntu
# yum install aria2 # CentOS/RHEL
# dnf install aria2 # Fedora
Axel
我们列表中的第四款下载工具是 Axel,它通过为单个文件建立多个连接来优化下载流程。Axel 能够利用多个下载源进行单一文件的下载。开发者指出,Axel 能够将下载速度提升高达 60%,并且它兼容 HTTP/HTTPS、FTP 和 FTPS 等协议。
我们曾在一篇专门的文章中详细介绍了 Axel,你可以通过这个链接访问:如何在 Linux 系统中使用 Axel 加速 FTP 和 HTTP 下载。
在那篇文章中,你可以找到 wget、HTTP 直接下载与 Axel 在下载时间上的对比分析。
以下是一些使用 Axel 的基本示例:
$ axel https://wordpress.org/latest.zip
- 您可以使用相应的选项 --max-speed 或短选项 -s 设置最大下载速度。该值以每秒字节数设置:
$ axel --max-speed=512000 https://wordpress.org/latest.zip
- 要以不同的名称保存文件,可以使用 -o 选项指定文件名:
$ axel -o wordpress.zip https://wordpress.org/latest.zip
如果您想在 Linux 系统上安装 Axel,请使用以下命令中的相应命令:
$ sudo apt install axel # Ubuntu/Debian
# yum install epel release && yum install axel # CentOS/RHEL
# dnf install axel # Fedora