Linux如何使用cURL分割下载大文件

系统 Linux 系统运维
在带宽不足或有流量限制的情况下,我们如何在Linux使用cURL分割下载大文件呢?Linux下最好用的大文件分割下载工具就是大名鼎鼎的cURL了,它可以将大文件按用户的设定进行下载分割,我们在下载完成后再将分好的文件组合一下就OK了。

全国已经慢慢开始进入了光纤时代,网速也在逐步攀升,这让我们在下载大文件时变得非常爽。当然,在 Windows 下大家可能会用到迅雷之类的下载工具,一般此类下载工具都是将网络上的文件进行分块、分片,下载完成后再组合成一个整体文件。那么,在带宽不足或有流量限制的情况下,我们如何在 Linux 使用 cURL 分割下载大文件呢?今天我们就来介绍一下。

[[146802]]

Linux 下***用的大文件分割下载工具就是大名鼎鼎的 cURL 了,它可以将大文件按用户的设定进行下载分割,我们在下载完成后再将分好的文件组合一下就 OK 了。

cURL 是一个跨平台的下载工具,它支持 Linux、Windows 和  Mac OS X,这里我们以 Ubuntu 环境进行介绍。

使用cURL分割下载大文件

1. 使用之前,我们需要先安装 cURL

  1. sudo apt-get install curl

当然也可以到官网去下载手动安装

cURL 官网下载

2. 举个例子,我们把 Ubuntu 15.04 的 ISO 文件切成单个 200M 大小的分块进行下载。

下载使用源阿里云开源镜像站上的镜像,该镜像差不多1.1G。

  1. curl --range 0-199999999 -o ubuntu-iso.part1 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso

–range 参数会告诉 cURL ***文件只下载 200 MB,并重命名为 ubuntu-iso.part1

现在我们将后面的几部分 200M 文件下载完:

  1. curl --range 200000000-399999999 -o ubuntu-iso.part2 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso
  2. curl --range 400000000-599999999 -o ubuntu-iso.part3 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso
  3. curl --range 600000000-799999999 -o ubuntu-iso.part4 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso
  4. curl --range 800000000-999999999 -o ubuntu-iso.part5 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso
  5. curl --range 1000000000- -o ubuntu-iso.part6 http://mirrors.aliyun.com/ubuntu-releases/15.04/ubuntu-15.04-desktop-amd64.iso

***一部分不用指定文件结尾,下载完成后,我们将能够看到 6 个分割好的文件。

3. 下载好之后,我们需要用 cat 命令将这几个文件重新整合成一个整体。

  1. cat ubuntu-iso.part? > ubuntu-15.04-desktop-amd64.iso

注意:在 Windows 下的话,可以使用 copy 命令代替 Linux 的 cat 命令。

4. 文件整合完成后***还是用 md5sum 命令验证下 md5。

责任编辑:火凤凰 来源: Winclient博客
相关推荐

2019-12-17 09:00:48

split分割Linux文件Linux

2021-04-19 05:41:04

JavaScript大文件下载

2015-08-07 15:35:42

ios短点下载源码

2010-06-03 11:28:35

2019-10-11 08:00:00

Linux命令最大文件

2021-11-26 22:01:26

Linux传输网络

2009-09-23 10:15:23

Linux curlLinux命令行工具

2022-08-26 07:02:57

Python工具分割

2023-12-13 13:47:00

Linux重组文件

2010-05-28 13:22:57

2024-07-02 10:18:18

2022-08-16 16:00:05

Python

2013-03-22 14:42:01

OSS开放存储服务云计算

2020-08-14 11:01:32

数据Pandas文件

2022-11-22 08:41:22

curlDELETELinux

2017-03-09 14:42:21

LinuxsFTP上传下载

2021-06-10 09:05:43

Linux命令大文件切割

2021-12-29 15:02:48

Linux清空文件

2017-08-30 08:57:49

Linux分割文件重组文件

2024-08-20 08:22:21

点赞
收藏

51CTO技术栈公众号