如何使用cURL下载多个子目录下的多个文件？ [英] How to download multiple files in multiple sub-directories using curl?

问题描述

我正在使用cURL下载多个文件。所有文件的基本URL如下所示

https://mydata.gov/daily/2017

这些目录中的数据进一步按日期和文件类型分组。所以我需要的第一个数据是这个目录

https://mydata.gov/daily/2017/001/17d/Roger001.gz

第二个数据为

https://mydata.gov/daily/2017/002/17d/Roger002.gz

我需要下载到2017年最后一天的数据

https://mydata.gov/daily/2017/365/17d/Roger365.gz

如何使用cURL或任何其他类似工具将所有文件下载到单个本地文件夹，最好采用原始文件名？

推荐答案

在bash终端使用for f in {001..365}; do curl https://mydata.gov/daily/2017/"$f"/17d/Roger"$f".gz -o /your-directory/Roger"$f".gz; done。 将your-directory替换为要保存文件的目录。

这篇关于如何使用cURL下载多个子目录下的多个文件？的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！