0

0

Linux 怎么批量下载文件?wget/curl 教程

舞夢輝影

舞夢輝影

发布时间:2025-12-05 22:13:02

|

923人浏览过

|

来源于php中文网

原创

wget更适合批量下载,支持-i参数读取URL列表并提供断点续传、重试等选项;curl需配合shell脚本实现批量下载,灵活性高但配置更复杂。

linux 怎么批量下载文件?wget/curl 教程

在 Linux 中批量下载文件,wgetcurl 是最常用的命令行工具。虽然两者都能完成下载任务,但在批量操作上,wget 更适合简单场景,而 curl 功能更灵活但需要配合脚本使用。

1. 使用 wget 批量下载(推荐)

wget 支持从文件中读取 URL 列表,非常适合批量下载。

方法一:用 -i 参数从文件读取 URL

创建一个文本文件,每行一个下载链接:
https://example.com/file1.zip
https://example.com/file2.zip
https://example.com/file3.zip
执行命令:
wget -i urls.txt
这样会依次下载所有文件。

常用选项:

  • -c:断点续传,网络中断后可继续下载
  • -t 3:失败时重试 3 次
  • -nv:非详细模式,减少输出信息
  • -P /path/to/dir:指定保存目录
例如:
wget -c -t 3 -nv -P ./downloads -i urls.txt

方法二:用 shell 循环批量下载

如果 URL 有规律,可以直接用 for 循环:
for i in {1..10}; do
  wget https://example.com/file$i.zip
done

2. 使用 curl 批量下载

curl 不像 wget 支持 -i 参数直接读文件,但可以结合 shell 脚本实现。

方法一:用 while 读取文件中的 URL

Evoker
Evoker

一站式AI创作平台

下载
while read url; do
  curl -O "$url"
done < urls.txt
注意:-O 表示使用远程文件名保存。

方法二:配合 seq 或花括号批量请求

适用于编号连续的文件:
for i in {1..5}; do
  curl -O https://example.com/image$i.jpg
done

curl 小技巧:

  • -#:显示进度条
  • -L:跟随重定向
  • --fail:出错时不输出 HTML 错误页
  • -o filename:自定义保存名(支持变量)
例如按序号命名:
for i in {1..3}; do
  curl -# -L -o "file$i.zip" "https://example.com/file$i.zip"
done

3. 实用建议和注意事项

避免被封 IP

大批量下载时,服务器可能限制频繁请求。可以加延迟:
for url in $(cat urls.txt); do
  wget "$url"
  sleep 1  # 每次下载后暂停 1 秒
done

检查链接有效性

提前测试几个链接是否能访问:
head -3 urls.txt | while read url; do
  curl -I "$url" 2>/dev/null | head -1
done

日志记录

把下载过程记录到日志,方便排查问题:
wget -i urls.txt >> download.log 2>&1

基本上就这些。wget 更适合“开箱即用”的批量下载,curl 更适合定制化场景。根据你的需求选择即可。

相关专题

更多
html版权符号
html版权符号

html版权符号是“©”,可以在html源文件中直接输入或者从word中复制粘贴过来,php中文网还为大家带来html的相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

611

2023.06.14

html在线编辑器
html在线编辑器

html在线编辑器是用于在线编辑的工具,编辑的内容是基于HTML的文档。它经常被应用于留言板留言、论坛发贴、Blog编写日志或等需要用户输入普通HTML的地方,是Web应用的常用模块之一。php中文网为大家带来了html在线编辑器的相关教程、以及相关文章等内容,供大家免费下载使用。

649

2023.06.21

html网页制作
html网页制作

html网页制作是指使用超文本标记语言来设计和创建网页的过程,html是一种标记语言,它使用标记来描述文档结构和语义,并定义了网页中的各种元素和内容的呈现方式。本专题为大家提供html网页制作的相关的文章、下载、课程内容,供大家免费下载体验。

468

2023.07.31

html空格
html空格

html空格是一种用于在网页中添加间隔和对齐文本的特殊字符,被用于在网页中插入额外的空间,以改变元素之间的排列和对齐方式。本专题为大家提供html空格的相关的文章、下载、课程内容,供大家免费下载体验。

245

2023.08.01

html是什么
html是什么

HTML是一种标准标记语言,用于创建和呈现网页的结构和内容,是互联网发展的基石,为网页开发提供了丰富的功能和灵活性。本专题为大家提供html相关的各种文章、以及下载和课程。

2891

2023.08.11

html字体大小怎么设置
html字体大小怎么设置

在网页设计中,字体大小的选择是至关重要的。合理的字体大小不仅可以提升网页的可读性,还能够影响用户对网页整体布局的感知。php中文网将介绍一些常用的方法和技巧,帮助您在HTML中设置合适的字体大小。

505

2023.08.11

html转txt
html转txt

html转txt的方法有使用文本编辑器、使用在线转换工具和使用Python编程。本专题为大家提供html转txt相关的文章、下载、课程内容,供大家免费下载体验。

311

2023.08.31

html文本框代码怎么写
html文本框代码怎么写

html文本框代码:1、单行文本框【<input type="text" style="height:..;width:..;" />】;2、多行文本框【textarea style=";height:;"></textare】。

424

2023.09.01

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

27

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.3万人学习

Git 教程
Git 教程

共21课时 | 2.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号