0

0

Linux 怎么批量下载文件?wget/curl 教程

舞夢輝影

舞夢輝影

发布时间:2025-12-05 22:13:02

|

923人浏览过

|

来源于php中文网

原创

wget更适合批量下载,支持-i参数读取url列表并提供断点续传、重试等选项;curl需配合shell脚本实现批量下载,灵活性高但配置更复杂。

linux 怎么批量下载文件?wget/curl 教程

在 Linux 中批量下载文件,wgetcurl 是最常用的命令行工具。虽然两者都能完成下载任务,但在批量操作上,wget 更适合简单场景,而 curl 功能更灵活但需要配合脚本使用。

1. 使用 wget 批量下载(推荐)

wget 支持从文件中读取 URL 列表,非常适合批量下载。

方法一:用 -i 参数从文件读取 URL

创建一个文本文件,每行一个下载链接:
https://example.com/file1.zip
https://example.com/file2.zip
https://example.com/file3.zip
执行命令:
wget -i urls.txt
这样会依次下载所有文件。

常用选项:

  • -c:断点续传,网络中断后可继续下载
  • -t 3:失败时重试 3 次
  • -nv:非详细模式,减少输出信息
  • -P /path/to/dir:指定保存目录
例如:
wget -c -t 3 -nv -P ./downloads -i urls.txt

方法二:用 shell 循环批量下载

如果 URL 有规律,可以直接用 for 循环:
for i in {1..10}; do
  wget https://example.com/file$i.zip
done

2. 使用 curl 批量下载

curl 不像 wget 支持 -i 参数直接读文件,但可以结合 shell 脚本实现。

方法一:用 while 读取文件中的 URL

海绵音乐
海绵音乐

字节跳动推出的AI音乐生成工具

下载
while read url; do
  curl -O "$url"
done < urls.txt
注意:-O 表示使用远程文件名保存。

方法二:配合 seq 或花括号批量请求

适用于编号连续的文件:
for i in {1..5}; do
  curl -O https://example.com/image$i.jpg
done

curl 小技巧:

  • -#:显示进度条
  • -L:跟随重定向
  • --fail:出错时不输出 HTML 错误页
  • -o filename:自定义保存名(支持变量)
例如按序号命名:
for i in {1..3}; do
  curl -# -L -o "file$i.zip" "https://example.com/file$i.zip"
done

3. 实用建议和注意事项

避免被封 IP

大批量下载时,服务器可能限制频繁请求。可以加延迟:
for url in $(cat urls.txt); do
  wget "$url"
  sleep 1  # 每次下载后暂停 1 秒
done

检查链接有效性

提前测试几个链接是否能访问:
head -3 urls.txt | while read url; do
  curl -I "$url" 2>/dev/null | head -1
done

日志记录

把下载过程记录到日志,方便排查问题:
wget -i urls.txt >> download.log 2>&1

基本上就这些。wget 更适合“开箱即用”的批量下载,curl 更适合定制化场景。根据你的需求选择即可。

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
while的用法
while的用法

while的用法是“while 条件: 代码块”,条件是一个表达式,当条件为真时,执行代码块,然后再次判断条件是否为真,如果为真则继续执行代码块,直到条件为假为止。本专题为大家提供while相关的文章、下载、课程内容,供大家免费下载体验。

104

2023.09.25

curl_exec
curl_exec

curl_exec函数是PHP cURL函数列表中的一种,它的功能是执行一个cURL会话。给大家总结了一下php curl_exec函数的一些用法实例,这个函数应该在初始化一个cURL会话并且全部的选项都被设置后被调用。他的返回值成功时返回TRUE, 或者在失败时返回FALSE。

454

2023.06.14

linux常见下载安装工具
linux常见下载安装工具

linux常见下载安装工具有APT、YUM、DNF、Snapcraft、Flatpak、AppImage、Wget、Curl等。想了解更多linux常见下载安装工具相关内容,可以阅读本专题下面的文章。

183

2023.10.30

磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

1542

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

716

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

300

2023.06.30

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

799

2023.07.05

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

586

2023.07.06

Rust内存安全机制与所有权模型深度实践
Rust内存安全机制与所有权模型深度实践

本专题围绕 Rust 语言核心特性展开,深入讲解所有权机制、借用规则、生命周期管理以及智能指针等关键概念。通过系统级开发案例,分析内存安全保障原理与零成本抽象优势,并结合并发场景讲解 Send 与 Sync 特性实现机制。帮助开发者真正理解 Rust 的设计哲学,掌握在高性能与安全性并重场景中的工程实践能力。

19

2026.03.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 10.2万人学习

Git 教程
Git 教程

共21课时 | 4万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号