0

0

Linux 并发发送请求怎么实现?

舞姬之光

舞姬之光

发布时间:2025-12-05 15:55:00

|

505人浏览过

|

来源于php中文网

原创

Linux并发请求核心是控制并发数、避免资源耗尽及处理超时错误;可用curl+xargs(简单批量)、Python多线程/asyncio(灵活定制)或Go/Rust(高性能长期运行),并需调优ulimit、somaxconn等系统参数。

linux 并发发送请求怎么实现?

Linux 下并发发送请求,核心是利用多进程、多线程或异步 I/O 机制,绕过单请求串行等待的瓶颈。关键不在于“怎么发”,而在于“怎么管”——控制并发数、避免资源耗尽、处理超时和错误。

curl + xargs 并发调用(简单脚本场景)

适合批量 HTTP 请求,如健康检查、批量通知。xargs 的 -P 参数可指定最大并行数,防止打爆目标或本地端口

seq 1 100 | xargs -P 10 -I {} curl -s -o /dev/null -w "%{http_code}\n" "https://api.example.com/test?i={}"
  • -P 10 表示最多同时跑 10 个 curl 进程
  • -I {} 把每个数字代入 URL,实现参数化
  • -s 静默输出,用 -w 提取状态码,便于后续统计

用 Python 的 requests + threading 或 asyncio(灵活可控)

需要定制逻辑(如带 Token、重试、结果聚合)时更合适。同步多线程简单直接;异步(asyncio + aiohttp)吞吐更高,尤其 I/O 密集型:

# threading 示例(限制 20 线程)
from concurrent.futures import ThreadPoolExecutor
import requests

def fetch(url): return requests.get(url, timeout=5).status_code

天天团购系统
天天团购系统

天天团购系统是一套强大的开源团购程序,采用PHP+mysql开发,系统内置支付宝、财付通、GOOGLE地图等接口,支持短信发送团购券和实物团购快递发货等;另外可通过Ucenter模块,与网站已有系统无缝整合,实现用户同步注册、登陆、退出。 天天团购系统是一套创新的开源团购程序,拥有多达10项首创功能,同时支持虚拟和实物团购,内置类似淘宝的快递配送体系,并提供强大的抽奖、邀请返利等营销功能,让您轻松

下载

urls = [f"https://www.php.cn/link/2bb054c14409adcb28cb8d922e10a383}" for i in range(100)] with ThreadPoolExecutor(max_workers=20) as ex: results = list(ex.map(fetch, urls))

  • 线程数不宜超过 50,太多反而因 GIL 和上下文切换拖慢
  • 异步方案推荐 aiohttp,单进程轻松支撑数百并发连接
  • 务必设 timeout,否则一个卡住的请求会拖垮整个池

用 Go 或 Rust 写轻量客户端(高性能/长期运行)

如果并发量大(如每秒上千请求)、要求低延迟或需嵌入其他服务,用 Go 更省心:

go func() {
    for _, u := range urls {
        go func(url string) {
            resp, _ := http.Get(url)
            defer resp.Body.Close()
            // 处理 resp...
        }(u)
    }
}()
  • Go 的 goroutine 开销极小,轻松启动上万并发 HTTP 客户端
  • 配合 semaphore 控制并发上限,避免文件描述符耗尽
  • Rust 用 tokio + reqwest 同样高效,内存更安全

注意系统级限制(常被忽略)

并发不是设个数字就完事。Linux 默认限制可能让你的“100 并发”实际只有 10 个在跑:

  • 检查并调大:ulimit -n(文件描述符数),HTTP 并发连接数直接受限于此
  • 临时提升:ulimit -n 65536(当前 shell 有效)
  • 确认 /proc/sys/net/core/somaxconnnet.ipv4.ip_local_port_range 足够宽
  • ss -snetstat -an | grep :80 | wc -l 观察真实连接数

基本上就这些。选哪种方式,取决于你手头的工具链、QPS 需求和维护成本偏好。脚本任务用 xargs,胶水逻辑用 Python,长期高负载用 Go/Rust,再配上合理的系统调优——并发请求就稳了。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

759

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

639

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

762

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

618

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1265

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

548

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

709

2023.08.11

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

68

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.4万人学习

Git 教程
Git 教程

共21课时 | 2.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号