0

0

使用Celery Redis Django优化网站异步任务处理流程

WBOY

WBOY

发布时间:2023-09-27 08:38:01

|

916人浏览过

|

来源于php中文网

原创

使用celery redis django优化网站异步任务处理流程

使用 Celery Redis Django 优化网站异步任务处理流程

前言:
在开发网站时,经常遇到一些耗时的操作,比如发送邮件、生成报表、爬取数据等。如果这些操作是同步的,会导致用户在等待操作完成时出现卡顿现象,使用户体验变差。为了解决这个问题,可以使用异步任务来处理耗时操作,而 Celery 是目前比较流行的 Python 异步任务处理框架。

Celery 是一个分布式任务队列框架,可以将任务放入队列中,由 Celery 工作节点(Worker)异步执行,从而实现任务的异步执行。在 Celery 的使用中,Redis 是一个常用的消息代理(Broker),用于传递 Celery 的任务。

为了更好地展示 Celery Redis Django 的使用,本文将以一个发送邮件的功能为例进行说明。下面将分为以下几个部分进行讲解:

一、环境准备
二、安装 Celery 与 Redis
三、配置 Celery
四、在 Django 中实现异步任务
五、启动 Celery Worker
六、编写测试模块
七、运行测试与总结

一、环境准备
在开始开发前,需要确保已经安装了Python、Django和Redis。如果没有安装可以通过 pip 进行安装。

二、安装 Celery 与 Redis
$ pip install celery
$ pip install redis

三、配置 Celery
在 Django 项目的 settings.py 文件中添加如下配置:

Redis 作为消息代理

BROKER_URL = 'redis://localhost:6379/0'

在本地存储任务结果

CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'

定义任务模块

CELERY_IMPORTS = (

'your_app.tasks',

)

设置默认任务队列名

CELERY_DEFAULT_QUEUE = 'default'

四、在 Django 中实现异步任务
在 Django 项目的某些 app 中创建一个 tasks.py 文件,用于存储异步任务的函数。比如,我们创建一个 emails app,然后在 emails/tasks.py 中编写发送邮件的异步任务。

emails/tasks.py

from celery import task
from django.core.mail import send_mail

@task()
def send_email_task(subject, message, from_email, recipient_list):

send_mail(subject, message, from_email, recipient_list)

需要注意的是,这里的 task 装饰器是 Celery 提供的,用于将函数注册为一个 Celery 任务。

五、启动 Celery Worker
打开终端,切换到 Django 项目根目录下,执行以下命令来启动 Celery Worker。

歌者PPT
歌者PPT

歌者PPT,AI 写 PPT 永久免费

下载

$ celery -A project_name worker -l info

其中,project_name 是 Django 项目的名称。

六、编写测试模块
在 Django 项目某个 app 的 views.py 中编写一个发送邮件的视图函数,并将该视图函数绑定到某个 URL 上。

views.py

from django.shortcuts import render
from .tasks import send_email_task

def send_email_view(request):

if request.method == 'POST':
    subject = request.POST.get('subject')
    message = request.POST.get('message')
    from_email = request.POST.get('from_email')
    recipient_list = [request.POST.get('recipient_email')]
    
    # 调用异步任务
    send_email_task.delay(subject, message, from_email, recipient_list)
    
    return render(request, 'success.html')

return render(request, 'send_email.html')

七、运行测试与总结
启动 Django 项目,然后通过浏览器访问 send_email_view 视图对应的 URL 地址,填写相关信息,点击发送邮件按钮。

可以观察到邮件会在后台异步发送,而界面则立即响应一条提示信息,用户无需等待邮件发送完成。这就是使用 Celery Redis Django 实现的异步任务处理流程。

总结:
使用 Celery Redis Django 可以很方便地实现网站的异步任务处理。通过将耗时的操作放入 Celery 异步任务中,可以有效地提升网站的性能和用户体验。在具体使用过程中,我们需要安装配置 Celery 并定义任务模块,然后在 Django 中调用异步任务函数即可实现异步处理。不同的任务可以通过不同的 workers 实现并发处理,提高整个系统的并发处理能力。
具体代码示例:

settings.py

Redis 作为消息代理

BROKER_URL = 'redis://localhost:6379/0'

在本地存储任务结果

CELERY_RESULT_BACKEND = 'redis://localhost:6379/0'

定义任务模块

CELERY_IMPORTS = (

'your_app.tasks',

)

设置默认任务队列名

CELERY_DEFAULT_QUEUE = 'default'

tasks.py

from celery import task
from django.core.mail import send_mail

@task()
def send_email_task(subject, message, from_email, recipient_list):

send_mail(subject, message, from_email, recipient_list)

views.py

from django.shortcuts import render
from .tasks import send_email_task

def send_email_view(request):

if request.method == 'POST':
    subject = request.POST.get('subject')
    message = request.POST.get('message')
    from_email = request.POST.get('from_email')
    recipient_list = [request.POST.get('recipient_email')]
    
    # 调用异步任务
    send_email_task.delay(subject, message, from_email, recipient_list)
    
    return render(request, 'success.html')

return render(request, 'send_email.html')

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

WorkBuddy
WorkBuddy

腾讯云推出的AI原生桌面智能体工作台

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
Python Web 框架 Django 深度开发
Python Web 框架 Django 深度开发

本专题系统讲解 Python Django 框架的核心功能与进阶开发技巧,包括 Django 项目结构、数据库模型与迁移、视图与模板渲染、表单与认证管理、RESTful API 开发、Django 中间件与缓存优化、部署与性能调优。通过实战案例,帮助学习者掌握 使用 Django 快速构建功能全面的 Web 应用与全栈开发能力。

166

2026.02.04

什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

409

2023.08.11

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

251

2023.10.07

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

373

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

437

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

803

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

371

2025.07.23

default gateway怎么配置
default gateway怎么配置

配置default gateway的步骤:1、了解网络环境;2、获取路由器IP地址;3、登录路由器管理界面;4、找到并配置WAN口设置;5、配置默认网关;6、保存设置并退出;7、检查网络连接是否正常。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

236

2023.12.07

TypeScript类型系统进阶与大型前端项目实践
TypeScript类型系统进阶与大型前端项目实践

本专题围绕 TypeScript 在大型前端项目中的应用展开,深入讲解类型系统设计与工程化开发方法。内容包括泛型与高级类型、类型推断机制、声明文件编写、模块化结构设计以及代码规范管理。通过真实项目案例分析,帮助开发者构建类型安全、结构清晰、易维护的前端工程体系,提高团队协作效率与代码质量。

26

2026.03.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
进程与SOCKET
进程与SOCKET

共6课时 | 0.4万人学习

Redis+MySQL数据库面试教程
Redis+MySQL数据库面试教程

共72课时 | 7.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号