0

0

使用 Tornado 的 PeriodicCallback 实现多线程并发

碧海醫心

碧海醫心

发布时间:2025-07-22 17:24:01

|

457人浏览过

|

来源于php中文网

原创

使用 tornado 的 periodiccallback 实现多线程并发

本文介绍了如何在 Tornado 应用程序中使用多线程来执行耗时任务,避免阻塞主线程,确保应用程序的响应性。通过利用 tornado.ioloop.IOLoop.run_in_executor 方法和 concurrent.futures.ThreadPoolExecutor,可以将计算密集型任务分配到独立的线程中执行,从而实现并发处理,提高程序的整体性能。本文提供了详细的代码示例,帮助开发者理解和应用多线程技术。

在 Tornado 应用程序中,使用 tornado.ioloop.PeriodicCallback 可以定时执行一些任务。然而,如果这些任务比较耗时,例如涉及到复杂的计算或 I/O 操作,就会阻塞 Tornado 的 IOLoop 主线程,导致应用程序的响应速度下降。为了解决这个问题,可以将这些耗时任务放到独立的线程中执行,从而避免阻塞主线程。

Tornado 提供了 tornado.ioloop.IOLoop.run_in_executor 方法,可以将一个函数放到线程池中执行。结合 concurrent.futures.ThreadPoolExecutor,可以方便地实现多线程并发。

实现步骤:

  1. 创建线程池: 使用 concurrent.futures.ThreadPoolExecutor 创建一个线程池,用于执行耗时任务。可以根据实际情况调整 max_workers 参数,指定线程池中线程的最大数量。

    from concurrent.futures import ThreadPoolExecutor
    
    executor = ThreadPoolExecutor(max_workers=8)
  2. 创建任务执行函数: 创建一个函数,用于调用实际的耗时任务函数,并使用 IOLoop.current().run_in_executor 将其提交到线程池中执行。

    睿拓智能网站系统-网上商城
    睿拓智能网站系统-网上商城

    睿拓智能网站系统-网上商城1.0免费版软件大小:5M运行环境:asp+access本版本是永州睿拓信息专为电子商务入门级用户开发的网上电子商城系统,拥有产品发布,新闻发布,在线下单等全部功能,并且正式商用用户可在线提供多个模板更换,可实现一般网店交易所有功能,是中小企业和个人开展个人独立电子商务商城最佳的选择,以下为详细功能介绍:1.最新产品-提供最新产品发布管理修改,和最新产品订单查看2.推荐产

    下载
    from tornado import ioloop
    
    def calculator1_runner():
        """This function is for calling the calculator1 function"""
        ioloop.IOLoop.current().run_in_executor(executor, calculator1)
  3. 注册 PeriodicCallback: 使用 tornado.ioloop.PeriodicCallback 注册任务执行函数,并指定执行的间隔时间。

    tornado.ioloop.PeriodicCallback(
        callback=calculator1_runner,
        callback_time=500
    ).start()

完整示例:

import tornado.ioloop
import tornado.web
from concurrent.futures import ThreadPoolExecutor
import time

# 模拟耗时计算任务
def calculator1():
    print("calculator1 started")
    time.sleep(1) # 模拟耗时操作
    print("calculator1 finished")

def calculator2():
    print("calculator2 started")
    time.sleep(2) # 模拟耗时操作
    print("calculator2 finished")

def push():
    print("push started")
    time.sleep(0.5) # 模拟耗时操作
    print("push finished")

# 创建线程池
executor = ThreadPoolExecutor(max_workers=8)

def calculator1_runner():
    ioloop.IOLoop.current().run_in_executor(executor, calculator1)

def calculator2_runner():
    ioloop.IOLoop.current().run_in_executor(executor, calculator2)

def push_runner():
    ioloop.IOLoop.current().run_in_executor(executor, push)


def make_app():
  return tornado.web.Application([
                (r"/", MainHandler),
  ])

class MainHandler(tornado.web.RequestHandler):
    def get(self):
        self.write("Hello, world")

if __name__ == '__main__':
  tornado.ioloop.PeriodicCallback(callback=calculator1_runner, callback_time=500).start()
  tornado.ioloop.PeriodicCallback(callback=calculator2_runner, callback_time=1000).start()
  tornado.ioloop.PeriodicCallback(callback=push_runner, callback_time=1000).start()
  app = make_app()
  app.listen(8888)
  tornado.ioloop.IOLoop.current().start()

注意事项:

  • 确保耗时任务是线程安全的。如果多个线程同时访问共享资源,需要使用锁或其他同步机制来保护这些资源。
  • 合理设置线程池的大小。过多的线程会增加系统开销,过少的线程可能无法充分利用 CPU 资源。
  • run_in_executor 返回一个 Future 对象,可以用来获取任务的执行结果或处理异常。

总结:

通过使用 tornado.ioloop.IOLoop.run_in_executor 和 concurrent.futures.ThreadPoolExecutor,可以方便地在 Tornado 应用程序中实现多线程并发,从而避免阻塞主线程,提高应用程序的响应速度和整体性能。在设计应用程序时,应该根据实际情况选择合适的并发模型,并仔细考虑线程安全问题。

相关专题

更多
线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

481

2023.08.10

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

143

2025.12.24

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

143

2025.12.24

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

43

2026.01.16

全民K歌得高分教程大全
全民K歌得高分教程大全

本专题整合了全民K歌得高分技巧汇总,阅读专题下面的文章了解更多详细内容。

82

2026.01.16

C++ 单元测试与代码质量保障
C++ 单元测试与代码质量保障

本专题系统讲解 C++ 在单元测试与代码质量保障方面的实战方法,包括测试驱动开发理念、Google Test/Google Mock 的使用、测试用例设计、边界条件验证、持续集成中的自动化测试流程,以及常见代码质量问题的发现与修复。通过工程化示例,帮助开发者建立 可测试、可维护、高质量的 C++ 项目体系。

24

2026.01.16

java数据库连接教程大全
java数据库连接教程大全

本专题整合了java数据库连接相关教程,阅读专题下面的文章了解更多详细内容。

35

2026.01.15

Java音频处理教程汇总
Java音频处理教程汇总

本专题整合了java音频处理教程大全,阅读专题下面的文章了解更多详细内容。

16

2026.01.15

windows查看wifi密码教程大全
windows查看wifi密码教程大全

本专题整合了windows查看wifi密码教程大全,阅读专题下面的文章了解更多详细内容。

56

2026.01.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
10分钟--Midjourney创作自己的漫画
10分钟--Midjourney创作自己的漫画

共1课时 | 0.1万人学习

Midjourney 关键词系列整合
Midjourney 关键词系列整合

共13课时 | 0.9万人学习

AI绘画教程
AI绘画教程

共2课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号