本文介绍了如何在 tornado 应用程序中使用多线程来执行耗时任务，避免阻塞主线程，确保应用程序的响应性。通过利用 tornado.ioloop.IOLoop.run_in_executor 方法和 concurrent.futures.ThreadPoolExecutor，可以将计算密集型任务分配到独立的线程中执行，从而实现并发处理，提高程序的整体性能。本文提供了详细的代码示例，帮助开发者理解和应用多线程技术。
在 Tornado 应用程序中，使用 tornado.ioloop.PeriodicCallback 可以定时执行一些任务。然而，如果这些任务比较耗时，例如涉及到复杂的计算或 I/O 操作，就会阻塞 Tornado 的 IOLoop 主线程，导致应用程序的响应速度下降。为了解决这个问题，可以将这些耗时任务放到独立的线程中执行，从而避免阻塞主线程。
Tornado 提供了 tornado.ioloop.IOLoop.run_in_executor 方法，可以将一个函数放到线程池中执行。结合 concurrent.futures.ThreadPoolExecutor，可以方便地实现多线程并发。
实现步骤：
-
创建线程池： 使用 concurrent.futures.ThreadPoolExecutor 创建一个线程池，用于执行耗时任务。可以根据实际情况调整 max_workers 参数，指定线程池中线程的最大数量。
from concurrent.futures import ThreadPoolExecutor executor = ThreadPoolExecutor(max_workers=8)
-
创建任务执行函数： 创建一个函数，用于调用实际的耗时任务函数，并使用 IOLoop.current().run_in_executor 将其提交到线程池中执行。
from tornado import ioloop def calculator1_runner(): """This function is for calling the calculator1 function""" ioloop.IOLoop.current().run_in_executor(executor, calculator1)
-
注册 PeriodicCallback： 使用 tornado.ioloop.PeriodicCallback 注册任务执行函数，并指定执行的间隔时间。
tornado.ioloop.PeriodicCallback( callback=calculator1_runner, callback_time=500 ).start()
完整示例：
import tornado.ioloop import tornado.web from concurrent.futures import ThreadPoolExecutor import time # 模拟耗时计算任务 def calculator1(): print("calculator1 started") time.sleep(1) # 模拟耗时操作 print("calculator1 finished") def calculator2(): print("calculator2 started") time.sleep(2) # 模拟耗时操作 print("calculator2 finished") def push(): print("push started") time.sleep(0.5) # 模拟耗时操作 print("push finished") # 创建线程池 executor = ThreadPoolExecutor(max_workers=8) def calculator1_runner(): ioloop.IOLoop.current().run_in_executor(executor, calculator1) def calculator2_runner(): ioloop.IOLoop.current().run_in_executor(executor, calculator2) def push_runner(): ioloop.IOLoop.current().run_in_executor(executor, push) def make_app(): return tornado.web.Application([ (r"/", MainHandler), ]) class MainHandler(tornado.web.RequestHandler): def get(self): self.write("Hello, world") if __name__ == '__main__': tornado.ioloop.PeriodicCallback(callback=calculator1_runner, callback_time=500).start() tornado.ioloop.PeriodicCallback(callback=calculator2_runner, callback_time=1000).start() tornado.ioloop.PeriodicCallback(callback=push_runner, callback_time=1000).start() app = make_app() app.listen(8888) tornado.ioloop.IOLoop.current().start()
注意事项：
- 确保耗时任务是线程安全的。如果多个线程同时访问共享资源，需要使用锁或其他同步机制来保护这些资源。
- 合理设置线程池的大小。过多的线程会增加系统开销，过少的线程可能无法充分利用 CPU 资源。
- run_in_executor 返回一个 Future 对象，可以用来获取任务的执行结果或处理异常。
总结：
通过使用 tornado.ioloop.IOLoop.run_in_executor 和 concurrent.futures.ThreadPoolExecutor，可以方便地在 Tornado 应用程序中实现多线程并发，从而避免阻塞主线程，提高应用程序的响应速度和整体性能。在设计应用程序时，应该根据实际情况选择合适的并发模型，并仔细考虑线程安全问题。
