1. 首页
  2. 考试认证
  3. 其它
  4. tasks 在python中并行化网络相关任务

tasks 在python中并行化网络相关任务

上传者: 2024-10-03 22:35:18上传 ZIP文件 5.99KB 热度 3次
任务tasks.py是一个简单快速的任务队列,用于并行执行多个任务。您需要做的就是将任务指定为一个简单的函数,该函数接受一个参数,您将获得即时并行性。基于eventlet、多处理和redis。它非常适合从单个节点并行执行多个网络绑定任务,而无需经历设置map reduce集群的痛苦。它同时使用进程和绿色线程来从单个节点设置中提取最大值。安装安装redis并启动服务器, tasks使用redis来排队作业。如果您已经设置了redis服务器,请调用tasks.set_redis并传递一个redis连接对象,该对象的数据库/命名空间与您通常在应用程序中使用的数据库/命名空间不同。安装redis-py和eventlet库。 pip install redis eventlet安装任务或将此包复制到您的源代码中。 pip install t
下载地址
用户评论