对标celery的分布式函数调度框架

最新推荐文章于 2024-12-20 10:28:51 发布

转载最新推荐文章于 2024-12-20 10:28:51 发布 · 464 阅读

CC 4.0 BY-SA版权

原文链接：https://function-scheduling-distributed-framework.readthedocs.io/zh_CN/latest/articles/c1.html

Python 专栏收录该内容

31 篇文章

订阅专栏

分布式函数调度框架，支持5种并发模式，20种消息中间件，20种任务控制功能。

应用事例：

import time
from function_scheduling_distributed_framework import task_deco, BrokerEnum


@task_deco("task_queue_name1", qps=5, broker_kind=BrokerEnum.PERSISTQUEUE)  # 入参包括20种，运行控制方式非常多，想得到的控制都会有。
def task_fun(x, y):
    print(f'{x} + {y} = {x + y}')
    time.sleep(3)  # 框架会自动并发绕开这个阻塞，无论函数内部随机耗时多久都能自动调节并发达到每秒运行 5 次 这个 task_fun 函数的目的。


if __name__ == "__main__":
    for i in range(100):
        task_fun.push(i, y=i * 2)  # 发布者发布任务
    task_fun.consume()  # 消费者启动循环调度并发消费任务

原文