我正在从事的项目主要 future 将定期为每个用户运行一种类型的异步任务。每个用户都可以配置任务(每天、每周等在指定时间运行)。任务还将使用用户存储的一些数据。现在我想知道哪种方法应该更好:允许用户创建自己的 PeriodicTask(当然通过使用一些受限制的端点)或创建单个 PeriodicTask(例如每 5 分钟运行一次),它将遍历所有用户并确定任务是否应该当前用户是否排队?我想我会使用 AMPQ 作为经纪人。
请您参考如下方法:
celery 中的周期性任务调度程序并非设计用于处理数千个计划任务,因此从性能的角度来看,更好的解决方案是让一个任务以最小的间隔运行(例如,如果您允许用户每天、每周、每月 - 每天运行任务就足够了)
这种方法也更稳定——每次调度发生变化时,所有的调度记录都会重新加载
plus 更安全,因为您不会公开或使用任何内部机制来执行任务
