5
了解芹菜任务预取
我刚刚发现了有关配置选项CELERYD_PREFETCH_MULTIPLIER（docs）的信息。默认值为4，但是（我相信）我希望预取尽可能少。我现在将其设置为1，这已经足够接近我要查找的内容，但是仍然有些我不了解的事情： 为什么这样预取一个好主意？我并没有真正找到原因，除非消息队列和工作线程之间存在大量延迟（就我而言，它们当前正在同一主机上运行，最糟糕的是最终可能在同一数据中的不同主机上运行）中央）。该文档仅提到了缺点，但没有解释优点是什么。 许多人似乎将此设置为0，期望能够以这种方式关闭预取功能（我认为这是一个合理的假设）。但是，0表示无限的预取。为什么有人会想要无限的预取，而这并不能完全消除您最初为任务队列引入的并发/异步性呢？ 为什么不能关闭预取？在大多数情况下，关闭性能可能不是一个好主意，但是有没有技术上的理由无法做到这一点？还是只是没有实施？ 有时，此选项连接到CELERY_ACKS_LATE。例如。罗杰·胡（Roger Hu）写道«[…]通常，[用户]真正想要的是让一个工人只保留与子进程一样多的任务。但是，如果不启用较晚的确认，这是不可能的。可以在这里找到有关连接的另一个提示。有人可以解释为什么两个选项连接在一起吗？