当前位置:   article > 正文

python使用rabbitmq阻塞_python – Celery/RabbitMQ unacked消息阻塞队列?

celery mq unacked

我已经调用了一个任务,用urllib2远程获取一些信息几千次.这些任务是使用随机eta(一周内)安排的,因此它们都不会同时命中服务器.有时我会得到404,有时候不会.我正在处理错误,以防它发生.

RabbitMQ控制台中,我可以看到16条未确认的消息:

我停下芹菜,清理队列并重新启动它. 16条未经确认的消息仍在那里.

我有其他任务进入同一队列,也没有执行任何任务.清除之后,我尝试提交另一项任务,状态仍然准备就绪:

我有什么想法可以找出为什么消息仍未被承认?

版本:

celery==3.1.4

{rabbit,"RabbitMQ","3.5.3"}

celeryapp.py

CELERYBEAT_SCHEDULE = {

'social_grabber': {

'task': '.tasks.task_social_grabber',

'schedule': crontab(hour=5, minute=0, day_of_week='sunday'),

},

}

tasks.py

@app.task

def task_social_grabber():

for user in users:

eta = randint(0, 60 * 60 * 24 * 7) #week in seconds

task_social_grabber_single.apply_async((user), countdown=eta)

没有定义此任务的路由,因此它进入默认队列:celery.有一个工作人员处理此队列.

supervisord.conf:

[program:celery]

autostart = true

autorestart = true

command = celery worker -A .celeryapp:app --concurrency=3 -l INFO -n celery

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/Cpp五条/article/detail/603384
推荐阅读
相关标签
  

闽ICP备14008679号