在Celery中使用Python标准日志记录

Question

我必须在预先存在的系统中实现Celery.该系统的先前版本已使用Python标准日志记录.

我的代码类似于下面的代码.进程一和进程二是非Celery函数,它们在任何地方都是日志记录.如果出现问题,我们正在使用日志记录来跟踪数据丢失.

@task
def add(x,y):
    process_one(x,y)
    process_two(x,y)

我如何实现Celery并使用Python标准日志记录代替Celery日志记录,这样我们的旧日志系统不会丢失？

我试图import logging从Python改为:logger = add.get_logger()并传递logger给所有函数,但我认为这不是一个好习惯.我需要另一个解决方案

更新:要在Celery日志记录中添加应用程序日志记录,您可以执行:

$ manage.py celeryd -v 2 -B -s celery -E -l debug --traceback \
  --settings=settings --logfile=/(path to your log folder)/celeryd.log

使用-l(logging)as debug,我们的应用程序/ Python日志记录将自动包含在我们的Celery日志记录中:无需执行logger = add.get_logger().

Answer 1

你可能想要这个设置:

CELERYD_HIJACK_ROOT_LOGGER = False

告诉我这是怎么回事.

顺便说一句,它劫持根记录器的原因是因为一些写得很糟糕的库设置了日志记录,这是库永远不会做的事情,导致用户体验到没有来自celeryd worker的输出:(