Pwn*_*gns 0 django ubuntu rabbitmq celery supervisord
概述:
我正在尝试将 celery 作为守护进程运行来执行发送电子邮件的任务。它在开发中运行良好,但在生产中却运行不佳。我现在有了我的网站,每个功能都工作正常(没有 django 错误),但由于守护进程未正确设置,任务无法完成,并且我在 ubuntu 16.04 中收到此错误:
project_celery FATAL can't find command '/home/my_user/myvenv/bin/celery'
安装的程序/硬件,以及我到目前为止所做的事情:
我在 VPS 上使用 Django 2.0.5、python 3.5、ubuntu 16.04、rabbitmq 和 celery。我使用 venv 来完成这一切。我也安装了主管,当我检查时它正在运行sudo service --status-all,因为它旁边有一个+。Erlang 也已安装,当我检查时top,rabbitmq 正在运行。使用sudo service rabbitmq-server status表明rabbitmq也处于活动状态。
最初,我按照celery 网站上的说明进行操作,但它们非常令人困惑,并且在测试/阅读/观看其他人的解决方案约 40 小时后我无法让它工作。感到非常恼怒和挫败,我选择了这里的方向来设置守护进程并希望我能到达某个地方,并且我已经走得更远,但我收到了上面的错误。
我通读了主管文档,检查了进程状态以尝试调试问题以及程序设置,但我迷失了,因为根据文档,据我所知,我的路径是正确的。
这是我的文件结构:
home/
my_user/ # is a superuser
portfolio-project/
project/
__init__.py
celery.py
settings.py # this file is in here too
app_1/
app_2/
...
...
logs/
celery.log
myvenv/
bin/
celery # executable file, is colored green
celery_user_nobody/ # not a superuser, but created for celery tasks
etc/
supervisor/
conf.d/
project_celery.conf
Run Code Online (Sandbox Code Playgroud)
这是我的project_celery.conf:
[program:project_celery]
command=/home/my_user/myvenv/bin/celery worker -A project --loglevel=INFO
directory=/home/my_user/portfolio-project/project
user=celery_user_nobody
numprocs=1
stdout_logfile=/home/my_user/logs/celery.log
stderr_logfile=/home/my_user/logs/celery.log
autostart=true
autorestart=true
startsecs=10
stopwaitsecs = 600
stopasgroup=true
priority=1000
Run Code Online (Sandbox Code Playgroud)
这是我的 init.py:
from __future__ import absolute_import, unicode_literals
from .celery import app as celery_app
__all__ = ['celery_app']
Run Code Online (Sandbox Code Playgroud)
这是我的 celery.py:
from __future__ import absolute_import, unicode_literals
import os
from celery import Celery
os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'project.settings')
app = Celery('project')
app.config_from_object('django.conf:settings', namespace='CELERY')
app.autodiscover_tasks()
@app.task(bind=True)
def debug_task(self):
print('Request: {0!r}'.format(self.request))
Run Code Online (Sandbox Code Playgroud)
更新:这是我的settings.py:
这是我唯一的设置,因为celery 网站 django 说明中的示例没有显示更多内容,除非我要使用像 redis 这样的东西。我把它放在我的 settings.py 文件中,因为 django 说明说你可以:CELERY_BROKER_URL = 'amqp://localhost'
更新:我创建了rabbitmq用户:
$ sudo rabbitmqctl add_user rabbit_user1 mypassword
$ sudo rabbitmqctl add_vhost myvhost
$ sudo rabbitmqctl set_user_tags rabbit_user1 mytag
$ sudo rabbitmqctl set_permissions -p myvhost rabbit_user1 ".*" ".*" ".*"
Run Code Online (Sandbox Code Playgroud)
当我这样做时sudo rabbitmqctl status,我得到了Status of node 'rabbit@django2-portfolio',但奇怪的是,我没有看到任何节点像下面这样运行,因为这里的说明表明我应该看到:
{nodes,[rabbit@myhost]},
{running_nodes,[rabbit@myhost]}]
Run Code Online (Sandbox Code Playgroud)
我遵循的步骤:
# no errors up to this point6 之后我得到这个错误:
project_celery FATAL can't find command '/home/my_user/myvenv/bin/celery'
更新:我检查了错误日志,在 /var/log/rabbitmq/rabbit@django2-portfolio.log 中有多个以下实例:
=INFO REPORT==== 9-Aug-2018::18:26:58 ===
connection <0.690.0> (127.0.0.1:42452 -> 127.0.0.1:5672): user 'guest' authenticated and granted access to vhost '/'
=ERROR REPORT==== 9-Aug-2018::18:29:58 ===
closing AMQP connection <0.687.0> (127.0.0.1:42450 -> 127.0.0.1:5672):
missed heartbeats from client, timeout: 60s
Run Code Online (Sandbox Code Playgroud)
结束语:
有人知道发生了什么事吗?当我查看 project_celery.conf 文件中的绝对路径时,我看到所有设置都正确,但显然有问题。仔细查看我的代码,rabbitmq 说没有节点正在运行。当我这样做时sudo rabbitmqctl status,但芹菜当我这样做时也这样做celery status (它表明OK 1 node online)。
任何帮助将不胜感激。我什至专门创建了这个帐户,因为我遇到了这个问题。这让我抓狂。如果有人需要更多信息,请询问。这是我第一次部署任何东西,所以我不是专业人士。
您可以尝试以下任一操作吗?project_celery.conf
command=/home/my_user/myvenv/bin/celery worker -A celery --loglevel=INFO
directory=/home/my_user/portfolio-project/project
Run Code Online (Sandbox Code Playgroud)
或者
command=/home/my_user/myvenv/bin/celery worker -A project.celery --loglevel=INFO
directory=/home/my_user/portfolio-project/
Run Code Online (Sandbox Code Playgroud)
此外,celery.py您可以将模块的父文件夹添加project到sys.path(或确保您已正确打包部署并通过 pip 或其他方式安装它)吗?
我怀疑(从你对 @Jack Shedd 的评论来看,你指的是一个不存在的项目,因为目录是相对于神奇的 celery.py 文件设置的。)
| 归档时间: |
|
| 查看次数: |
2366 次 |
| 最近记录: |