13

我正在尝试在我的生产服务器中部署一个简单的 celery 示例，我遵循了 celery 网站中关于将 celery 作为守护进程运行的教程http://docs.celeryproject.org/en/latest/tutorials/daemonizing.html #daemonizing，我在/etc/default/celeryd中获得了配置文件

  1 # 要启动的节点名称
  2 # 这里我们只有一个节点
  3 CELERYD_NODES="w1"
  4 # 或者我们可以有三个节点：
  5 #CELERYD_NODES="w1 w2 w3"
  6
  7 # 开始时 chdir 的位置。
  8 CELERYD_CHDIR="/home/audiwime/cidec_sw"
  9
 10 # 来自环境的 Python 解释器。
 11 ENV_PYTHON="/usr/bin/python26"
 12
 13 # 如何调用“manage.py celeryd_multi”
 14 CELERYD_MULTI="$ENV_PYTHON $CELERYD_CHDIR/manage.py celeryd_multi"
 15
 16 ##如何调用“manage.py celeryctl”
 17 CELERYCTL="$ENV_PYTHON $CELERYD_CHDIR/manage.py celeryctl"
 18
 19 # celeryd 的额外参数
 20 CELERYD_OPTS="--time-limit=300 --concurrency=8"
 21
 22 # celery 配置模块的名称。
 23 CELERY_CONFIG_MODULE="celeryconfig"
 24
 25 # %n 将替换为节点名。
 26 CELERYD_LOG_FILE="/var/log/celery/%n.log"
 27 CELERYD_PID_FILE="/var/run/celery/%n.pid"
 28
 29 # 工人应该以非特权用户身份运行。
 30 CELERYD_USER="audiwime"
 31 CELERYD_GROUP="audiwime"
 32
 33 导出 DJANGO_SETTINGS_MODULE="cidec_sw.settings"

但如果我跑

芹菜状态

在终端中，我收到了以下回复：

错误：在时间限制内没有节点回复

我可以通过https://github.com/celery/celery/tree/3.0/extra/generic-init.d/中提供的 celeryd 脚本重新启动 celery

/etc/init.d/celeryd 重启
celeryd-multi v3.0.12 (Chiastic Slide)
> w1.one.cloudwime.com: DOWN
> 重启节点 w1.one.cloudwime.com：OK

我可以运行python26 manage.py celeryd -l info并且我在 django 中的任务运行良好，但是如果我让守护进程完成它的工作，我不会得到任何结果，甚至不会在/var/log/celery/w1.log中出现错误

我知道我的任务已被注册，因为我这样做了

from celery import current_app
def call_celery_delay(request):
    print current_app.tasks
    run.delay(request.GET['age'])
    return HttpResponse(content="celery task set",content_type="text/html")

我得到一本字典，其中出现了我的任务

{'celery.chain': <@task: celery.chain>, 'celery.chunks': <@task: celery.chunks>, 'celery.chord': <@task: celery.chord>, 'tasks.add2': <@task: tasks.add2>, 'celery.chord_unlock': <@task: celery.chord_unlock>, **'tareas.tasks.run': <@task: tareas.tasks.run>**, 'tareas.tasks.add': <@task: tareas.tasks.add>, 'tareas.tasks.test_two_minute': <@task: tareas.tasks.test_two_minute>, 'celery.backend_cleanup': <@task: celery.backend_cleanup>, 'celery.map': <@task: celery.map>, 'celery.group': <@task: celery.group>, 'tareas.tasks.test_one_minute': <@task: tareas.tasks.test_one_minute>, 'celery.starmap': <@task: celery.starmap>}

但除此之外，我什么也没得到，我的任务没有结果，日志中没有错误，什么也没有。有什么问题？

4

3 回答 3

1

使用以下命令查找问题：

C_FAKEFORK=1 sh -x /etc/init.d/celeryd start

这通常是因为您的源项目中存在问题（权限问题、语法错误等）

如芹菜文档中所述：-

如果工作人员以“OK”开始但之后几乎立即退出并且日志文件中没有任何内容，则可能存在错误，但由于守护程序标准输出已经关闭，您将无法在任何地方看到它们。对于这种情况，您可以使用 C_FAKEFORK 环境变量来跳过守护程序步骤

祝你好运

资料来源：芹菜文档

于 2015-01-21T07:07:07.287 回答
0

这是因为 celery 守护进程可能没有启动。这是原因之一。所以请使用 python manage.py celeryd --loglevel=INFO 重新启动它

于 2015-11-11T07:54:46.237 回答
-2

我解决了我的问题，这是一个非常简单的解决方案，但也是一个奇怪的解决方案：我所做的是：

$ /etc/init.d/celerybeat restart
$ /etc/init.d/celeryd restart
$ service celeryd restart

我必须按此顺序执行此操作，否则我会得到一个丑陋的错误：在时间限制内没有节点回复。

于 2012-11-29T15:31:11.193 回答