Почему сообщения с приоритетом не отображаются в очереди?(Сельдерей) - PullRequest
Новая
       14

Почему сообщения с приоритетом не отображаются в очереди?(Сельдерей)

0 голосов
/ 25 мая 2019

В Celery я публикую сообщения в очереди с указанным приоритетом, но они не отображаются в моем списке celery в моем бэкэнде Redis или в моем мониторинге цветов.

Я хочу иметь возможность видеть, сколько сообщений находится в очереди в любой момент времени, чтобы я мог видеть, нужно ли мне больше работников.

Я звоню своим сообщениям, используяследующий код: 

args = ("2eb89997-7e77-44ee-8bf5-077e5083b7e8", { "body": "hello-world 1", "json": { "time": 1 }, "source": "reddit", "link": "a", "username" : "a"},)
app.send_task("main.tasks.save_message_mid_priority", args=args, priority=1)

Если я вызываю свои сообщения без приоритета kwarg, то появляется в очереди по умолчанию celery и я могу их отслеживать.Если я это передам, то я этого не сделаю.

Вот мои celery.app

from __future__ import absolute_import, unicode_literals
from django.conf import settings
import os
from celery import Celery
from kombu import Queue, Exchange

# set the default Django settings module for the 'celery' program.
os.environ.setdefault('DJANGO_SETTINGS_MODULE', '***.settings')

app = Celery('***', broker=settings.REDIS_URL)

# Using a string here means the worker doesn't have to serialize
# the configuration object to child processes.
# - namespace='CELERY' means all celery-related configuration keys
#   should have a `CELERY_` prefix.
app.config_from_object('django.conf:settings', namespace='CELERY')

# Load task modules from all registered Django app configs.
app.autodiscover_tasks()

app.conf.broker_transport_options = {
    'priority_steps': list(range(4)),
}

app.conf.task_default_priority = 3
app.conf.task_queue_max_priority = 3

app.conf.task_soft_time_limit = 60
app.conf.task_acks_late = True
app.conf.worker_prefetch_multiplier = 1
app.conf.task_ignore_result = True

Мои задачи определены следующим образом: 

@app.task(bind=True, priority=0)
def save_message_high_priority(self, campaign_id, message):
    l.info("save_message: %s %s", campaign_id, self.priority)
    return save_message(campaign_id, message)

@app.task(bind=True, priority=1)
def save_message_mid_priority(self, campaign_id, message):
    l.info("save_message: %s %s", campaign_id, self.priority)
    return save_message(campaign_id, message)

@app.task(bind=True, priority=3)
def save_message_low_priority(self, campaign_id, message):
    l.info("save_message: %s %s", campaign_id, self.priority)
    return save_message(campaign_id, message)
...