Я новичок в сельдерее, застрявший в самых элементарных привычках ... Не могу даже войти в задачу. Delay () - PullRequest
Новая
       117

Я новичок в сельдерее, застрявший в самых элементарных привычках ... Не могу даже войти в задачу. Delay ()

1 голос
/ 22 апреля 2020

Я пытался добавить асинхронизированную функцию Celery в мой простой flask веб-проект как начинающий flask. После того, как мне удалось установить и запустить сельдерей, redis и связанный с ним пункт python pip, я начал бороться с задержкой () в самом начале. Казалось, я даже не мог попасть в задержку (). Я так расстроен, не могли бы вы помочь мне, пожалуйста?

У меня есть app.py и tasks.py под моим flask проектом. (Сначала я написал все в app.py, затем разделил объект сельдерея, что не помогло)

tasks.py: 

from celery import Celery

celery = Celery('app', broker='redis://localhost:6379/0', backend='redis://localhost:6379/1')


@celery.task
def modeling_task():
    print('yes')

app.py: 

@app.route('/train', methods=['GET', 'POST'])
def train():
    if request.method == "GET":
        return render_template('train.html')
    else:  # when request POST
        # check if the post request has the file part
        if 'file' not in request.files:
            return jsonify({"code": 500, "status": 'No file is uploaded!'})

        if file and allowed_file(file.filename):
            print(request.files['file'].filename)
            print('before task')
            task = modeling_task.delay()
            print('after task')

            return jsonify({"code": 200, "status": 'model training', "task_id": task.id})

        return 'Uploading file is wrong'

Если все работает хорошо, после того, как сервер получает загружаемый файл, результаты печати на консоли должны быть 

Car_TEST.csv
before task
yes
after task

Тем не менее, результат консоли просто это 

 * Detected change in 'C:\\Users\\headmaster\\Desktop\\WEB\\tasks.py', reloading
 * Restarting with stat
 * Debugger is active!
 * Debugger PIN: 308-608-393
 * Running on http://127.0.0.1:5000/ (Press CTRL+C to quit)
127.0.0.1 - - [22/Apr/2020 11:39:22] "GET /train HTTP/1.1" 200 -
Car_TEST.csv
before task

и сервер застрял здесь, продолжая работать без энтузиазма.

Так что, похоже, сервер даже не запускает "task = models_task.delay ()", в противном случае он должен был бы напечатать "yes "на консоли, верно?

Будет ли печататься" да "в другом месте? Почему он застрял?

celery report Вывод: 

(base) C:\Users\headmaster\Desktop\WEB>celery -A tasks report

software -> celery:4.4.2 (cliffs) kombu:4.6.8 py:3.7.4
            billiard:3.6.3.0 redis:3.4.1
platform -> system:Windows arch:64bit, WindowsPE
            kernel version:10 imp:CPython
loader   -> celery.loaders.app.AppLoader
settings -> transport:redis results:redis://localhost:6379/1

broker_url: 'redis://localhost:6379/0'
result_backend: 'redis://localhost:6379/1'

Ниже информация о сельдерее: 

(base) C:\Users\headmaster\Desktop\WEB>celery worker -A tasks.celery --loglevel=info

 -------------- celery@LAPTOP-KLKJCK2F v4.4.2 (cliffs)
--- ***** -----
-- ******* ---- Windows-10-10.0.18362-SP0 2020-04-22 10:55:13
- *** --- * ---
- ** ---------- [config]
- ** ---------- .> app:         app:0x2526977ac08
- ** ---------- .> transport:   redis://localhost:6379/0
- ** ---------- .> results:     redis://localhost:6379/1
- *** --- * --- .> concurrency: 4 (prefork)
-- ******* ---- .> task events: OFF (enable -E to monitor tasks in this worker)
--- ***** -----
 -------------- [queues]
                .> celery           exchange=celery(direct) key=celery


[tasks]
  . tasks.modeling_task

[2020-04-22 10:55:15,501: INFO/SpawnPoolWorker-1] child process 6692 calling self.run()
[2020-04-22 10:55:15,511: INFO/SpawnPoolWorker-2] child process 17736 calling self.run()
[2020-04-22 10:55:15,518: INFO/SpawnPoolWorker-3] child process 16320 calling self.run()
[2020-04-22 10:55:15,571: INFO/SpawnPoolWorker-4] child process 5608 calling self.run()
[2020-04-22 10:55:15,972: INFO/MainProcess] Connected to redis://localhost:6379/0
[2020-04-22 10:55:20,332: INFO/MainProcess] mingle: searching for neighbors
[2020-04-22 10:55:27,369: INFO/MainProcess] mingle: all alone
[2020-04-22 10:55:35,402: INFO/MainProcess] celery@LAPTOP-KLKJCK2F ready.

redis info: 

PS D:\Applications\Redis> redis-server redis.conf
                _._
           _.-``__ ''-._
      _.-``    `.  `_.  ''-._           Redis 3.2.100 (00000000/0) 64 bit
  .-`` .-```.  ```\/    _.,_ ''-._
 (    '      ,       .-`  | `,    )     Running in standalone mode
 |`-._`-...-` __...-.``-._|'` _.-'|     Port: 6379
 |    `-._   `._    /     _.-'    |     PID: 21420
  `-._    `-._  `-./  _.-'    _.-'
 |`-._`-._    `-.__.-'    _.-'_.-'|
 |    `-._`-._        _.-'_.-'    |           http://redis.io
  `-._    `-._`-.__.-'_.-'    _.-'
 |`-._`-._    `-.__.-'    _.-'_.-'|
 |    `-._`-._        _.-'_.-'    |
  `-._    `-._`-.__.-'_.-'    _.-'
      `-._    `-.__.-'    _.-'
          `-._        _.-'
              `-.__.-'

[21420] 22 Apr 10:38:22.506 # Server started, Redis version 3.2.100
[21420] 22 Apr 10:38:22.508 * DB loaded from disk: 0.000 seconds
[21420] 22 Apr 10:38:22.508 * The server is now ready to accept connections on port 6379
[21420] 22 Apr 10:43:23.025 * 10 changes in 300 seconds. Saving...
[21420] 22 Apr 10:43:23.030 * Background saving started by pid 6204
[21420] 22 Apr 10:43:23.231 # fork operation complete
[21420] 22 Apr 10:43:23.232 * Background saving terminated with success
[21420] 22 Apr 10:51:18.099 * 10 changes in 300 seconds. Saving...
[21420] 22 Apr 10:51:18.103 * Background saving started by pid 10116
[21420] 22 Apr 10:51:18.305 # fork operation complete
[21420] 22 Apr 10:51:18.306 * Background saving terminated with success
[21420] 22 Apr 10:56:19.022 * 10 changes in 300 seconds. Saving...
[21420] 22 Apr 10:56:19.026 * Background saving started by pid 11748
[21420] 22 Apr 10:56:19.227 # fork operation complete
[21420] 22 Apr 10:56:19.227 * Background saving terminated with success
...