Come eseguire il debug di attività di Celery/Django eseguite localmente in Eclipse

Question

Ho bisogno di eseguire il debug di attività di Celery dal debugger di Eclipse. Sto usando Eclipse, PyDev e Django.

Innanzitutto, apro il mio progetto in Eclipse e inserisco un punto di interruzione all'inizio della funzione di attività.

Quindi, avvio gli operatori di Celery da Eclipse facendo clic con il tasto destro su manage.py dal PyDev Package Explorer e scegliendo "Debug As-> Python Run" e specificando "celeryd -l info" come argomento. Questo avvia MainThread, Mediator e altri tre thread visibili dal debugger di Eclipse.

Dopo di che ho tornare alla visualizzazione pydev e avviare l'applicazione principale da fare clic destro sul progetto e scegliere Esegui come/PyDev: Django

I miei problemi è che una volta che il compito è presentata dal mytask.delay() non si ferma sul punto di interruzione. Ho messo alcune tracce con il codice delle attività in modo da poter vedere che è stato eseguito in uno dei thread di lavoro.

Quindi, come fare in modo che il debugger Eclipse si fermi sul punto di interruzione immesso nell'attività quando viene eseguito nel thread di lavoro di Celery?

Answer 1

Si dovrebbe considerare l'opzione per eseguire l'attività di sedano nello stesso thread del processo principale (normalmente viene eseguito su un processo separato), questo renderà il debug molto più semplice.

Si può dire il sedano di eseguire l'operazione in sincronia con l'aggiunta di questa impostazione per il modulo settings.py:

CELERY_ALWAYS_EAGER = True 

Nota: questo è il solo scopo di essere in uso per le fasi di debug o di sviluppo!

Answer 2

Se viene eseguito solo su un thread diverso, dovrebbe funzionare sulle ultime versioni di PyDev (penso che ci fosse un problema prima in cui un thread generato non sarebbe stato debug, ma questo è stato risolto).

Ora, se si sta avviando su un processo diverso, è necessario utilizzare il debugger remoto (anche se si trova sulla stessa macchina). Vedi: http://pydev.org/manual_adv_remote_debugger.html

Answer 3

CELERYD_POOL predefinito a celery.concurrency.prefork:TaskPool che genererà processi separati per ciascun operatore e PyDev non può vedere al loro interno. Se lo si modifica in una delle opzioni filettate, è possibile utilizzare il debugger.

Ad esempio, per Sedano 3.1 è possibile utilizzare questa impostazione:

CELERYD_POOL = 'celery.concurrency.threads:TaskPool' 

Si noti che questo richiede il modulo threadpool da installare.

Assicurarsi inoltre di avere CELERY_ALWAYS_EAGER = False, altrimenti la modifica della classe del pool non ha senso.

Answer 4

ho creare un comando di gestione per attività di test .. trovare più facile che in esecuzione dal guscio ..

Answer 5

È possibile farlo utilizzando del Sedano rdb:

from celery.contrib import rdb 
rdb.set_trace() 

Poi, in un tipo di terminale diverso telnet localhost 6900, e riceverai il prompt di debug.