Errore psycopg2: DatabaseError: errore senza messaggio dalla libpq

Question

Ho un'applicazione che analizza e carica i dati dai file csv in un database di Postgres 9.3. In esecuzione seriale le istruzioni di inserimento/le esecuzioni del cursore funzionano senza problemi.

Ho aggiunto il sedano nel mix per aggiungere l'analisi parallela e l'inserimento dei file di dati. L'analisi funziona bene. Tuttavia, vado a correre istruzioni di inserimento e ottengo:

[2015-05-13 11:30:16,464: ERROR/Worker-1] ingest_task.work_it: Exception 
    Traceback (most recent call last): 
    File "ingest_tasks.py", line 86, in work_it 
     rowcount = ingest_data.load_data(con=con, statements=statements) 
    File "ingest_data.py", line 134, in load_data 
     ingest_curs.execute(statement) 
    DatabaseError: error with no message from the libpq 

Answer 1

ho incontrato un problema simile quando multiprocessing engine.execute(). Ho risolto questo problema, infine, con la sola aggiunta engine.dispose() destra nella prima riga sotto la funzione in cui si suppone che il sottoprocesso di entrare, come suggerito nella official document:

When a program uses multiprocessing or fork() , and an Engine object is copied to the child process, Engine.dispose() should be called so that the engine creates brand new database connections local to that fork. Database connections generally do not travel across process boundaries.