PHP PDO Buffered query problem

Question

Sto riscontrando seri problemi con le funzioni dell'oggetto dati PHP. Sto cercando di eseguire il ciclo di un set di risultati considerevole (~ 60k righe, ~ 1gig) utilizzando una query memorizzata nel buffer per evitare di recuperare l'intero set.

Non importa quello che faccio, lo script si blocca solo sul PDO :: query() - sembra che la query sia in esecuzione unbuffered (perché altrimenti il ​​cambiamento nella dimensione del set di risultati 'corregge' il problema?). Ecco il mio codice per riprodurre il problema:

Se limito la domanda con un certo numero ragionevole, funziona benissimo:

$rQuery = $Database->query('SELECT id FROM mytable LIMIT 10'); 

Ho provato a giocare con PDO :: MYSQL_ATTR_MAX_BUFFER_SIZE e dell'uso della DOP :: prepare() e PDO :: execute() pure (sebbene non ci siano parametri nella query precedente), entrambi senza alcun risultato. Qualsiasi aiuto sarebbe apprezzato.

Answer 1

Se ho capito bene, le query memorizzate nel buffer implicano dire a PHP che si desidera attendere l'intero set di risultati prima di iniziare l'elaborazione. Prima del PDO, questo era l'impostazione predefinita e si doveva chiamare mysql_unbuffered_query se si desidera gestire immediatamente i risultati.

Perché questo non è spiegato nella pagina del driver MySQL per PDO, non lo so.

Answer 2

Si potrebbe provare a dividerlo in pezzi che non sono abbastanza grande da causare problemi:

<?php  
$id = 0; 
$rQuery = $Database->query('SELECT id FROM mytable ORDER BY id ASC LIMIT 100'); 

do { 
    stuff($rQuery); 
    $id += 100; 
} while ($rQuery = $Database->query(
      'SELECT id FROM mytable ORDER BY id ASC LIMIT 100 OFFSET '.$id 
     ) 
     ); 
?> 

... si ottiene l'idea, in ogni caso.

Answer 3

O forse si potrebbe provare funzioni di MySQL, invece:

while ($row = mysql_fetch_row($query)) { 
... 
} 

che sarà sicuramente più veloce, dal momento che la dichiarazione foreach fa un'impressione di utilizzare fetchAll() invece fetch() ogni riga