Console MySQL lenta sull'importazione di enormi file SQL

Question

La mia importazione di SQL tramite la console MySQL è piuttosto lenta e, dato che il nostro file SQL è in aumento ogni giorno, vorrei sapere se ci sono alternative su come importare un File SQL più veloce

Il passaggio a Oracle o ad altri sistemi non è un'opzione, la configurazione deve rimanere invariata.

Attualmente il file SQL è: 1,5 GB. Sono allo WAMP con Apache 2.2.14, PHP 5.2.11 e MySQL 5.1.41.

Forse il problema è qui, l'importazione è fatto da un semplice:

mysql -u username -p dbname < sqlfilename.sql 

Qualche suggerimento?

Answer 1

Avere indici abilitati durante l'importazione rallenterà il tuo server fino a una scansione. ALTER TABLE tablename DISABLE KEYS; e usando ..ENABLE KEYS prima e dopo l'importazione, migliorerai la velocità di importazione, ma ci vorrà del tempo per ricreare gli indici, quindi dopo tutto potrebbe non essere un grande guadagno di velocità.

Inoltre, forse l'utilizzo delle tabelle myisam (diversamente da innodb con le opzioni di integrità referenziale) di solito offre prestazioni migliori, in quanto non è coinvolto alcun costo di integrità referenziale.

Personalmente, non uso l'istruzione import dalla console mysql, ma importa i file sql usando mysql -uUSER -pPASS DBNAME < file.sql e funziona bene per me.

Spero che aiuti.

Answer 2

Non sono sicuro se questo risolverà il problema, perché non sono sicuro di dove sia il collo di bottiglia ... Tuttavia, sono rimasto davvero impressionato dallo strumento gratuito Toad for MySQL come console di gestione MySQL sostitutiva. Ha ottimi strumenti di importazione ed è generalmente miglio IMO migliore rispetto alla console di gestione standard di MySQL.

Answer 3

provare questi http://dev.mysql.com/doc/refman/5.5/en/optimizing-innodb-bulk-data-loading.html

E 'forse un problema autocommit, spegnerlo poi vedere cosa accade.

SET autocommit=0 ; source <your dump file> ; COMMIT ; 

Answer 4

commutazione autocommit spento è il primo di una serie di raccomandazioni fornite in Bulk Data Loading for InnoDB Tables per velocizzare le operazioni di ripristino per MySQL.

Invece di disattivare manualmente l'autocommit al momento del ripristino, è possibile scaricare i dati MySQL in un modo che includa tutte le istruzioni necessarie direttamente nel file SQL.

Il parametro della riga di comando per mysqldump è --no-autocommit. Si potrebbe anche considerare di aggiungere --opt che imposta una combinazione di altri parametri per accelerare le operazioni di ripristino.

Ecco un esempio di una riga di comando mysqldump completo come lo uso, contenente --no-autocommit e --opt:

mysqldump -hlocalhost -uMyUser -p'MyPassword' --no-autocommit --opt --default-character-set=utf8 --quote-names MyDbName > dump.sql 

Per i dettagli su questi parametri vedere il reference of mysqldump