large-data

6calore

2risposta

Struttura dati Matlab per tipo misto - che cosa è tempo + spazio efficiente?

Ho bisogno di elaborare grandi quantità di dati tabulari di tipo misto - stringhe e doppi. Un problema standard, penserei. Qual è la migliore struttura dati in Matlab per lavorare con questo? Cellarra

matlab performance data-structures large-data bigdata 2013-04-26

---

6calore

2risposta

Aggiungere una colonna a un grande tavolo MySql mentre è online

Ho bisogno di aggiungere una nuova colonna a una tabella nel DB MySQL (tabella MyISAM) che contiene più di 20 milioni di righe. Il processo di aggiunta della colonna deve essere in fase di esecuzione,

mysql myisam alter-table large-data 2012-12-02

---

13calore

3risposta

Come campionare un grande database e implementare K-means e K-nn in R?

Sono un nuovo utente di R, cercando di allontanarmi da SAS. Sto facendo questa domanda qui perché mi sento un po 'frustrato con tutti i pacchetti e le fonti disponibili per R, e non riesco a farlo fun

r machine-learning k-means knn large-data 2012-12-02

---

12calore

3risposta

Strumenti Python per il calcolo out-of-core/data mining

Sono interessato ai set di dati python mining troppo grandi per stare nella RAM ma seduti in un singolo HD. Capisco che posso esportare i dati come file hdf5, utilizzando pytables. Inoltre, lo numexpr

python numpy data-mining large-data database 2013-01-23

---

7calore

6risposta

Il modo più veloce per trasferire i dati della tabella Excel su SQL 2008R2

Qualcuno conosce il modo più veloce per ottenere dati da e tabella Excel (array VBA) su una tabella su SQL 2008 senza utilizzando un'utility esterna (ad esempio bcp)? Tenere presente che i miei set di

excel vba sql-server-2008 import large-data 2012-05-22

---

5calore

1risposta

utilizzando RavenDB per inserimenti Bulk di dati

Sto cercando di importare grandi quantità di dati (flusso Twitter a circa 20-25 tweet al secondo) in RavenDB per test e test di dati su larga scala. Ho qualche codice che sta scrivendo i dati abbastan

twitter ravendb large-data bigdata 2012-04-03

---

7calore

1risposta

errore di overflow stack protezione freading

Sto usando fread in data.table (1.8.8, R 3.0.1) nel tentativo di leggere file molto grandi. Il file nelle domande ha 313 righe e ~ 6,6 milioni di colonne di righe di dati numerici e il file è di circa

r data.table large-data 2013-08-26

---

15calore

1risposta

Dividi file di grandi dimensioni in base al valore nella colonna singola (AWK)

Vorrei dividere un file di grandi dimensioni (10^6 righe) in base al valore nella sesta colonna (circa 10 * 10^3 valori univoci). Tuttavia, non riesco a farlo funzionare a causa del numero di record.

awk split genetic large-data 2013-05-19

---

5calore

2risposta

Stream parse file XML da 4 GB in PHP

Sto cercando e ho bisogno di aiuto per: Voglio analizzare un grande file XML (4 GB) con PHP. Non posso usare semplici XML o DOM perché caricano l'intero file in memoria, quindi ho bisogno di qualcosa

php xml xml-parsing large-files large-data 2013-08-29

---

8calore

1risposta

numpy save/load corrompendo un array

Sto provando a salvare un grande array numpy e lo ricarico. Utilizzando numpy.save e numpy.load, i valori dell'array sono danneggiati/modificati. La forma e il tipo di dati dell'array pre-saving e pos

python numpy save large-data 2012-10-03

---