pytables

5calore

1risposta

Sto cercando di comprimere il mio allineamento come questo import numpy as np import tables from contextlib import closing FILTERS = tables.Filters(complib='zlib', complevel=5) data = np.zeros(1

6calore

2risposta

Perché i panda convertono int unsigned maggiore di 2 ** 63-1 in oggetti?

Quando si converte una matrice NumPy di un frame di dati pandas pandas cambia Uint64 tipi di tipi di oggetto se il numero intero maggiore di 2^63 - 1. import pandas as pd import numpy as np x = n

6calore

1risposta

Pip non riconosce Cython

Ho appena installato pip e Python tramite home-brew su una nuova installazione Mac OS. Prima di tutto, il mio pip non installa affatto le dipendenze - il che mi obbliga a rieseguire "pip install table

6calore

2risposta

Moltiplicazione grande matrice numpy efficiente

Per memorizzare una matrice grande su disco uso numpy.memmap. Ecco un codice di esempio per testare grande moltiplicazione di matrici: import numpy as np import time rows= 10000 # it can be large f

9calore

3risposta

installa HDF5 e pytables in ubuntu

Sto cercando di installare il pacchetto tables in Ubuntu 14.04 ma sem mi piace lamentarsi. Sto cercando di installarlo utilizzando PyCharm e il relativo programma di installazione del pacchetto, tutta

8calore

1risposta

Concatena due file grandi panda. HDFStore HDF5

Questa domanda è in qualche modo correlata a "Concatenate a large number of HDF5 files". Ho diversi file HDF5 di grandi dimensioni (circa 20 GB compressi), che non sono adatti alla RAM. Ciascuno di es

19calore

2risposta

Convert csv grande a hdf5

Ho un file csv di 100 milioni di righe (in realtà molti file CSV separati) per un totale di 84 GB. Ho bisogno di convertirlo in un file HDF5 con un set di dati float singolo. Ho usato h5py in testing

8calore

1risposta

Pandas come memoria dati veloce per l'applicazione Flask

Sono impressionato dalla velocità di esecuzione delle trasformazioni, caricamento dei dati e facilità d'uso di Pandas e voglio sfruttare tutte queste belle proprietà (tra le altre) per modellare alcun

14calore

3risposta

'/' nei nomi di file HDF5 confusione

sto sperimentando alcune interazioni davvero strano tra h5py, PyTables (via Pandas), e C++ generati HDF5 file. Sembra che, h5check e h5py sembrano gestire i nomi di tipo contenenti '/', ma non lo è pa

6calore

1risposta

indicizzazione e colonne di dati in Pandas/

http://pandas.pydata.org/pandas-docs/stable/io.html#indexing sono davvero confuso su questo concetto di colonne di dati nella Panda HDF5 IO. Inoltre c'è pochissima o nessuna informazione su di esso da