hdf5

9calore

2risposta

Sto cercando di salvare alcune tabelle di stringhe su file in Torch. Ho provato a utilizzare questa estensione torcia di Deepmind: hdf5. require 'hdf5' label = {'a', 'b','c','d'} local myFile = hdf

14calore

1risposta

che è più veloce per il caricamento: pickle o hdf5 in python

Dato è un elenco di 1,5 Gb di dati di panda. Mi chiedo quale sia un approccio migliore per gestire il caricamento di questi dati: pickle (tramite cPickle), hdf5, o qualcos'altro in python? In primo lu

7calore

1risposta

PCA incrementale su big data

Ho appena provato ad utilizzare l'IncrementalPCA da sklearn.decomposition, ma ha gettato un MemoryError proprio come il PCA e il RandomizedPCA in precedenza. Il mio problema è che la matrice che sto c

7calore

1risposta

Come comprimere il file hdf5 durante il ridimensionamento?

Ecco il mio codice: n = 100000 #This is what makes it tricky - lots of files going into this hdf5 file with h5py.File('image1.h5','w') as f: dset_X = f.create_dataset('X',(1,960,224,224),maxsh

7calore

4risposta

Come distinguere tra set di dati HDF5 e gruppi con h5py?

Uso il pacchetto Python h5py (versione 2.5.0) per accedere ai miei file hdf5. Voglio attraversare il contenuto di un file e fare qualcosa con ogni set di dati. Usando il metodo visit: import h5py de

6calore

2risposta

legge il file HDF5 su pda DataFrame con condizioni

Ho un enorme file HDF5, voglio caricarne una parte in un DataFrame panda per eseguire alcune operazioni, ma sono interessato a filtrare alcune righe. posso spiegare meglio con un esempio: file di HDF5

9calore

3risposta

installa HDF5 e pytables in ubuntu

Sto cercando di installare il pacchetto tables in Ubuntu 14.04 ma sem mi piace lamentarsi. Sto cercando di installarlo utilizzando PyCharm e il relativo programma di installazione del pacchetto, tutta

11calore

1risposta

Scrittura di un set di dati hdf5 di grandi dimensioni utilizzando h5py

Al momento, sto usando h5py per generare set di dati hdf5. Ho qualcosa di simile import h5py import numpy as np my_data=np.genfromtxt("/tmp/data.csv",delimiter=",",dtype=None,names=True) myFile="/

12calore

2risposta

Eliminazione del set di dati hdf5 utilizzando h5py

C'è un modo per rimuovere un set di dati da un file hdf5, preferibilmente usando h5py? O in alternativa, è possibile sovrascrivere un set di dati mantenendo intatti gli altri set di dati? Per la mia c

8calore

1risposta

Esistenza del gruppo di test in hdf5/C++

Sto aprendo un file HDF5 esistente per l'aggiunta di dati; Voglio assicurare che il gruppo chiamato /A esista per l'accesso successivo. Sto cercando un modo semplice per creare /A condizionatamente (c