Domande taggate «hdf5»

Flussi di lavoro di "grandi quantità di dati" utilizzando i panda

Ho cercato di trovare una risposta a questa domanda per molti mesi mentre imparavo i panda. Uso SAS per il mio lavoro quotidiano ed è ottimo per il suo supporto out-core. Tuttavia, SAS è orribile come un software per numerose altre ragioni. Un giorno spero di sostituire il mio uso …

982 python mongodb pandas hdf5 large-data

Esiste una velocità di analisi o un vantaggio nell'utilizzo della memoria nell'utilizzo di HDF5 per l'archiviazione di grandi array (invece di file binari flat)?

Sto elaborando array 3D di grandi dimensioni, che spesso ho bisogno di suddividere in vari modi per eseguire una varietà di analisi dei dati. Un tipico "cubo" può essere ~ 100 GB (e probabilmente diventerà più grande in futuro) Sembra che il formato di file consigliato tipico per set di …

96 python numpy hdf5 pytables h5py

Utilizzando il nostro sito, riconosci di aver letto e compreso le nostre Informativa sui cookie e Informativa sulla privacy.

Licensed under cc by-sa 3.0 with attribution required.