[Python] Gzip
Daniele Varrazzo
piro a develer.com
Lun 17 Nov 2014 12:17:57 CET
On 2014-11-17 09:38, Marco Ippolito wrote:
> Grazie Carlo,
> mi hai dato un ottimo spunto per indagare un altro aspetto (prima
> nella descrizione del problema non ho riportato, mea culpa, che la
> matrice vuota di grosse dimensioni, viene creata e poi viene fatta
> serializzata con pickle). Successivamente la gzippo.
Sicuro che fare un pickle di una matrice di 2Gb sia efficiente? Hai
considerato numpy.save/savez/savez_compressed? BLZ?
http://docs.scipy.org/doc/numpy/reference/generated/numpy.save.html
http://blz.pydata.org/blz-manual/index.html
-- Daniele
Maggiori informazioni sulla lista
Python