Python: defaultdict se convirtió en un objeto inmarshallable en 2.6?

Question

¿El defaultnoun no se convirtió en compatible a partir de Python 2.6? Los siguientes obras bajo 2.5, falla bajo 2.6 con "ValueError: objeto unmarshallable" en OS X 1.5.6, Python-2.6.1-macosx2008-12-06.dmg de python.org:

from collections import defaultdict 
import marshal 
dd = defaultdict(list) 
marshal.dump(dd, file('/tmp/junk.bin','wb')) 

Answer 1

Marshal was deliberately changed to not support subclasses of built-in types. Nunca se suponía que Marshal manejara los valores predeterminados, pero sucedió porque son una subclase de dict. Marshal is not a general "persistence" module; only None, integers, long integers, floating point numbers, strings, Unicode objects, tuples, lists, sets, dictionaries, and code objects are supported.

Python 2.5:

>>> marshal.dumps(defaultdict(list)) 
'{0' 
>>> marshal.dumps(dict()) 
'{0' 

Si por alguna razón usted realmente quiere formar un defaultdict se puede convertir a un diccionario en primer lugar, pero las probabilidades son que usted debe utilizar un mecanismo de serialización diferente, como pickling.

Answer 2

problemas de rendimiento wrt .. codifican una lista de ~ 600000 dicts, cada uno con 4 claves/valores, uno de los valores tiene una lista (alrededor de 1-3 longitud) de 2 clave dicts/Val:

In [27]: timeit(cjson.encode, data) 
4.93589496613 

In [28]: timeit(cPickle.dumps, data, -1) 
141.412974119 

In [30]: timeit(marshal.dumps, data, marshal.version) 
1.13546991348