"UnicodeDecodeError: кодек charmap не может декодировать" ошибку при загрузке pickle

Question

Я пытаюсь сохранить массив объектов Tweet в файле. Чистые экземпляры классов содержат символы кодировки utf8. вы можете увидеть код ниже:

class Tweet: 
    author=''; 
    text=''; 
    time=''; 
    date=''; 
    timestamp=''; 

with open('tweets.dat','wb') as f: 
    pickle.dump(all_tweets,f) 

with open('tweets.dat') as f: 
    all_tweets = pickle.load(f) 

Когда я запускаю код, он возвращает исключение на pickle.load (F) линия о том, что:

UnicodeDecodeError: 'charmap' codec can't decode byte 0x81 in position 25: character maps to <undefined> 

Моя машина спецификации:

Python 3.5.2 |Anaconda 4.2.0 (64-bit)| (default, Jul 5 2016, 11:41:13) [MSC v.1900 64 bit (AMD64)] on win32

Answer 1

В Python 3 модуль pickle ожидает, что базовые файловые объекты будут принимать или возвращать байт. Вы правильно открываете файл в двоичном режиме для записи, но не смогли сделать то же самое для чтения. Считанные часть должна быть:

with open('tweets.dat', 'rb') as f: 
    all_tweets = pickle.load(f) 

Ref: экстракт из документации pickle.load(fd):

...Thus file can be an on-disk file opened for binary reading, an io.BytesIO object, or any other custom object that meets this interface.