"Для рядка в ..." призводить до UnicodeDecodeError: "utf-8" кодек не може розшифрувати байт

Ось мій код,

for line in open('u.item'):
#read each line

щоразу, коли я запускаю цей код, він видає таку помилку:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xe9 in position 2892: invalid continuation byte

Я спробував це вирішити і додати додатковий параметр у open (), виглядає код;

for line in open('u.item', encoding='utf-8'):
#read each line

Але знову ж таки вона дає ту саму помилку. що мені робити тоді! Будь ласка, допоможіть.

Як запропонував Марк Рансом, я знайшов правильне кодування для цієї проблеми. Кодування було "ISO-8859-1", тому заміна open("u.item", encoding="utf-8")на open('u.item', encoding = "ISO-8859-1")вирішить проблему.

Також для мене працював, ISO 8859-1 збирається значно заощадити, ха-ха, головним чином, якщо використовувати API розпізнавання мови

Приклад:

file = open('../Resources/' + filename, 'r', encoding="ISO-8859-1");

Ваш файл насправді не містить закодованих даних utf-8, він містить деяке інше кодування. З’ясуйте, що таке кодування, і використовуйте його у openвиклику.

Наприклад, в кодуванні Windows-1252 0xe9символом був би символ é.

Спробуйте це прочитати, використовуючи панди

pd.read_csv('u.item', sep='|', names=m_cols , encoding='latin-1')

Якщо ви використовуєте Python 2наступне, буде рішення:

import io
for line in io.open("u.item", encoding="ISO-8859-1"):
    # do something

Оскільки encodingпараметр не працює open(), ви отримаєте таку помилку:

TypeError: 'кодування' є недійсним аргументом ключового слова для цієї функції

Ви можете вирішити проблему за допомогою:

for line in open(your_file_path, 'rb'):

'rb' - це читання файлів у двійковому режимі. Детальніше читайте тут . Сподіваюся, це допоможе!

Це працює:

open('filename', encoding='latin-1')

або:

open('filename',encoding="IS0-8859-1")

Якщо хтось шукає їх, це приклад для перетворення CSV-файлу в Python 3:

try:
    inputReader = csv.reader(open(argv[1], encoding='ISO-8859-1'), delimiter=',',quotechar='"')
except IOError:
    pass

Іноді, коли open(filepath)в якому filepathнасправді немає файлу, виникає однакова помилка, тому спочатку переконайтеся, що існує файл, який ви намагаєтесь відкрити:

import os
assert os.path.isfile(filepath)

сподіваюся, що це допоможе.

ви можете спробувати так:

open('u.item', encoding='utf8', errors='ignore')