Список ошибок при поиске дубликатов - PullRequest
Новая
       10

Список ошибок при поиске дубликатов

0 голосов
/ 19 апреля 2019

Эй, я хочу отсканировать этот текстовый файл электронных писем, и если всплывают два одинаковых электронных письма, я хочу, чтобы они печатались, если в списке только 1 электронное письмо, я не хочу, чтобы оно печаталось.

Он работал для другого текстового файла, но теперь он говорит об ошибке отслеживания ??? 

#note make sure found.txt and list.txt are in the 'include' for pycharmfrom collect ions import Counter

print("Welcome DADDY")

with open('myheritage-1-million.txt') as f:
    c=Counter(c.strip().lower() for c in f if c.strip()) #for case-insensitive search
    for line in c:
        if c[line] > 1:
            print(line)

ОШИБКА: 

rs/dcaputo/PycharmProjects/searchtoolforrhys/venv/include/search.py
Welcome DADDY
Traceback (most recent call last):
  File "/Users/dcaputo/PycharmProjects/searchtoolforrhys/venv/include/search.py", line 5, in <module>
    c = Counter(c.strip().lower() for c in f if c.strip()) #for case-insensitive search
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/collections/__init__.py", line 566, in __init__
    self.update(*args, **kwds)
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/collections/__init__.py", line 653, in update
    _count_elements(self, iterable)
  File "/Users/dcaputo/PycharmProjects/searchtoolforrhys/venv/include/search.py", line 5, in <genexpr>
    c = Counter(c.strip().lower() for c in f if c.strip()) #for case-insensitive search
  File "/Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/codecs.py", line 322, in decode
    (result, consumed) = self._buffer_decode(data, self.errors, final)
UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc5 in position 2668: invalid continuation byte

Process finished with exit code 1

список всех электронных писем, которые отображаются 2 раза в этом текстовом файле

1 Ответ

0 голосов
/ 19 апреля 2019

Ключом является сообщение об ошибке в конце:

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc5 in position 2668: invalid continuation byte

Эта ошибка может возникать при попытке прочитать нетекстовый файл как текст.Ваш файл может быть как-то поврежден, и в нем есть некоторые данные (в позиции 2668), которые не могут быть прочитаны как текст.

...