Панды, читающие CSV с большими текстами FPR NLP - PullRequest
0 голосов
/ 03 января 2019

У меня есть большой CSV-файл, состоящий из 1 столбца и с одной ячейкой в ​​каждой строке, около 18800 из них. Каждая ячейка содержит большой текст. Размер файла большой; около 318 Мб. Я использую ноутбуки Jupyter.

Я пытаюсь прочитать файл csv в кадр данных pandas, однако получаю следующую ошибку:

ParserError: Error tokenizing data. C error: Expected 1 fields in line 12, saw 2

Я попробовал несколько трюков, однако я не получаю исходный текст или даже количество строк. Вместо этого я получаю что-то вроде 200 строк.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...