Я ищу решение для вопроса ниже. Ниже приведены библиотеки, которые я использую для решения своей проблемы. Python v3.7, matplotlib v2.1.2, pandas 0.22.0, pyQT v5.6.0.
Фон: У меня есть кнопка на одном экране. После нажатия на кнопку я читаю файл csv, выполняю предварительную обработку и отображаю график в matplotlib для определенного параметра (столбца). Я могу сделать это для одного файла. Когда я делаю это для одного файла, который может загружаться в память, все хорошо. Теперь я хочу поднять свою реализацию на новый уровень с вопросом ниже.
Вопрос: 1. У меня есть несколько файлов CSV с размером в ГБ (размер может быть любым) 2. Я хочучтобы загрузить файлы CSV, предварительно обработать их и нужно отобразить график в matplotlib Может кто-нибудь подсказать мне, как я могу решить эту проблему.
Мой подход: Загрузка данных изcsv файлы в чанке и отображение их в чанке в matplotlib. Как только построение графика завершится, получите следующие данные. Я не уверен, как реализовать и будет ли это или нет. Если возможно, предоставьте также пример реализации