Какой самый эффективный способ чтения тяжелых файлов (> ~ 10 Гб) с использованием Node.JS (LTS)?
По сути, в современном мире мне нужно прочитать содержимое файла, проанализировать каждую строку доизвестную структуру данных, выполнить определенные проверки и поместить структуру данных в базу данных (SQL Server).Я делаю это, используя C # (файлы с отображением в памяти).Он работает довольно хорошо, потому что я могу читать файл порциями (параллельно).
Я планирую перенести решение в Node (и MongoDB) для бизнес-прецедента.
Есть ли предложения / предложения?
Среда:
Я использую 64-разрядную ОС Windows, процессор на базе x64, 8 гигабайт оперативной памяти