Я работаю с большим файлом JSON Lines (80 ГБ) и хочу выполнить потоковую передачу в первые 1000 строк для проверки структуры данных. То, что работало с образцом файла из 100 строк этого набора данных, это использование функции stream_in в jsonlite.
Я пробовал следующий код для файла 80 ГБ, но он не работает:
data <- stream_in(con=file("logfiles-data")[1:1000])
Как я могу это исправить?
Заранее спасибо!