У меня большой текстовый файл около 450 мб. Я прочитал это и получилось как строка.
import pandas as pd
import numpy as np
import re
def readInChunks(fileObj, chunkSize=2048):
while True:
data = fileObj.read(chunkSize)
if not data:
break
yield data
result=[]
f = open("textfile.txt")
for chunk in readInChunks(f):
result.append(chunk)
f.close()
Результат, который я получил, - это большой строковый файл, скажем, результат.
И результат [0] приведен ниже
Alin Deutsch, Mary F. Fernandez, 1998
Alin Deutsch, Daniela Florescu, 1998
Alin Deutsch, Alon Y. Levy, 1998
Теперь я хочу, чтобы эта строка была преобразована в фрейм данных следующим образом
c1 c2 c3
r1 Alin Deutsch Mary F. Fernandez 1998
r2 Alin Deutsch Daniela Florescu 1998