Этот код - то, что я использовал.
dataset = np.loadtxt('path to dataset', delimeter=',')
x_train=dataset[:700,0:3]
y_train=dataset[:700,3]
x_test=dataset[700:,0:3]
y_test=dataset[700:,3]
И у меня есть миллиарды обучающих данных.
Поместить эти данные в CSV-файл - боль для компьютера.
Я использую 'sleep', чтобы извлекать 100 000 данных за раз в массивный массив.
Есть ли способ прочитать данные в памяти напрямую в формате csv?