Как прочитать в файле .txt (корпус) в torchtext в pytorrch?
Я вижу только data.Dataset, например, наборы данных и data.TabularData для csv, json и tsv.
https://github.com/pytorch/text#data
https://torchtext.readthedocs.io/en/latest/data.html#dataset
Это все еще работает, если я читаю его с использованием набора табличных данных следующим образом:
test_file = data.TabularDataset(path=input_filepath, format='csv', fields=[('text', data.Field())])
Но мой набор данных не является табличным, поэтому я хотел проверить, есть ли лучший вариант.