dl4j, как и любой другой фреймворк, работает с тензорами - INDArray в случае dl4j. Таким образом, чтобы «загрузить данные», вам придется преобразовать их в тензоры. Это относится к любому источнику данных - тексту, изображениям, mp3-файлам - все векторизовано перед отправкой в нейронную сеть.