Данные обучения для моей нейронной сети не помещаются в памяти. Если я использую одно ядро для генерации обучающих данных, то оно становится невероятно медленным, так как данные очень большие.
Я читал о Keras.Utils.Sequence и о его многоядерности. Из того, что я вижу, нет почти никакой документации по этому классу. Единственный полезный пример, который я смог найти, был такой: https://stanford.edu/~shervine/blog/keras-how-to-generate-data-on-the-fly
Я до сих пор не понимаю, как я могу сделать несколько ядер, чтобы внести свой вклад в создание одной партии обучающих данных для керас. Мне это абсолютно необходимо, чтобы не стать узким местом в нейронной сети.
Спасибо