Google colab продолжает падать при обучении модели (resnet18 / densenet) с данными tiny-imagenet-200 - PullRequest
Новая
       53

Google colab продолжает падать при обучении модели (resnet18 / densenet) с данными tiny-imagenet-200

1 голос
/ 28 марта 2019

Мой Google colab сразу падает, как только начинает тренироваться на tiny-imagenet с 0,1 миллионами изображений и 200 классами размером 64 * 64

Журнал Colab показывает 

WARNING:root:kernel 1fe0be22-c98a-4519-a16a-69c9fb4be1da restarted
KernelRestarter: restarting kernel (1/5), keep random ports 
tensorflow/stream_executor/dso_loader.cc:152] successfully opened CUDA library libcublas.so.10.0 locally
tensorflow/core/common_runtime/gpu/gpu_device.cc:1115] Created TensorFlow device (/job:localhost/replica:0/task:0/device:GPU:0 with 10754 MB memory) -> physical GPU (device: 0, name: Tesla K80, pci bus id: 0000:00:04.0, compute capability: 3.7)

Я использую model.fit_generator с размером пакета (пробовал с 32 до 1024) и размером изображения (пробовал с 16 до 64), но ничего не работает.

Я попробовал resnet-18 архитектуру с (1,8 * 10 ^ 9 параметров), а также пользовательскую модель с 0,8 млн. Параметров, но тщетно.

Я вставляю ссылку на мой колаб на случай, если кому-то понадобится какая-то другая информация https://colab.research.google.com/drive/1QG1mg1zOn6gZaaSv4rrI4F6erdxsxQ8V#scrollTo=Uy0M-VDHivOX

...