Как запустить keras с моделью тензорного потока 2 на машине с несколькими процессорами?

Question

Как я могу обучить модель keras с бэкэндом tenorflow 2 на машине с несколькими центральными и графическими процессорами в GCP? Тф обрабатывает сам процесс на бэкэнде? Если да, то как я могу это проверить? Любой простой пример кода приветствуется.

Answer 1

Есть много способов использовать GCP для обучения модели.

Вот некоторые из них (с различными уровнями управления Google):

1 - Вы можете создать Compute Engine Instance (вы можете выбрать, какой объем обработки и тип процессорных / графических процессоров, подключенных к нему, вы хотите) и провести там обучение. Все управляется через S SH, и графический интерфейс или python не установлены.

2 - Вы можете создать Блокнот AI Platform , и он уже будет создан с помощью желаемая версия tenorflow и установленный Jupyterlab. Вы можете получить к нему доступ через интерфейс Jupyterlab или S SH. У вас также есть возможность выбора между вариантами обработки здесь.

3 - Вы можете поезд на платформе AI проводить обучение онлайн для вас. Здесь у вас есть документация, относящаяся к использованию CPU / GPU во время онлайн-обучения.

Обычно используемый конвейер - это [разработка на AI Notebooks> тренировка локально с использованием AI Local Train и подмножество данных > обучайтесь онлайн с помощью AI Platform Train и полного набора данных для развертывания модели]