Следующие команды отлично работают в моем терминале: gcloud запись чтения...
Я работаю над кластером Data Proc Spark с действием инициализации для установки ноутбука Jupyter.Я...
У меня есть кластер данных GCP, в котором я выполняю работу.Ввод задания - это папка, в которой...
Это моя текущая работа в Hadoop. java -cp `hadoop classpath`:/usr/local/src/jobs/MyJob/tony-cli-0.1
Я пытаюсь запустить задание PySpark, используя Dataproc . Единственное отличие от всех примеров в...
Можно ли сохранить работу главного компьютера в Dataproc? Каждый раз, когда я запускаю задание...
Как мы можем визуализировать (через панели мониторинга) статус задания Dataproc в Google Cloud...
@ Деннис-Хо Использование нестандартной учетной записи службы в Google Cloud dataproc В продолжение...
У меня есть кластер GCP Dataproc с 50 рабочими (n1-standard-16 16 VCores 64 ГБ ОЗУ). В кластере...
Google Cloud Dataproc предоставляет сценарии инициализации для многих фреймворков, включая Kafka,...
Я успешно создал и протестировал проект, который запускается локально с помощью docker-compose с...
Работая с Dataproc, я настраиваю другую конфигурацию для оптимизации запроса улья: <property>...
Я новичок в BigQuery GCP и для доступа к данным BigQuery мы используем разъем Spotify...
Я получаю сообщение об ошибке при попытке отправить задание PySpark в кластер Dataproc. Команда...
Как проверить количество кластеров Dataproc, используемых в любой момент времени в Google Cloud...
Я пытаюсь обработать несколько большие данные для Kaggle Competition. Объем обрабатываемых данных...
Я создал несколько таблиц в кластере Dataproc.Кластер был позже разрушен.Однако я создал таблицу с...
Используя Spark в GCP Dataproc, я успешно записываю весь RDD в GCS следующим образом: rdd
Я создаю кластер кустов dataproc с помощью следующей команды. gcloud dataproc clusters create...
Я знаю, что Google BigQuery - это хранилище данных, но считается ли Dataproc, Big Table, Pub / Sub...
Может быть, вы можете помочь мне с моей проблемойЯ запускаю искровую работу на google-dataproc через...
При создании кластера dataproc с gs: // в качестве FS по умолчанию я получаю сообщение об ошибке...
Я пытаюсь получить доступ к ресурсам GCloud, в частности к пользовательскому интерфейсу Hadoop...
Недавно у меня возникали случайные ошибки при попытке создать кластеры dataproc в GCP. Команда...
Я пишу задание Spark в Scala в Google DataProc, которое выполняется ежедневно и обрабатывает записи...