проблема с кластерами облачных данных Google создает тег --properties - PullRequest
0 голосов
/ 08 января 2019

Я пытался включить yarn.log-aggregation-enable при создании кластера Dataproc с помощью команды gcloud, как показано ниже, в соответствии с https://cloud.google.com/dataproc/docs/concepts/configuring-clusters/cluster-properties

gcloud beta dataproc clusters create test1 
--properties= 'yarn:yarn.log-aggregation-enable=true' \
--max-idle=30m \
--no-address \
--network default \
--region=us-east4 \
--zone=us-east4-c \
--master-boot-disk-size=200GB \
--worker-boot-disk-size=100GB \
--num-workers=10 \
--worker-machine-type=n1-standard-4 \
--master-machine-type=n1-standard-8 

но мне сообщили:

нераспознанные аргументы: yarn: yarn.log-aggregation-enable = true

Как правильно поставить? Есть ли другой способ включить yarn.log-aggregation-enable в кластере Dataproc?

Очень ценится!

1 Ответ

0 голосов
/ 21 января 2019

Это просто ошибка синтаксического анализа, у вас есть знак равенства (=) и пробел () перед свойством: --properties= 'yarn:yarn.log-aggregation-enable=true'. Избавьтесь от одного и команда примет параметр: --properties='yarn:yarn.log-aggregation-enable=true'

...