Как остановить журнал спама hadoop с помощью «WARN HadoopFileSystemOwner: не найдена информация о группе для myname (auth: SIMPLE)» - PullRequest
0 голосов
/ 30 сентября 2019

Я запускаю приложение spark на пряже в AWS EMR, и я получаю спам от МБ этой ошибки: 19/09/30 17:09:29 WARN HadoopFileSystemOwner: found no group information for myname (auth:SIMPLE), using myname as primary group

Следуя совету Cloudera здесь , я пытался id myname на моем наменоде, и я вижу myname под uid, gid и группами.

hdfs groups myname на наменоде также показывает:
myname : myname

Как я могу это исправить или остановитьспам в моем журнале?

1 Ответ

0 голосов
/ 01 октября 2019

изменить / добавить вышеуказанное свойство в core-site.xml

<property> 
  <name>hadoop.http.staticuser.user</name> 
  <value>yourname</value> 
</property>
...