Журналы пряжи не отображаются в webui, когда включена агрегация журналов - PullRequest
0 голосов
/ 16 мая 2019

Я использую кластер с открытым исходным кодом apache spark, работающий поверх пряжи.

Когда агрегирование журналов включено, журналы НЕ отображаются в веб-интерфейсе пользователя пряжи. Но я могу получить доступ к журналам через идентификатор приложения, используя cli.

журналы пряжи -applicationId application_1558010240427_0001

Подскажите, пожалуйста, в чем может быть проблема. Я добавил ниже свойства в Yarn-site.xml

<property>
      <name>yarn.log-aggregation-enable</name>
      <value>true</value>
</property>

<property>
    <name>yarn.log-aggregation.retain-seconds</name>
    <value>86400</value>
</property>

<property>
    <name>yarn.log-aggregation.retain-check-interval-seconds</name>
    <value>3600</value>
</property>

<property>
  <name>yarn.log.server.url</name>
  <value>http://node-master:19888/jobhistory/logs/</value>
 </property>

Заранее спасибо.

...