Filebeat останавливается через иногда при чтении журналов пряжи - PullRequest
0 голосов
/ 03 апреля 2020

Я использую filebeat для отправки данных журналов пряжи из oop. Я использую это filebeat-7.5.1

filebeat.inputs:
- type: log
  enabled: true

  paths:
    - /root/hadoop/userlogs/**/stderr
    - /root/ingest-logs/ingest.log
    - /root/root-logs/root.log

Это упоминание конфигурации в файле filebeat.yml

2020-04-01T16: 12: 54.871 + 0530 INFO kafka / log. go: 53 производитель / брокер / 1 максимальное количество запросов накоплено, ожидание места

2020-04-01T16: 12: 54.896 + 0530 INFO kafka / log. go: 53 производитель / брокер / 1 максимальное количество запросов, ожидающих места

2020-04-01T16: 12: 55.876 + 0530 INFO kafka / log. go: 53 производитель / брокер / 1 максимальное количество запросов, ожидающих места

2020-04-01T16: 13: 05.950 + 0530 ИНФОРМАТОР / filebeat. go: 443 Остановка файлового бита

2020-04-01T16: 13: 05.951 + 0530 INFO гусеничный / гусеничный. go: 139 Остановка гусеничного хода

2020-04-01T16: 13: 05.956 + 0530 INFO гусеничный ход / гусеничный механизм. go: 149 Остановка 1 входа

2020-04-01T16: 13: 05.962 +0530 Ввод / ввод ИНФО. go: остановлен входной тиккер 149

2020-04-01T16: 13: 05.962 + 0530 Ввод / ввод ИНФО. go: 167 Останов входа: 4626669614810496825

2020-04-01T16: 13: 05,962 +0530 INFO log / harvester. go: 272 Считыватель был закрыт: / scratch / oba / logs / hadoop / userlogs / application_1582785823666_2626 / container_1582785823666_2626_01_000002 / stderr. Закрытие. 2020-04-01T16: 13: 05.962 + 0530 INFO log / harvester. go: 272 Считыватель закрыт: /root/ingest-logs/ingest.log. Закрытие.

2020-04-01T16: 13: 05.962 + 0530 INFO log / harvester. go: 272 Считыватель закрыт: /root/ingest-logs/ingest.log. Закрытие.

2020-04-01T16: 13: 05.962 + 0530 INFO log / harvester. go: 272 Считыватель закрыт: / root / hadoop / userlogs / application_1582785823666_2626 / container_1582785823666_2626_01_000001 / stderr. Закрытие.

2020-04-01T16: 13: 05.961 + 0530 INFO cfgfile / reload. go: 229 Dynami c Конфигурационный перезагружатель остановлен

2020-04-01T16: 13: 05.971 + 0530 INFO гусеничный / гусеничный. go: 165 Гусеничный ход остановлен

2020-04-01T16: 13: 05.971 + 0530 INFO регистратор / регистратор. go: 367 Остановка регистратора

2020-04-01T16: 13: 05.971 + 0530 ИНФОРМАЦИЯ регистратор / регистратор. go: 293 Конечный регистратор

У меня есть проблема с циклическими журналами в пряже и неактивным файлом журнала. Влияет ли это на работу filbeat? Не могли бы вы предложить изменения, требуемые в filebeat для поддержания активности filebeat.

...