FileBeat не отправляет журналы docker -контейнера в Elasti c -поиск - PullRequest
Новая
       53

FileBeat не отправляет журналы docker -контейнера в Elasti c -поиск

1 голос
/ 23 апреля 2020

Мое требование - настроить filebeat, чтобы иметь возможность отправлять журналы в поиск elasti c, источником для файловых ударов являются docker контейнерные журналы.

Я использую docker для установки filebeat ниже указаны файлы dockerfile.filebeat.yml & docker, которые я использовал для конфигурации.

DockerFile: 

FROM docker.elastic.co/beats/filebeat:7.2.1
# Copy our custom configuration file
COPY filebeat.yml /usr/share/filebeat/filebeat.yml
USER root
# Create a directory to map volume with all docker log files
RUN mkdir /usr/share/filebeat/dockerlogs
RUN chown -R root /usr/share/filebeat/
RUN chmod -R go-w /usr/share/filebeat/

filebeat.yml 

#filebeat.modules:
#- module: system
# syslog:
#   enabled: true
  #auth:
    #enabled: true
    #- module: auditd
    #log:
    # Does not look like Auditd is supported in Alpine linux: https://github.com/linuxkit/linuxkit/issues/52
    #enabled: false

filebeat.inputs:
- type: docker
  enabled: true
  containers:
    path: "/var/lib/docker/containers"
    stream: all # can be all, stdout or stderr
    ids:
      - '*'
  # exclude_lines: ["^\\s+[\\-`('.|_]"]  # drop asciiart lines
  # multiline.pattern: "^\t|^[[:space:]]+(at|...)|^Caused by:"
  # multiline.match: after

#========================== Filebeat autodiscover ==============================
# See this URL on how to run Apache2 Filebeat module: # https://www.elastic.co/guide/en/beats/filebeat/current/running-on-docker.html
#filebeat.autodiscover:
# providers:
#   - type: docker
      # https://www.elastic.co/guide/en/beats/filebeat/current/configuration-autodiscover-hints.html
      # This URL alos contains instructions on multi-line logs
      #     hints.enabled: true

#================================ Processors ===================================
processors:
#- add_cloud_metadata: ~
- add_docker_metadata: ~
- add_locale:
    format: offset
- add_host_metadata:
    netinfo.enabled: true

#========================== Elasticsearch output ===============================
output.elasticsearch:
  hosts: ["http://192.168.241.40:9200"]

docker -compose 

version: '2'
services:
 filebeat:
  hostname: filebeat
# ** Here to build the image, you need to specify your own docker hub account :
  image: filebeat/img-1

  volumes:
# needed to persist filebeat tracking data :
   - "filebeat_data:/usr/share/filebeat/data:rw"
# needed to access all docker logs (read only) :
   - "/var/lib/docker/containers:/usr/share/dockerlogs/data:ro"
# needed to access additional informations about containers
   - "/var/run/docker.sock:/var/run/docker.sock"

volumes:
# create a persistent volume for Filebeat
 filebeat_data:

, используя эту конфигурацию, я могу установить бит-файл на моей машине, но когда я запускаю службу на хост-машине, я не могу захватить сгенерированные журналы, используя разбить файл и отправить их в Elasti c -Search.

в чем может быть ошибка, что я делаю, любая помощь приветствуется

Примечание: ElasticSearch <7.2.1> и kibana <7.2.1> уже установлены на той же машине, и я могу открыть их через 192.168.241.40:9200

...