Отсутствует значение индекса в пути к объекту плагина Fluentd S3 - PullRequest
Новая
       122

Отсутствует значение индекса в пути к объекту плагина Fluentd S3

0 голосов
/ 29 мая 2020

При использовании следующей конфигурации объекты, созданные в S3, имеют такие пути ...

logs/2020052913.fluentd-rhshq_.log.gz

Почему отсутствует значение индекса из %{index}? Ожидается целое число 0 или больше. 

  <match label>
    @type s3

    check_apikey_on_start false
    check_bucket false
    check_object false
    use_bundled_cert true

    s3_region us-east-1
    s3_bucket logs
    path logs
    s3_object_key_format %{path}/%{time_slice}.%{hostname}_%{index}.log.%{file_extension}

    <buffer>
      @type file
      path /var/log/fluent/s3_logs
      timekey 1h
      timekey_use_utc true
    </buffer>

    <format>
      @type json
    </format>
  </match>

Создание образа Fluentd со следующим Dockerfile 

ARG FLUENTD_VERSION
FROM fluent/fluentd:${FLUENTD_VERSION}
USER root
WORKDIR /home/fluent
ENV PATH /fluentd/vendor/bundle/ruby/2.6.0/bin:$PATH
ENV GEM_PATH /fluentd/vendor/bundle/ruby/2.6.0
ENV GEM_HOME /fluentd/vendor/bundle/ruby/2.6.0
ENV FLUENTD_DISABLE_BUNDLER_INJECTION 1
COPY Gemfile Gemfile.lock /fluentd/
RUN buildDeps="sudo make gcc g++ libc-dev libffi-dev ca-certificates" \
     && apt-get update \
     && apt-get upgrade -y \
     && apt-get install \
     -y --no-install-recommends \
     $buildDeps net-tools \
    && gem install bundler --version 1.16.2 \
    && bundle config silence_root_warning true \
    && bundle install --gemfile=/fluentd/Gemfile --path=/fluentd/vendor/bundle \
    && SUDO_FORCE_REMOVE=yes \
    apt-get purge -y --auto-remove \
                  -o APT::AutoRemove::RecommendsImportant=false \
                  $buildDeps \
 && rm -rf /var/lib/apt/lists/* \
    && gem sources --clear-all \
    && rm -rf /tmp/* /var/tmp/* /usr/lib/ruby/gems/*/cache/*.gem
RUN touch /fluentd/etc/disable.conf
COPY plugins /fluentd/plugins/
COPY entrypoint.sh /fluentd/entrypoint.sh
ENV FLUENTD_OPT=""
ENV FLUENTD_CONF="fluent.conf"
ENTRYPOINT ["tini", "--", "/fluentd/entrypoint.sh"]

с версией FLUENTD_VERSION=v1.4.2-debian-2.0

...