FileNotFoundError Python -Flask / Docker в кластере Kubernetes - PullRequest
Новая
       6

FileNotFoundError Python -Flask / Docker в кластере Kubernetes

1 голос
/ 02 апреля 2020

У меня проблемы с открытием файлов в моем приложении Flask, работающем в контейнере Docker в кластере Kubernetes.

Всякий раз, когда я пытаюсь открыть каталог i, я получаю FileNotFoundError , Хранилище объектов S3FS подготовлено, и PersistentVolumeclaim успешно смонтирован на моем модуле, поэтому проблем здесь нет.

Однако при попытке прочитать файл из смонтированного хранилища я получаю указанную ошибку. Вот как я читаю файл. current_dir is /var/www

current_dir = os.path.dirname(__file__)
abs_path = os.path.join(current_dir, path)
with open(abs_path, "rb") as file:
    bin_data = file.read()

Additonally Я также попробовал все варианты ниже, но ни один из них не работает: 

data_path = pathlib.Path('/var/www/uploads/')
abs_path = data_path / path_id

data_path = pathlib.Path('uploads/')
abs_path = data_path / path_id

abs_path = current_dir + '/uploads' + path_id

tmp = str('/uploads/' + path_id).split('/')
abs_path = os.path.join(os.path.dirname(__file__), *tmp)

Я получаю следующую ошибку : 

[2020-04-02 18:16:49,359] ERROR in app: Exception on /internal/tusd [POST]
Traceback (most recent call last):
  File "/usr/local/lib/python3.7/site-packages/flask/app.py", line 2446, in wsgi_app
    response = self.full_dispatch_request()
  File "/usr/local/lib/python3.7/site-packages/flask/app.py", line 1951, in full_dispatch_request
    rv = self.handle_user_exception(e)
  File "/usr/local/lib/python3.7/site-packages/flask_cors/extension.py", line 161, in wrapped_function
    return cors_after_request(app.make_response(f(*args, **kwargs)))
  File "/usr/local/lib/python3.7/site-packages/flask/app.py", line 1820, in handle_user_exception
    reraise(exc_type, exc_value, tb)
  File "/usr/local/lib/python3.7/site-packages/flask/_compat.py", line 39, in reraise
    raise value
  File "/usr/local/lib/python3.7/site-packages/flask/app.py", line 1949, in full_dispatch_request
    rv = self.dispatch_request()
  File "/usr/local/lib/python3.7/site-packages/flask/app.py", line 1935, in dispatch_request
    return self.view_functions[rule.endpoint](**req.view_args)
  File "/var/www/api_controller.py", line 95, in tusd_handler
    hexdigest = hash_file(str(upload_id), hash_type)
  File "/var/www/file_hasher.py", line 17, in hash_file
    with open(abs_path, "rb") as file:
FileNotFoundError: [Errno 2] No such file or directory: '/var/www/uploads/f7f1c686fbc40649879e8aee7f529c96'

Однако, когда я exec -it в контейнер. Файл, среди прочего, присутствует. 

$ kubectl exec hasher-savoury-695669b858-nwg5j -- ls /var/www/uploads

f7f1c686fbc40649879e8aee7f529c96
f7f1c686fbc40649879e8aee7f529c96.info

Вот файл Docker, который я использовал. Комментируемые поля являются опциями, которые я опробовал, чтобы заставить его работать. 

FROM python:3.7-alpine as base

ENV GROUP_ID=1000 \
    USER_ID=1000

RUN apk upgrade && apk update \
    && apk --no-cache add openssl-dev openssl
RUN apk --no-cache --update add --virtual build-dependencies gcc g++ make libffi-dev

RUN mkdir /var/www && mkdir /var/www/uploads
COPY . /var/www
WORKDIR /var/www

RUN pip install --upgrade pip && pip install -r requirements.txt && apk del build-dependencies
RUN pip install gunicorn

#RUN addgroup -g $GROUP_ID savoury
#RUN adduser -D -u $USER_ID -G savoury savoury -s /bin/sh \
#    && chown savoury:savoury -R var/www/

#USER savoury

EXPOSE 5080

ENTRYPOINT ["gunicorn"]
CMD ["-w", "4", "--bind", "0.0.0.0:5080", "wsgi"]

Я попытался прочитать эти файлы в Java и успешно прочитал их. Я также попытался «залить» в контейнер и смог легко выполнить это в консоли python. Я понятия не имею, почему скрипт выше не работает.

Любая помощь с благодарностью!

1 Ответ

1 голос
/ 03 апреля 2020

Причиной ошибки было то, что файл не был найден. Он не существовал во время чтения из-за неправильной синхронизации событий asyn c с сервером выгрузки. Ошибка не была обнаружена из-за плохой регистрации. Урок: всегда регистрируйте и отслеживайте.

...