установите jupyterhub notebook_dir в s3 на emr 5.16 - PullRequest
0 голосов
/ 30 августа 2018

есть способ перенаправить notebook-dir в s3 в файле конфигурации JSON EMR-Cluster перед запуском кластера. Я использовал следующую классификацию: «jupyter-notebook-conf» и установил следующую опцию: c.NotebookApp.notebook_dir "s3: // [корзина] / путь"

Это создает файл конфигурации: "/Etc/jupyter/jupyter_notebook_config.py" с данной записью, но безуспешно.

Раньше я мог использовать опцию - notebook-dir , когда устанавливал jupyterhub вручную, но теперь я пытаюсь использовать предустановленный сервис jupyterhub EMR-Cluster. (см .: Запуск Jupyter Notebook и JupyterHub в Amazon EMR )

1 Ответ

0 голосов
/ 10 сентября 2018

не поддерживается на 5.16

5.17 позволяет это, добавив эту конфигурацию классификации

[
    {
        "Classification": "jupyter-s3-conf",
        "Properties": {
            "s3.persistence.enabled": "true",
            "s3.persistence.bucket": "MyJupyterBucket"
        }
    }
]
...