Запуск файла .ipynb из функции Lambda или Sagemaker Lifecycle Config - PullRequest
0 голосов
/ 12 сентября 2018

Файл ipynb при запуске экземпляра Sagemaker. текущий статус: Cloudwatch (успех) -> Лямбда (успех) -> Экземпляр Sagemaker (успех) -> Запуск определенной записной книжки (ошибка)

1.Я попытался использовать конфигурацию «Sagemaker Lifecycle» с кодом

jupyter nbconvert --execute prediction-12hr.ipynb --ExecutePreprocessor.kernel_name=conda_tensorflow_p36

но получаю ошибку

[NbConvertApp] Converting notebook prediction-12hr.ipynb to html [NbConvertApp] Executing notebook with kernel: conda_tensorflow_p36
...
raise NoSuchKernel(kernel_name) jupyter_client.kernelspec.NoSuchKernel: No such kernel named conda_tensorflow_p36

при работе

`!conda env list'
conda environments:

base * /home/ec2-user/anaconda3
JupyterSystemEnv /home/ec2-user/anaconda3/envs/JupyterSystemEnv
chainer_p27 /home/ec2-user/anaconda3/envs/chainer_p27
chainer_p36 /home/ec2-user/anaconda3/envs/chainer_p36
mxnet_p27 /home/ec2-user/anaconda3/envs/mxnet_p27
mxnet_p36 /home/ec2-user/anaconda3/envs/mxnet_p36
python2 /home/ec2-user/anaconda3/envs/python2
python3 /home/ec2-user/anaconda3/envs/python3
pytorch_p27 /home/ec2-user/anaconda3/envs/pytorch_p27
pytorch_p36 /home/ec2-user/anaconda3/envs/pytorch_p36
tensorflow_p27 /home/ec2-user/anaconda3/envs/tensorflow_p27
tensorflow_p36 /home/ec2-user/anaconda3/envs/tensorflow_p36

Also tried injecting a python/bash code to run the instance startup, pausing the start-up code to wait untill conda instance is setup by sagemaker.
Still no luck

Может ли кто-нибудь предложить план для запуска файла .ipynb в любом случае.

Ответы [ 2 ]

0 голосов
/ 29 сентября 2018

Можете ли вы попробовать активировать env tenorflow_p36 и выполнить файл записной книжки в этой среде?Таким образом, вам не нужно указывать ядро.

source activate tensorflow_p36
jupyter nbconvert --execute prediction-12hr.ipynb
0 голосов
/ 16 сентября 2018

Попробуйте активировать соответствующий Python virtualenv, на который опирается ноутбук.

source /home/ec2-user/anaconda3/envs/tensorflow_p36/bin/activate
jupyter nbconvert --execute ...

Подробнее Как активировать virtualenv?

...