пиарроу как лямбда-слой - PullRequest
       14

пиарроу как лямбда-слой

1 голос
/ 21 января 2020

Мне нужна помощь, чтобы сделать лямбда-слой для лямбда-функции пиарроу. Я пытаюсь прочитать / записать файл паркета и получаю сообщение об ошибке ниже «errorMessage»: «Невозможно найти работающий движок; попытался использовать:« pyarrow »,« fastparquet ». \ Npyarrow или fastparquet требуется для поддержки паркета».

Я попытался создать слой, установив pyarrow в моем ec2 с помощью следующей команды: pip3 install pandas pyarrow -t build / python / lib / python3 .7 / site-packages / --system

но zip-файл создается с размером> 300 МБ, и, следовательно, я не могу иметь его в качестве лямбда-слоя.

любые предложения или решения.

Спасибо,

...