Ошибка типа: объект JavaPackage не вызывается AWS Glue Pyspark - PullRequest
Новая
       16

Ошибка типа: объект JavaPackage не вызывается AWS Glue Pyspark

1 голос
/ 12 апреля 2020

Я пытаюсь настроить AWS Склеить окружение на моей виртуальной коробке Ubuntu, выполнив AWS документацию .

Я сделал все, что нужно, скачав aws glue libs, пакет свечей и настройка дома свечей, как предложено. После этого я не могу инициализировать контекст клея и сталкиваюсь с ошибкой ниже. 

from awsglue.context import GlueContext
from pyspark.context import SparkContext

glueContext = GlueContext(SparkContext.getOrCreate())
or 
glueContext = GlueContext(sc)

Ошибка: 

TypeError          Traceback (most recent call last)
<ipython-input-15-0798793d4033> in <module>
----> 1 glueContext = GlueContext(SparkContext.getOrCreate())

~/aws-glue-libs-glue-1.0/PyGlue.zip/awsglue/context.py in __init__(self, sparkContext, **options)
     43         super(GlueContext, self).__init__(sparkContext)
     44         register(sparkContext)
---> 45         self._glue_scala_context = self._get_glue_scala_context(**options)
     46         self.create_dynamic_frame = DynamicFrameReader(self)
     47         self.write_dynamic_frame = DynamicFrameWriter(self)

~/aws-glue-libs-glue-1.0/PyGlue.zip/awsglue/context.py in _get_glue_scala_context(self, **options)
     64 
     65         if min_partitions is None:
---> 66             return self._jvm.GlueContext(self._jsc.sc())
     67         else:
     68             return self._jvm.GlueContext(self._jsc.sc(), min_partitions, target_partitions)

TypeError: 'JavaPackage' object is not callable
...