PicklingError: Не удалось сериализовать объект: TypeError: Невозможно сериализовать объект сокета - PullRequest
1 голос
/ 07 февраля 2020

Любой, кто знает, как это отладить:

PicklingError: Could not serialize object: TypeError: Cannot serialize socket object

Я попытался протестировать запись своей базы данных с помощью foreach в pyspark, выполнив простой пример:

dt = sc.parallelize(range(1, 1000))

def writeBatchData(b):

    session = driver.session()

    session.run('UNWIND {batch} AS row CREATE (n:Node {v: row})', {'batch': b})

    session.close()

dt.foreach(writeBatchData)
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...