Pyspark считывает изображения из локального файла и отображает их в pyspark. - PullRequest
0 голосов
/ 13 ноября 2018

У меня есть некоторый png-файл в моей локальной папке, и я хотел бы прочитать их как изображение и отобразить их как изображение в pyspark.Ниже приведен мой код:

import os
os.environ['PYSPARK_SUBMIT_ARGS'] = '--packages databricks:spark-deep- 
learning:1.1.0-spark2.3-s_2.11 pyspark-shell'

from pyspark.sql import SparkSession
from pyspark.ml.image import ImageSchema
spark = SparkSession.builder.getOrCreate()
sc = spark.sparkContext


# collect all .png files in working dir
direc=C:/Python/deeplearning/*.png

import IPython.display as dp

# create list of image objects
images = []
for ea in direc:
images.append(dp.Image(filename=ea, format='png'))

# display all images
for ea in images:
dp.display_png(ea)

Я получаю следующую ошибку:

File "<ipython-input-35-5bb7da3922f3>", line 2
direc= 
      C:/Python/deeplearning/*.png
        ^
SyntaxError: invalid syntax

Как я могу это исправить?Спасибо.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...