Ошибка с кодом pyspark при использовании Visual Studio 2019 - PullRequest
0 голосов
/ 06 мая 2020

Я пытаюсь запустить задание pyspark на своем локальном компьютере с помощью Visual Studio 2019. Но я получаю следующее исключение. Не могли бы вы помочь мне с этим

File "c: \ program files (x86) \ microsoft visual studio \ 2019 \ enterprise \ common7 \ ide \ extensions \ microsoft \ python \ core \ debugpy_vendored \ pydevd_pydev_bundle \ pydev_monkey.py ", строка 612, в new_CreateProcess return getattr (_subprocess, original_name) (app_name, cmd_line, * args) FileNotFoundError: [WinError 2] Система не может найти указанный файл

* 1006 Ниже приведен код.
from pyspark.sql import SparkSession

if __name__ == "__main__":
print("Application Started ...")

spark = SparkSession \
        .builder \
        .appName("First PySpark Demo") \
        .master("local[*]") \
        .getOrCreate()

input_file_path = "file:///C://drivers//sandeepspark//Spark Project//sample_data//tech.txt"

tech_rdd = spark.sparkContext.textFile(input_file_path)

print("Printing data in the tech_rdd: ")
print(tech_rdd.collect())

print("Application Completed.")
...