Какие-нибудь примеры правильного использования spark_read_csv? - PullRequest
Новая
       19

Какие-нибудь примеры правильного использования spark_read_csv?

0 голосов
/ 04 марта 2020

, когда я запускаю это: 

terrorism <- spark_read_csv(sc, name = "terrorism", path = “\home\osboxes\Desktop\globalterrorismdb_0718dist.csv”)

Я получаю эту ошибку:

Ошибка: неожиданный ввод в «терроризма <- spark_read_csv (s c, имя =") терроризм ", путь = �". </p>

Пожалуйста, есть идеи, чтобы отладить это?

1 Ответ

0 голосов
/ 04 марта 2020

Ваша вторая пара цитат выглядит странно; Первая пара выглядит хорошо. Это стандартный способ восстановления CSV в мире Spark. 

val peopleDFCsv = spark.read.format("csv")
  .option("sep", ";")
  .option("inferSchema", "true")
  .option("header", "true")
  .load("examples/src/main/resources/people.csv")
...