saveasTextFile ("путь") в Scala - PullRequest
Новая
       17

saveasTextFile ("путь") в Scala

0 голосов
/ 08 марта 2019

Я использовал Scala в Spark и попытался сохранить свой файл в файле HDFS, но получил ошибку.

Я пытался rdd.saveAsTextFile("path"); sc.saveAsTextFile("pathe"); saveAsTextFile("path") 

scala> inputJPG.map(x=>x.split("")).map(array=>array(0)).sc.saveAsTextFile("/loudacre/iplist")
    <console>:28: error: value sc is not a member of Array[String]
                  inputJPG.map(x=>x.split("")).map(array=>array(0)).sc.saveAsTextFile("/loudacre/iplist")

1 Ответ

0 голосов
/ 09 марта 2019

Я новый студент и все еще изучаю Scala, поэтому не знаком с функциями RDD и Scala.Обратимся к моей проблеме. Я обнаружил, что это потому, что у меня есть val xx=data.collect(), перед которым нет RDD, поэтому я не могу сделать data.saveAsTextFile в Spark.Поэтому я переместил функцию .collect() => val xx=data Тогда data.savaAsTextFile ("path") работает.

...