Zeppelin Spark println с RDD foreach не отображается на ноутбуке - PullRequest
Новая
       23

Zeppelin Spark println с RDD foreach не отображается на ноутбуке

0 голосов
/ 05 ноября 2018

Я использую Zeppelin с Spark (Scala) 

val sparkLicTextFilePath = "/home/tt/Software/spark-2.3.2-bin-hadoop2.7/LICENSE"

val licLines = sc.textFile(sparkLicTextFilePath)

licLines.foreach(line=>println(line))

Однако в блокноте пока ничего не напечатано. Я попытался с .collect(), чтобы увидеть, пусто или нет СДР. СДР в порядке и загрузите файл правильно.

Вот скриншот ноутбука Zeppelin

zeppelin_println

И немного информации о версии Zeppelin и spark

zeppelin 0.8.0

Zeppelin 0.8.0

Spark 2.3.2

Искра 2.3.2

1 Ответ

0 голосов
/ 22 ноября 2018

Попробуйте напечатать несколько строк из строк и не все. Вероятно, zeppelin не может распечатать весь файл.

Попытка: 

val fewLicLines = licLines.take(5)
fewLicLines.foreach(line=>println(line))
...