Я работал с обычным искровым приложением wordcount на Databricks.Чтобы использовать вспомогательную библиотеку, я использовал библиотеку spark._mooc_meta в своем кластере.
После чего я ожидал получить вывод в виде 1 теста, пройденного для кода ниже.Но возникает другая проблема.
from databricks_test_helper import Test
Test.assertEquals(wordCountsDF.collect(), [(tutorial, 1), (spark, 2),
(look, 2), (python, 1)],
'incorrect counts for wordCountsDF')
Вывод: ImportError: невозможно импортировать имя 'Test'
Ниже приведены используемые Python и Scala-версия: Python-версия: 3 Databricks Runtime-версия: 5.2 (Спарк 2.4 и Скала 2.11)