Я запускаю приведенный ниже код, и он работает отлично, но это ужин, супер, супер медленный. df

Я использую скрипт для CDC Merge в потоковой передаче. Я хочу передать значения столбца в...

У меня есть небольшой DF, который довольно дорог для вычисления. Затем я широковещательно...

Я довольно новичок в поиске и пытаюсь провести свои эксперименты, прежде чем приступить к процессу...

Итак, я читаю данные из файла. Что-то вроде data = spark.read.format('orc')

У нас есть искровой структурированный потоковый запрос, который считывает данные из eventhub ,...