Есть ли способ прочитать данные из HashSet как потоковую структурированную искру, используя метод readStream ()?

Question

Чтение данных из HashMap с использованием метода readStream () метода структурированной потоковой передачи Spark.

Answer 1

Нет, там нет

По крайней мере, вам нужно распараллелить карту, но тогда она становится RDD или Dataframe, если вы применяете схему.

Поток в Spark (и аналогичных структурах) - это неограниченное количество данных.В любой момент существования Hashmap или Hashset он имеет фиксированный size(), поэтому не является потоком