Выборка данных из базы данных для TransmogrifAI

Question

Не могли бы вы, пожалуйста, помочь мне извлекать данные непосредственно из любой базы данных MySQL вместо использования какого-либо набора данных для TransmogrifAI. Если возможно, могу ли я получить код относительно этой или какой-либо ссылки?

Answer 1

Вот руководство о том, как вы можете подключиться к MySQL из Apache Spark.

Как только вы материализуете набор данных / СДР, вы можете подключить его к TransmogrifAI:

1. Либо путем автоматической материализации функций, как показано здесь .
2. Или вы можете создавать объекты вручную с помощью функции FeatureBuilder.fromRow. Затем создайте OpWorkflow и передайте в него набор данных: workflow. setInputDataset(data).