Spark DataFrame - тип структуры для массива столбцов Key и value - PullRequest
1 голос
/ 16 апреля 2019

Пример набора данных

B7J;B7J Realty Corp;[street#939 W El Camino,city#Chicago,state#IL]
AGC;AGC Companies Incorporated;[street#415 N Mary Ave,city#Long Island,state#NY]
KBB;KBB Minerals International Inc;[street#2373 S Archer Ave,city#Jersey City,state#NJ]

Первая строка - сокращенное наименование компании, полное название компании и адрес компании.здесь первый и второй столбцы очень просты и реализованы.но как я могу реализовать адрес столбца.написано вот так

val companySchema = StructType(Array(
    StructField("Company_key", StringType),
    StructField("Company_Name", StringType),
    StructField("Company_Address", StringType)));

а не поможет найти город?Как можно переформатировать схему.

...