Я использую официальную документацию для загрузки данных из файла паркета в представление, чтобы я мог запросить его (используя beeline для обоих)
https://spark.apache.org/docs/latest/sql-data-sources-parquet.html
Окончательное утверждение iИспользую выглядит следующим образом:
CREATE TEMPORARY VIEW parquetTable USING org.apache.spark.sql.parquet OPTIONS (path "gs://censored/nation.parquet");
При использовании инструмента Билайн я получаю следующую ошибку:
ParseException line 1:17 cannot recognize input near 'CREATE' 'TEMPORARY' 'VIEW' in ddl statement (state=42000,code=40000)
При использовании spark.sql () в оболочке spark scala все работаеткак и должно быть. Однако я хочу иметь возможность просматривать мои данные, используя соединение JDBC.