Spark работа для работы в двух разных средах HDFS - PullRequest
0 голосов
/ 12 июня 2018

У меня есть требование, мне нужно написать искровое задание для подключения к Prod (Source-Hive) Server A и получить данные на Local (Temp hive server), выполнить преобразование и загрузить их обратно в TargetProd (Server B)

В более ранних случаях у нас была целевая БД в качестве Oracle, поэтому мы используем для предоставления, как показано ниже, что перезапишет таблицу

AAA.write.format ("jdbc"). Option ("url", "jdbc: oracle: thin: @ // uuuuuuu: 0000 / gsahgjj.yyy.com"). option ("dbtable", "TeST.try_hty"). option ("user", "aaaaa").option ("password", "dsfdss"). option ("Truncate", "true"). mode ("Overwrite"). save ().

С точки зрения перезаписи SPARK с сервера A на B,какой должен быть синтаксис, который мы должны дать.

, когда я пытаюсь установить соединение через jdbc от одного куста (ServerA) к серверу B. Это не работает .., пожалуйста, помогите.

1 Ответ

0 голосов
/ 24 июня 2018

Вы можете подключиться к кусту с помощью jdbc, если он удаленный.Пожалуйста, получите ваш URL-адрес сервера и информацию о порте и подключитесь через JDBC.Это должно работать.

...