Журналы для SQL-запросов, выполненных через Spark - PullRequest
0 голосов
/ 25 апреля 2018

Я хотел проанализировать sql запросы, выполненные пользователями из spark.Я проверил журналы сервера истории искры.И кажется, что он регистрирует только информацию частично.Например, когда я запускаю операторы select.Но не заносит в журнал операторы типа create, drop или, например, когда я делаю INSERT INTO TABLE SELECT ....., тогда он просто записывает оператор select.Но не говорит, к какой таблице были вставлены данные.Мне интересно, если что-то не так в моих настройках журналов или это правильное поведение.Если да, знаете ли вы, как лучше всего получить исторические данные запросов, запущенных через Spark.

Спасибо

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...