Невозможно заполнить AWS Клей ETL Метрики работы - PullRequest
0 голосов
/ 27 апреля 2020

Я пытаюсь заполнить максимально возможные показатели работы склеивания для некоторого тестирования, ниже приведена созданная мной настройка:

  • Программа-обходчик считывает данные (фиктивные данные клиента из 500 строк) из файла CSV помещен в корзину S3.
  • Использовал другой сканер для сканирования таблиц, созданных в кластере Redshift.
  • Наконец, задание ETL считывает данные из файла csv в s3 и выгружает их в таблицу Redshift.

Задание выполняется без каких-либо проблем, и я могу видеть, как окончательные данные сбрасываются в таблицу Redshift, однако в итоге заполняются только 5 метрик Cloudwatch:

  • glue.jvm.heap.usage
  • glue.jvm.heap.used
  • glue.s3.filesystem.read_bytes
  • glue.s3.filesystem.write_bytes
  • glue.system.cpuSystemLoad

Существует еще примерно 20 показателей, которые не заполняются.

Есть ли предложения о том, как также заполнить эти оставшиеся показатели?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...