Команда Amazon Redshift COPY медленная - PullRequest
0 голосов
/ 06 апреля 2019

Мне нужно скопировать ~ 3000 .csv.gz файлов в таблицу Amazon Redshift из корзины Amazon S3.Количество столбцов таблицы составляет около 150, а размер одного файла находится в диапазоне 1-10 мегабайт.

COPY table
FROM 's3://bucket/folder/'
CREDENTIALS 'aws_access_key_id=;aws_secret_access_key='
IGNOREHEADER 1
GZIP
DELIMITER ',';

Проблема в том, что эта операция очень медленная, ее завершение занимает слишком много времени.Есть ли способ настроить производительность?

...