mysql LOAD DATA занимает много времени в состоянии "проверка разрешений" - PullRequest
0 голосов
/ 17 апреля 2019

AWS Aurora (mysql: 5.6): 5.6.10a


сотни запросов RENAME (RENAME TABLE XXX to XXX_old, XXX_new to XXX) занимают много времени (~ 5 часов) в состоянии «проверка прав доступа».

наш рабочий процесс ниже:

1. create a new table(CREATE TABLE XXX_new LIKE XXX)
2. load data into the new table(LOAD DATA FROM S3 ... INTO TABLE XXX_new ... )
3. rename table(RENAME TABLE XXX to XXX_old, XXX_new to XXX)

рабочие процессы выполняются параллельно (около 500), и у нас различный размер загружаемых данных (10–20 ГБ).

Я думаю, что состояние "проверка разрешений" обычно занимает мало времени, но почему эти запросы занимают так много времени? Могу ли я сделать эти запросы быстрее?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...