Архив старых данных в Postgresql

Question

В настоящее время я ожидаю, что кто-нибудь посоветует мне процесс, который я собираюсь выполнить для архивирования БД.

У меня есть база данных (DB-1), в которой есть 2 очень большие таблицы, однатаблица, имеющая 25 ГБ данных, а другая - 20 ГБ данных.Это приводит к серьезным проблемам с производительностью, даже если у меня есть индексы.

Итак, мы решили архивировать старые данные с помощью следующего процесса:

1. Клонировать новую базу данных (DB-2) из ​​существующейбаза данных (DB-1).
2. Удалите старые данные из DB-1, чтобы в них были только записи за последние 2 года.В случае, если мне нужны старые данные, можно подключить DB-2.
3. Каждый месяц следует перемещать старые данные из DB-1 в DB-2 и удалять перемещенные строки из DB-1.

Answer 1

Это неправильный подход.

То, что вы ищете, это разбиение .

Вы можете создавать разделы диапазона, охватывающие один год каждый.Чтобы удалить старые данные, все, что вам нужно сделать, это удалить раздел на год, который больше не нужен.

Если вам необходимо сохранить данные по каким-либо причинам, вы также можете просто отключить раздел отТаблица.Тогда данные все еще «лежат», но не отображаются в (разделенной) таблице.Вы можете запросить (отдельный) раздел напрямую, чтобы получить доступ к этим данным.Вы даже можете переместить этот (отдельный) раздел на более медленный жесткий диск, чтобы освободить место на ваших быстрых дисках, если у вас их больше одного.

Но вы можете даже увидеть, что одно только разбиение может повысить производительность, но это во многом зависит от ваших запросов.

Обратите внимание, что для этого вы должны использовать Postgres 11, так как разбиение не было таким сложным в старых версиях.