Высокая загрузка ЦП при вставке в MySQL из Java

Question

Я пытаюсь записать массив в базу данных mysql, однако, похоже, это приводит к 100% использованию процессора.

public void add_data(double[] data) throws SQLException {
        PreparedStatement c = null;
        String sql = "INSERT INTO lowpassdata(data) VALUES(?)";
        c = this.conn.prepareStatement(sql);
        for(int i=0; i<data.length; i++) {
            c.setDouble(1, data[i]);
            c.executeUpdate();
        }
        c.close();
    }

Answer 1

Вызовы JDBC блокируются (синхронно), поэтому не дают возможности другим потокам работать во время их работы, и вы выполняете многие из них в тесном цикле - поэтому я ожидаю увидеть высокую загрузку ЦП.

Я думаю, вам следует попробовать 3 вещи:

• Изучить пакетные операции JDBC - см. Ответ на Пакетная вставка JDBC OutOfMemoryError для примера.

• yield () между партиями

• Для MySQL добавьте

rewriteBatchedStatements = true

на строку подключения, чтобы значительно повысить производительность ваших пакетных обновлений.См. MySQL и JDBC с rewriteBatchedStatements = true