MySQL Query: долгое время провел в состоянии 'init' - PullRequest
Новая
       9

MySQL Query: долгое время провел в состоянии 'init'

5 голосов
/ 16 августа 2010

Я выполняю обновление таблицы MySQL (механизм myisam), которая, согласно профилировщику, проводит непомерное количество времени в состоянии 'init': 

mysql> show profile for query 2;
+----------------------+-----------+
| Status               | Duration  |
+----------------------+-----------+
| starting             |  0.000057 |
| checking permissions |  0.000006 |
| Opening tables       |  0.000020 |
| System lock          |  0.000007 |
| Table lock           |  0.000005 |
| init                 | 21.911657 |
| Updating             |  0.002363 |
| end                  |  0.000009 |
| query end            |  0.000004 |
| freeing items        |  0.000051 |
| logging slow query   |  0.000003 |
| logging slow query   |  0.000002 |
| cleaning up          |  0.000005 |
+----------------------+-----------+

Запросследующим образом: 

mysql> update my_table
    -> set rank = 
    ->    greatest(
    ->       @rank := if(@score = score, @rank, @rank + 1),
    ->       least(0, @score := score)
    ->    )
    -> where game=7 and zone=11 and ladder=2
    -> order by score
    -> limit 100;

Query OK, 100 rows affected (21.92 sec)
Rows matched: 100  Changed: 100  Warnings: 0

У меня есть составной индекс для всех столбцов, перечисленных в предложениях 'where' и 'order by' (см. индекс с именем 'zone_lad_score' ниже): 

mysql> show indexes from my_table;
+--------------------+------------+-----------------+--------------+--------------+-----------+-------------+----------+--------+------+------------+---------+
| Table              | Non_unique | Key_name        | Seq_in_index | Column_name  | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment |
+--------------------+------------+-----------------+--------------+--------------+-----------+-------------+----------+--------+------+------------+---------+
| my_table           |          1 | indx_e          |            1 | col_e        | A         |     2937401 |     NULL | NULL   |      | BTREE      |         |
| my_table           |          1 | zone_score      |            1 | zone         | A         |         217 |     NULL | NULL   |      | BTREE      |         |
| my_table           |          1 | zone_score      |            2 | score        | A         |    23499213 |     NULL | NULL   | YES  | BTREE      |         |
| my_table           |          1 | zone_d_score    |            1 | zone         | A         |         217 |     NULL | NULL   |      | BTREE      |         |
| my_table           |          1 | zone_d_score    |            2 | col_d        | A         |      123355 |     NULL | NULL   | YES  | BTREE      |         |
| my_table           |          1 | zone_d_score    |            3 | score        | A         |    46998427 |     NULL | NULL   | YES  | BTREE      |         |
| my_table           |          1 | zone_lad_score  |            1 | zone         | A         |         217 |     NULL | NULL   |      | BTREE      |         |
| my_table           |          1 | zone_lad_score  |            2 | ladder       | A         |         868 |     NULL | NULL   | YES  | BTREE      |         |
| my_table           |          1 | zone_lad_score  |            3 | score        | A         |    23499213 |     NULL | NULL   | YES  | BTREE      |         |
+--------------------+------------+-----------------+--------------+--------------+-----------+-------------+----------+--------+------+------------+---------+

У меня также есть таблица, разделенная на «игру», всего 10 разделов.Всего в таблице около 47 миллионов записей.Таблица определена следующим образом: 

my_table | CREATE TABLE `my_table` (
  `col_e` bigint(20) NOT NULL,
  `zone` bigint(20) NOT NULL,
  `score` int(11) DEFAULT NULL,
  `game` tinyint(4) DEFAULT NULL,
  `ladder` tinyint(4) DEFAULT NULL,
  `col_d` int(11) DEFAULT NULL,
  `rank` int(11) DEFAULT NULL,
  KEY `indx_e` (`col_e`),
  KEY `zone_score` (`zone`,`score`),
  KEY `zone_d_score` (`zone`,`col_d`,`score`),
  KEY `zone_lad_score` (`zone`,`ladder`,`score`)
) ENGINE=MyISAM DEFAULT CHARSET=latin1
/*!50100 PARTITION BY LIST (game)
(PARTITION p1 VALUES IN (1) ENGINE = MyISAM,
 PARTITION p2 VALUES IN (2) ENGINE = MyISAM,
 PARTITION p3 VALUES IN (3) ENGINE = MyISAM,
 PARTITION p4 VALUES IN (4) ENGINE = MyISAM,
 PARTITION p5 VALUES IN (5) ENGINE = MyISAM,
 PARTITION p6 VALUES IN (6) ENGINE = MyISAM,
 PARTITION p7 VALUES IN (7) ENGINE = MyISAM,
 PARTITION p8 VALUES IN (8) ENGINE = MyISAM,
 PARTITION p9 VALUES IN (9) ENGINE = MyISAM,
 PARTITION p10 VALUES IN (10) ENGINE = MyISAM) */

Теперь, в соответствии с документами MySQL (http://dev.mysql.com/doc/refman/5.0/en/general-thread-states.html), действия в состоянии 'init' включают в себя "очистку двоичного журнала, журнала InnoDB и некоторого запросаоперации очистки кэша. "Хорошо ... так как я не использую InnoDB, не похоже, что это займет слишком много времени.

Я думаю, мне интересно, почему это обновление, которое должно бытьиспользование индекса и воздействие только на 100 записей заняло бы так много времени? Что конкретно будет удерживать его в состоянии 'init' так долго? Если я выполню выборку для записей таргетинга (выберите * из my_table где game = 7и zone = 11 и ladder = 2 упорядочены по пределу 100 баллов), он возвращается почти мгновенно. Выполнение аналогичных обновлений для этой таблицы (с использованием индекса zone_d_score) занимает менее секунды. Что может замедлить это конкретное обновление?

Редактировать : Добавлено определение таблицы, полный список всех индексов в рассматриваемой таблице и переименованные столбцы, чтобы немного упростить задачучтобы следовать.

Редактировать 2: Вот «объяснение» для запроса, ближайшего к обновлению: 

mysql> explain select * from my_table where game=7 and zone=11 and ladder=2 order by score limit 100;
+----+-------------+--------------------+------+------------------------------------------------+-----------------+---------+-------------+-------+-------------+
| id | select_type | table              | type | possible_keys                                  | key             | key_len | ref         | rows  | Extra       |
+----+-------------+--------------------+------+------------------------------------------------+-----------------+---------+-------------+-------+-------------+
|  1 | SIMPLE      | my_table           | ref  | zone_score,zone_d_score,zone_lad_score         | zone_lad_score  | 10      | const,const | 53952 | Using where |
+----+-------------+--------------------+------+------------------------------------------------+-----------------+---------+-------------+-------+-------------+
1 row in set (0.00 sec)

Ответы [ 2 ]

1 голос
/ 17 августа 2010

После еще нескольких экспериментов я добавил в таблицу индекс, который также включает столбец, по которому я разбил таблицу: 

CREATE INDEX game_zone_ladder_score ON my_table(game,zone,ladder,score)

и внезапно ОБНОВЛЕНИЕ работает намного лучше (менее секунды). Я бы ожидал, что ОБНОВЛЕНИЕ будет использовать преимущества разделов так же, как и SELECT, но, очевидно, нет.

Хотелось бы знать, что именно MySQL делает во время состояния 'init' во время ОБНОВЛЕНИЙ и / или почему ОБНОВЛЕНИЯ не учитывают разделы.

0 голосов
/ 28 августа 2010

Существует требование, что если вы используете разделение, столбцы раздела должны появиться в вашем первичном ключе. (Пуля возле дна)

http://dev.mysql.com/tech-resources/articles/mysql_5.1_partitions.html

...