Сводный индекс MongoDB не используется без подсказки - PullRequest
1 голос
/ 04 марта 2020

У меня есть коллекция корзин с фруктами, миллионы рядов (имена изменены, чтобы защитить виновных.)

У каждой из этих тележек есть владелец, марка и модель, а также несколько Y или N поля о том, содержит ли корзина определенные виды фруктов.

Я хотел бы составить список моделей и подсчитать количество тележек, в каждой из которых есть определенные виды фруктов.

Таким образом, данные будут выглядеть так:

fruit.cart.insert(
{ 'owner' => 'Fred',   'make' => 'Toshiba', 'model' => 'fruitmaster 9000', 'have_apples' => 'Y', 'have_grapes' => 'N', 'have_peaches' => 'Y', ... },
{ 'owner' => 'Wilma',  'make' => 'Toshiba', 'model' => 'fruitmaster 9000', 'have_apples' => 'Y', 'have_grapes' => 'N', 'have_peaches' => 'N', ... },
{ 'owner' => 'Betty',  'make' => 'Toshiba', 'model' => 'fruitmaster 9000', 'have_apples' => 'N', 'have_grapes' => 'Y', 'have_peaches' => 'Y', ... },
{ 'owner' => 'Barney', 'make' => 'Toshiba', 'model' => 'fruitmaster X5',   'have_apples' => 'N', 'have_grapes' => 'N', 'have_peaches' => 'Y', ... },
{ 'owner' => 'Fred',   'make' => 'Honda',   'model' => 'T-1000',           'have_apples' => 'Y', 'have_grapes' => 'Y', 'have_peaches' => 'Y', ... },
{ 'owner' => 'Wilma',  'make' => 'Honda',   'model' => 'T-1000',           'have_apples' => 'N', 'have_grapes' => 'N', 'have_peaches' => 'N', ... },

И я хочу, чтобы выходные данные были:

{ 'make' => 'Toshiba', 'model' => 'fruitmaster 9000', 'count' => 3, 'apples_count' => 2, 'grapes_count' => 1, 'peaches_count' => 2, ... },
{ 'make' => 'Toshiba', 'model' => 'fruitmaster X5',   'count' => 1, 'apples_count' => 0, 'grapes_count' => 0, 'peaches_count' => 1, ... },
{ 'make' => 'Honda',   'model' => 'T-1000',           'count' => 2, 'apples_count' => 1, 'grapes_count' => 1, 'peaches_count' => 1, ... },

Итак, вот мой сводный запрос:

{ '$group' =>
  {
    _id             =>  { 'model'  => '$model', },
    model           =>  { '$first' => '$model' },
    make            =>  { '$first' => '$make'  },
    count           =>  { '$sum'   =>  1 },
    oranges_count   =>  { '$sum'   => { '$cond' => [ { '$eq' => [ '$have_oranges', 'Y' ] }, 1, 0 ] }, },
    grapes_count    =>  { '$sum'   => { '$cond' => [ { '$eq' => [ '$have_grapes',  'Y' ] }, 1, 0 ] }, },
    peaches_count   =>  { '$sum'   => { '$cond' => [ { '$eq' => [ '$have_peaches', 'Y' ] }, 1, 0 ] }, },
    apples_count    =>  { '$sum'   => { '$cond' => [ { '$eq' => [ '$have_apples',  'Y' ] }, 1, 0 ] }, },
    pears_count     =>  { '$sum'   => { '$cond' => [ { '$eq' => [ '$have_pears',   'Y' ] }, 1, 0 ] }, },
  },
},

С индексом :

db.cart.createIndex (
 {
   'have_pears'    : 1,
   'have_apples'   : 1,
   'have_oranges'  : 1,
   'have_grapes'   : 1,
   'have_peaches'  : 1,
   'make'          : 1,
   'model'         : 1,
 }, { background : true, name : 'fruit_counts' } );

Если я запускаю это без указания подсказки индекса, он не используется, и запрос выполняется вечно:

  ...
  'queryPlanner' => {
    'indexFilterSet' => bless( do{\(my $o = 0)}, 'boolean' ),
    'namespace' => 'fruit.cart',
    'parsedQuery' => {},
    'plannerVersion' => 1,
    'rejectedPlans' => [],
    'winningPlan' => {
      'direction' => 'forward',
      'stage' => 'COLLSCAN'
    }
  }
  ...

С подсказкой это быстро:

  {
    'ok' => '1',
    'stages' => [
      {
        '$cursor' => {
          'fields' => {
            '_id' => 0,
            'have_peaches' => 1,
            'have_apples' => 1,
            'have_oranges' => 1,
            'have_grapes' => 1,
            'have_pears' => 1,
            'model' => 1,
            'make' => 1
          },
          'query' => {},
          'queryPlanner' => {
            'indexFilterSet' => bless( do{\(my $o = 0)}, 'boolean' ),
            'namespace' => 'fruit.cart',
            'parsedQuery' => {},
            'plannerVersion' => 1,
            'rejectedPlans' => [],
            'winningPlan' => {
              'inputStage' => {
                'direction' => 'forward',
                'indexBounds' => {
                  'have_peaches' => [ '[MinKey, MaxKey]' ],
                  'have_apples' => [ '[MinKey, MaxKey]' ],
                  'have_oranges' => [ '[MinKey, MaxKey]' ],
                  'have_grapes' => [ '[MinKey, MaxKey]' ],
                  'have_pears' => [ '[MinKey, MaxKey]' ],
                  'model' => [ '[MinKey, MaxKey]' ],
                  'make' => [ '[MinKey, MaxKey]' ]
                },
                'indexName' => 'fruit_counts',
                'indexVersion' => 2,
                'isMultiKey' => $VAR1->[0]{'stages'}[0]{'$cursor'}{'queryPlanner'}{'indexFilterSet'},
                'isPartial' => $VAR1->[0]{'stages'}[0]{'$cursor'}{'queryPlanner'}{'indexFilterSet'},
                'isSparse' => $VAR1->[0]{'stages'}[0]{'$cursor'}{'queryPlanner'}{'indexFilterSet'},
                'isUnique' => $VAR1->[0]{'stages'}[0]{'$cursor'}{'queryPlanner'}{'indexFilterSet'},
                'keyPattern' => {
                  'have_peaches' => '1',
                  'have_apples' => '1',
                  'have_oranges' => '1',
                  'have_grapes' => '1',
                  'have_pears' => '1',
                  'model' => '1',
                  'make' => '1'
                },
                'multiKeyPaths' => {
                  'have_peaches' => [],
                  'have_apples' => [],
                  'have_oranges' => [],
                  'have_grapes' => [],
                  'have_pears' => [],
                  'model' => [],
                  'make' => []
                },
                'stage' => 'IXSCAN'
              },
              'stage' => 'PROJECTION',
              'transformBy' => {
                '_id' => 0,
                'have_peaches' => 1,
                'have_apples' => 1,
                'have_oranges' => 1,
                'have_grapes' => 1,
                'have_pears' => 1,
                'model' => 1,
                'make' => 1
              }
            }
          }
        }
      },

...

documentdb без подсказки:

'queryPlanner' => {
  'namespace' => 'fruit.cart',
  'plannerVersion' => 1,
  'winningPlan' => {
    'inputStage' => {
      'inputStage' => {
        'stage' => 'COLLSCAN'
      },
      'stage' => 'SORT'
    },
    'stage' => 'SORT_AGGREGATE'
  }
},

documentdb с подсказкой:

MongoDB::DatabaseError: Cannot use Hint for this Query. Index is multi key index or sparse index and query is not optimized to use this index.

DOH !!!

Так что я могу сделать, чтобы подсказка даже не требовалась, а затем заставить ее работать в DocumentDB?

...