Почему пространственные запросы в MongoDB имеют огромную разницу во времени выполнения? - PullRequest
0 голосов
/ 15 февраля 2019

У меня есть две базы данных MongoDB (реальные и синтетические), каждая из которых имеет одну коллекцию (называемую geoPoints).

Две коллекции имеют одинаковое количество документов с 4 полями (одно из полей - geoObjectJSON).именованное местоположение и его тип - это точка с долготой и широтойОни не содержат одинаковые документы и имеют сферные индексы.

Выполнение пространственного запроса к коллекции реальной базы данных выполняется за 12 секунд (возвращая приблизительно 2M документов).Выполнение запроса (большего по пространственному экстенту) к коллекции искусственной базы данных возвращает меньше документов (около 400 тыс.) И выполняется за 5144 с.Разница во времени выполнения запросов огромна.Разумно ли для пространственного запроса, который возвращает меньше документов, чем для пространственного запроса, который возвращает больше результатов, требовать больше времени для его выполнения?

Упомянутое время выполнения запросов - после их выполнения 3 раза.

Объяснение запроса к набору реальных данных коллекции (возвращает много документов);

d {
"stages" : [
    {
        "$cursor" : {
            "query" : {
                "location" : {
                    "$geoWithin" : {
                        "$geometry" : {
                            "type" : "Polygon",
                            "coordinates" : [
                                [
                                    [
                                        23.6266,
                                        37.9262
                                    ],
                                    [
                                        23.6682,
                                        37.9262
                                    ],
                                    [
                                        23.6682,
                                        37.9477
                                    ],
                                    [
                                        23.6266,
                                        37.9477
                                    ],
                                    [
                                        23.6266,
                                        37.9262
                                    ]
                                ]
                            ]
                        }
                    }
                }
            },
            "queryPlanner" : {
                "plannerVersion" : 1,
                "namespace" : "real.geoPoints",
                "indexFilterSet" : false,
                "parsedQuery" : {
                    "location" : {
                        "$geoWithin" : {
                            "$geometry" : {
                                "type" : "Polygon",
                                "coordinates" : [
                                    [
                                        [
                                            23.6266,
                                            37.9262
                                        ],
                                        [
                                            23.6682,
                                            37.9262
                                        ],
                                        [
                                            23.6682,
                                            37.9477
                                        ],
                                        [
                                            23.6266,
                                            37.9477
                                        ],
                                        [
                                            23.6266,
                                            37.9262
                                        ]
                                    ]
                                ]
                            }
                        }
                    }
                },
                "winningPlan" : {
                    "stage" : "FETCH",
                    "filter" : {
                        "location" : {
                            "$geoWithin" : {
                                "$geometry" : {
                                    "type" : "Polygon",
                                    "coordinates" : [
                                        [
                                            [
                                                23.6266,
                                                37.9262
                                            ],
                                            [
                                                23.6682,
                                                37.9262
                                            ],
                                            [
                                                23.6682,
                                                37.9477
                                            ],
                                            [
                                                23.6266,
                                                37.9477
                                            ],
                                            [
                                                23.6266,
                                                37.9262
                                            ]
                                        ]
                                    ]
                                }
                            }
                        }
                    },
                    "inputStage" : {
                        "stage" : "IXSCAN",
                        "keyPattern" : {
                            "location" : "2dsphere"
                        },
                        "indexName" : "location_2dsphere",
                        "isMultiKey" : false,
                        "multiKeyPaths" : {
                            "location" : [ ]
                        },
                        "isUnique" : false,
                        "isSparse" : false,
                        "isPartial" : false,
                        "indexVersion" : 2,
                        "direction" : "forward",
                        "indexBounds" : {
                            "location" : [
                                "[1486469352008974336, 1486469352008974336]",
                                "[1486662866055462912, 1486662866055462912]",
                                "[1486672761660112896, 1486672761660112896]",
                                "[1486673036538019840, 1486673036538019840]",
                                "[1486673105257496576, 1486673105257496576]",
                                "[1486673105257496577, 1486673139617234943]",
                                "[1486673139617234945, 1486673173976973311]",
                                "[1486673173976973313, 1486673208336711679]",
                                "[1486673242696450048, 1486673242696450048]",
                                "[1486673277056188417, 1486673311415926783]",
                                "[1486674960683368448, 1486674960683368448]",
                                "[1486675553388855297, 1486675561978789887]",
                                "[1486675561978789888, 1486675561978789888]",
                                "[1486675564839305217, 1486675564847693823]",
                                "[1486675564847693824, 1486675564847693824]",
                                "[1486675564864471040, 1486675564864471040]",
                                "[1486675564931579904, 1486675564931579904]",
                                "[1486675565200015360, 1486675565200015360]",
                                "[1486675566273757184, 1486675566273757184]",
                                "[1486675579158659072, 1486675579158659072]",
                                "[1486675785317089280, 1486675785317089280]",
                                "[1486675785317089281, 1486675819676827647]",
                                "[1486675836856696832, 1486675836856696832]",
                                "[1486675845446631425, 1486675854036566015]",
                                "[1486675854036566016, 1486675854036566016]",
                                "[1486675854036566017, 1486675862626500607]",
                                "[1486675871216435200, 1486675871216435200]",
                                "[1486675879806369793, 1486675888396304383]",
                                "[1486675888396304385, 1486675922756042751]",
                                "[1486675922756042753, 1486676060194996223]",
                                "[1486676060194996224, 1486676060194996224]",
                                "[1486676060194996225, 1486676094554734591]",
                                "[1486676094554734593, 1486676103144669183]",
                                "[1486676103144669185, 1486676111734603775]",
                                "[1486676111734603776, 1486676111734603776]",
                                "[1486676128914472960, 1486676128914472960]",
                                "[1486676335072903168, 1486676335072903168]",
                                "[1486676541231333376, 1486676541231333376]",
                                "[1486676558411202560, 1486676558411202560]",
                                "[1486676562706169856, 1486676562706169856]",
                                "[1486676562706169857, 1486676564853653503]",
                                "[1486677159706624000, 1486677159706624000]",
                                "[1486678992214818817, 1486678992248373247]",
                                "[1486678992248373248, 1486678992248373248]",
                                "[1486678992315482112, 1486678992315482112]",
                                "[1486678992583917568, 1486678992583917568]",
                                "[1486678993657659392, 1486678993657659392]",
                                "[1486678997952626688, 1486678997952626688]",
                                "[1486679015132495872, 1486679015132495872]",
                                "[1486679083851972608, 1486679083851972608]",
                                "[1486679358729879552, 1486679358729879552]",
                                "[1486680458241507328, 1486680458241507328]",
                                "[1487313776939106304, 1487313776939106304]",
                                "[1490691476659634176, 1490691476659634176]",
                                "[1495195076287004672, 1495195076287004672]",
                                "[1513209474796486656, 1513209474796486656]"
                            ]
                        }
                    }
                },
                "rejectedPlans" : [ ]
            },
            "executionStats" : {
                "executionSuccess" : true,
                "nReturned" : 2129339,
                "executionTimeMillis" : 9886,
                "totalKeysExamined" : 3229554,
                "totalDocsExamined" : 3229521,
                "executionStages" : {
                    "stage" : "FETCH",
                    "filter" : {
                        "location" : {
                            "$geoWithin" : {
                                "$geometry" : {
                                    "type" : "Polygon",
                                    "coordinates" : [
                                        [
                                            [
                                                23.6266,
                                                37.9262
                                            ],
                                            [
                                                23.6682,
                                                37.9262
                                            ],
                                            [
                                                23.6682,
                                                37.9477
                                            ],
                                            [
                                                23.6266,
                                                37.9477
                                            ],
                                            [
                                                23.6266,
                                                37.9262
                                            ]
                                        ]
                                    ]
                                }
                            }
                        }
                    },
                    "nReturned" : 2129339,
                    "executionTimeMillisEstimate" : 9600,
                    "works" : 3229554,
                    "advanced" : 2129339,
                    "needTime" : 1100214,
                    "needYield" : 0,
                    "saveState" : 25231,
                    "restoreState" : 25231,
                    "isEOF" : 1,
                    "invalidates" : 0,
                    "docsExamined" : 3229521,
                    "alreadyHasObj" : 0,
                    "inputStage" : {
                        "stage" : "IXSCAN",
                        "nReturned" : 3229521,
                        "executionTimeMillisEstimate" : 1320,
                        "works" : 3229554,
                        "advanced" : 3229521,
                        "needTime" : 32,
                        "needYield" : 0,
                        "saveState" : 25231,
                        "restoreState" : 25231,
                        "isEOF" : 1,
                        "invalidates" : 0,
                        "keyPattern" : {
                            "location" : "2dsphere"
                        },
                        "indexName" : "location_2dsphere",
                        "isMultiKey" : false,
                        "multiKeyPaths" : {
                            "location" : [ ]
                        },
                        "isUnique" : false,
                        "isSparse" : false,
                        "isPartial" : false,
                        "indexVersion" : 2,
                        "direction" : "forward",
                        "indexBounds" : {
                            "location" : [
                                "[1486469352008974336, 1486469352008974336]",
                                "[1486662866055462912, 1486662866055462912]",
                                "[1486672761660112896, 1486672761660112896]",
                                "[1486673036538019840, 1486673036538019840]",
                                "[1486673105257496576, 1486673105257496576]",
                                "[1486673105257496577, 1486673139617234943]",
                                "[1486673139617234945, 1486673173976973311]",
                                "[1486673173976973313, 1486673208336711679]",
                                "[1486673242696450048, 1486673242696450048]",
                                "[1486673277056188417, 1486673311415926783]",
                                "[1486674960683368448, 1486674960683368448]",
                                "[1486675553388855297, 1486675561978789887]",
                                "[1486675561978789888, 1486675561978789888]",
                                "[1486675564839305217, 1486675564847693823]",
                                "[1486675564847693824, 1486675564847693824]",
                                "[1486675564864471040, 1486675564864471040]",
                                "[1486675564931579904, 1486675564931579904]",
                                "[1486675565200015360, 1486675565200015360]",
                                "[1486675566273757184, 1486675566273757184]",
                                "[1486675579158659072, 1486675579158659072]",
                                "[1486675785317089280, 1486675785317089280]",
                                "[1486675785317089281, 1486675819676827647]",
                                "[1486675836856696832, 1486675836856696832]",
                                "[1486675845446631425, 1486675854036566015]",
                                "[1486675854036566016, 1486675854036566016]",
                                "[1486675854036566017, 1486675862626500607]",
                                "[1486675871216435200, 1486675871216435200]",
                                "[1486675879806369793, 1486675888396304383]",
                                "[1486675888396304385, 1486675922756042751]",
                                "[1486675922756042753, 1486676060194996223]",
                                "[1486676060194996224, 1486676060194996224]",
                                "[1486676060194996225, 1486676094554734591]",
                                "[1486676094554734593, 1486676103144669183]",
                                "[1486676103144669185, 1486676111734603775]",
                                "[1486676111734603776, 1486676111734603776]",
                                "[1486676128914472960, 1486676128914472960]",
                                "[1486676335072903168, 1486676335072903168]",
                                "[1486676541231333376, 1486676541231333376]",
                                "[1486676558411202560, 1486676558411202560]",
                                "[1486676562706169856, 1486676562706169856]",
                                "[1486676562706169857, 1486676564853653503]",
                                "[1486677159706624000, 1486677159706624000]",
                                "[1486678992214818817, 1486678992248373247]",
                                "[1486678992248373248, 1486678992248373248]",
                                "[1486678992315482112, 1486678992315482112]",
                                "[1486678992583917568, 1486678992583917568]",
                                "[1486678993657659392, 1486678993657659392]",
                                "[1486678997952626688, 1486678997952626688]",
                                "[1486679015132495872, 1486679015132495872]",
                                "[1486679083851972608, 1486679083851972608]",
                                "[1486679358729879552, 1486679358729879552]",
                                "[1486680458241507328, 1486680458241507328]",
                                "[1487313776939106304, 1487313776939106304]",
                                "[1490691476659634176, 1490691476659634176]",
                                "[1495195076287004672, 1495195076287004672]",
                                "[1513209474796486656, 1513209474796486656]"
                            ]
                        },
                        "keysExamined" : 3229554,
                        "seeks" : 33,
                        "dupsTested" : 0,
                        "dupsDropped" : 0,
                        "seenInvalidated" : 0
                    }
                }
            }
        }
    },
    {
        "$group" : {
            "_id" : {
                "$const" : null
            },
            "count" : {
                "$sum" : {
                    "$const" : 1
                }
            }
        }
    },
    {
        "$project" : {
            "_id" : false,
            "count" : true
        }
    }
],
"ok" : 1
}

Объяснение запроса к синтетическому набору данных коллекции (возвращает меньше документов из запроса коллекции реальных данных)набор данных);

{
"stages" : [
    {
        "$cursor" : {
            "query" : {
                "location" : {
                    "$geoWithin" : {
                        "$geometry" : {
                            "type" : "Polygon",
                            "coordinates" : [
                                [
                                    [
                                        23.6266,
                                        37.9262
                                    ],
                                    [
                                        23.95,
                                        37.9262
                                    ],
                                    [
                                        23.95,
                                        38.15
                                    ],
                                    [
                                        23.6266,
                                        38.15
                                    ],
                                    [
                                        23.6266,
                                        37.9262
                                    ]
                                ]
                            ]
                        }
                    }
                }
            },
            "queryPlanner" : {
                "plannerVersion" : 1,
                "namespace" : "synthetic1.geoPoints",
                "indexFilterSet" : false,
                "parsedQuery" : {
                    "location" : {
                        "$geoWithin" : {
                            "$geometry" : {
                                "type" : "Polygon",
                                "coordinates" : [
                                    [
                                        [
                                            23.6266,
                                            37.9262
                                        ],
                                        [
                                            23.95,
                                            37.9262
                                        ],
                                        [
                                            23.95,
                                            38.15
                                        ],
                                        [
                                            23.6266,
                                            38.15
                                        ],
                                        [
                                            23.6266,
                                            37.9262
                                        ]
                                    ]
                                ]
                            }
                        }
                    }
                },
                "winningPlan" : {
                    "stage" : "FETCH",
                    "filter" : {
                        "location" : {
                            "$geoWithin" : {
                                "$geometry" : {
                                    "type" : "Polygon",
                                    "coordinates" : [
                                        [
                                            [
                                                23.6266,
                                                37.9262
                                            ],
                                            [
                                                23.95,
                                                37.9262
                                            ],
                                            [
                                                23.95,
                                                38.15
                                            ],
                                            [
                                                23.6266,
                                                38.15
                                            ],
                                            [
                                                23.6266,
                                                37.9262
                                            ]
                                        ]
                                    ]
                                }
                            }
                        }
                    },
                    "inputStage" : {
                        "stage" : "IXSCAN",
                        "keyPattern" : {
                            "location" : "2dsphere"
                        },
                        "indexName" : "location_2dsphere",
                        "isMultiKey" : false,
                        "multiKeyPaths" : {
                            "location" : [ ]
                        },
                        "isUnique" : false,
                        "isSparse" : false,
                        "isPartial" : false,
                        "indexVersion" : 2,
                        "direction" : "forward",
                        "indexBounds" : {
                            "location" : [
                                "[1486469352008974336, 1486469352008974336]",
                                "[1486481034320019457, 1486481171758972927]",
                                "[1486481171758972928, 1486481171758972928]",
                                "[1486481446636879872, 1486481446636879872]",
                                "[1486482546148507648, 1486482546148507648]",
                                "[1486486944195018752, 1486486944195018752]",
                                "[1486539720753152000, 1486539720753152000]",
                                "[1486592497311285248, 1486592497311285248]",
                                "[1486596895357796352, 1486596895357796352]",
                                "[1486597994869424128, 1486597994869424128]",
                                "[1486597994869424129, 1486598544625238015]",
                                "[1486598544625238017, 1486599094381051903]",
                                "[1486599094381051905, 1486601293404307455]",
                                "[1486627681683374080, 1486627681683374080]",
                                "[1486627681683374081, 1486628231439187967]",
                                "[1486628231439187969, 1486628781195001855]",
                                "[1486628781195001856, 1486628781195001856]",
                                "[1486632079729885184, 1486632079729885184]",
                                "[1486634278753140737, 1486636477776396287]",
                                "[1486636477776396289, 1486645273869418495]",
                                "[1486645273869418497, 1486647472892674047]",
                                "[1486647472892674049, 1486649671915929599]",
                                "[1486649671915929600, 1486649671915929600]",
                                "[1486649671915929601, 1486650221671743487]",
                                "[1486650221671743489, 1486650771427557375]",
                                "[1486650771427557376, 1486650771427557376]",
                                "[1486651870939185153, 1486654069962440703]",
                                "[1486662866055462912, 1486662866055462912]",
                                "[1486672761660112896, 1486672761660112896]",
                                "[1486672761660112897, 1486673311415926783]",
                                "[1486673861171740673, 1486676060194996223]",
                                "[1486676060194996224, 1486676060194996224]",
                                "[1486676060194996225, 1486678259218251775]",
                                "[1486678992181264385, 1486678992315482111]",
                                "[1486678992315482112, 1486678992315482112]",
                                "[1486678992583917568, 1486678992583917568]",
                                "[1486678993657659392, 1486678993657659392]",
                                "[1486678997952626688, 1486678997952626688]",
                                "[1486679015132495872, 1486679015132495872]",
                                "[1486679083851972608, 1486679083851972608]",
                                "[1486679358729879552, 1486679358729879552]",
                                "[1486680458241507328, 1486680458241507328]",
                                "[1487313776939106304, 1487313776939106304]",
                                "[1490691476659634176, 1490691476659634176]",
                                "[1495195076287004672, 1495195076287004672]",
                                "[1513209474796486656, 1513209474796486656]"
                            ]
                        }
                    }
                },
                "rejectedPlans" : [ ]
            },
            "executionStats" : {
                "executionSuccess" : true,
                "nReturned" : 430676,
                "executionTimeMillis" : 5150781,
                "totalKeysExamined" : 580377,
                "totalDocsExamined" : 580350,
                "executionStages" : {
                    "stage" : "FETCH",
                    "filter" : {
                        "location" : {
                            "$geoWithin" : {
                                "$geometry" : {
                                    "type" : "Polygon",
                                    "coordinates" : [
                                        [
                                            [
                                                23.6266,
                                                37.9262
                                            ],
                                            [
                                                23.95,
                                                37.9262
                                            ],
                                            [
                                                23.95,
                                                38.15
                                            ],
                                            [
                                                23.6266,
                                                38.15
                                            ],
                                            [
                                                23.6266,
                                                37.9262
                                            ]
                                        ]
                                    ]
                                }
                            }
                        }
                    },
                    "nReturned" : 430676,
                    "executionTimeMillisEstimate" : 5144468,
                    "works" : 580377,
                    "advanced" : 430676,
                    "needTime" : 149700,
                    "needYield" : 0,
                    "saveState" : 221035,
                    "restoreState" : 221035,
                    "isEOF" : 1,
                    "invalidates" : 0,
                    "docsExamined" : 580350,
                    "alreadyHasObj" : 0,
                    "inputStage" : {
                        "stage" : "IXSCAN",
                        "nReturned" : 580350,
                        "executionTimeMillisEstimate" : 4576,
                        "works" : 580377,
                        "advanced" : 580350,
                        "needTime" : 26,
                        "needYield" : 0,
                        "saveState" : 221035,
                        "restoreState" : 221035,
                        "isEOF" : 1,
                        "invalidates" : 0,
                        "keyPattern" : {
                            "location" : "2dsphere"
                        },
                        "indexName" : "location_2dsphere",
                        "isMultiKey" : false,
                        "multiKeyPaths" : {
                            "location" : [ ]
                        },
                        "isUnique" : false,
                        "isSparse" : false,
                        "isPartial" : false,
                        "indexVersion" : 2,
                        "direction" : "forward",
                        "indexBounds" : {
                            "location" : [
                                "[1486469352008974336, 1486469352008974336]",
                                "[1486481034320019457, 1486481171758972927]",
                                "[1486481171758972928, 1486481171758972928]",
                                "[1486481446636879872, 1486481446636879872]",
                                "[1486482546148507648, 1486482546148507648]",
                                "[1486486944195018752, 1486486944195018752]",
                                "[1486539720753152000, 1486539720753152000]",
                                "[1486592497311285248, 1486592497311285248]",
                                "[1486596895357796352, 1486596895357796352]",
                                "[1486597994869424128, 1486597994869424128]",
                                "[1486597994869424129, 1486598544625238015]",
                                "[1486598544625238017, 1486599094381051903]",
                                "[1486599094381051905, 1486601293404307455]",
                                "[1486627681683374080, 1486627681683374080]",
                                "[1486627681683374081, 1486628231439187967]",
                                "[1486628231439187969, 1486628781195001855]",
                                "[1486628781195001856, 1486628781195001856]",
                                "[1486632079729885184, 1486632079729885184]",
                                "[1486634278753140737, 1486636477776396287]",
                                "[1486636477776396289, 1486645273869418495]",
                                "[1486645273869418497, 1486647472892674047]",
                                "[1486647472892674049, 1486649671915929599]",
                                "[1486649671915929600, 1486649671915929600]",
                                "[1486649671915929601, 1486650221671743487]",
                                "[1486650221671743489, 1486650771427557375]",
                                "[1486650771427557376, 1486650771427557376]",
                                "[1486651870939185153, 1486654069962440703]",
                                "[1486662866055462912, 1486662866055462912]",
                                "[1486672761660112896, 1486672761660112896]",
                                "[1486672761660112897, 1486673311415926783]",
                                "[1486673861171740673, 1486676060194996223]",
                                "[1486676060194996224, 1486676060194996224]",
                                "[1486676060194996225, 1486678259218251775]",
                                "[1486678992181264385, 1486678992315482111]",
                                "[1486678992315482112, 1486678992315482112]",
                                "[1486678992583917568, 1486678992583917568]",
                                "[1486678993657659392, 1486678993657659392]",
                                "[1486678997952626688, 1486678997952626688]",
                                "[1486679015132495872, 1486679015132495872]",
                                "[1486679083851972608, 1486679083851972608]",
                                "[1486679358729879552, 1486679358729879552]",
                                "[1486680458241507328, 1486680458241507328]",
                                "[1487313776939106304, 1487313776939106304]",
                                "[1490691476659634176, 1490691476659634176]",
                                "[1495195076287004672, 1495195076287004672]",
                                "[1513209474796486656, 1513209474796486656]"
                            ]
                        },
                        "keysExamined" : 580377,
                        "seeks" : 27,
                        "dupsTested" : 0,
                        "dupsDropped" : 0,
                        "seenInvalidated" : 0
                    }
                }
            }
        }
    }
],
"ok" : 1

}

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...