Как вы увеличиваете результаты агрегации Spring-data-mongo? - PullRequest
Новая
       19

Как вы увеличиваете результаты агрегации Spring-data-mongo?

0 голосов
/ 21 октября 2019

В настоящее время используется версия Spring-data-mongodb 1.7.2.

Проблема заключается в том, что импортируется только 101 результат в минуту агрегированных результатов.

Мы добавили limitOperation в агрегацию,но мы получаем только 101 результат.

Фактические результаты превышают 4000.

Я понятия не имею, что вызвало проблему. 

    Fields fields = Fields.fields();
    MatchOperation match = Aggregation.match(Criteria.where("sdate").gte(sdate).and("edate").lte(edate));
    ProjectionOperation project = Aggregation.project().and("rms").as("rms");
    GroupOperation group;
    SortOperation sort;
    LimitOperation limit = Aggregation.limit(1000);


    project = Aggregation.project().and("rms").as("rms")
            .and("sdate").extractYear().as("year")
            .and("sdate").extractMonth().as("month")
            .and("sdate").extractDayOfMonth().as("day")
            .and("sdate").extractHour().as("hour")
            .and("sdate").extractMinute().as("minute");

    group = Aggregation.group("year", "month", "day", "hour", "minute").avg("rms").as("avg");


    Aggregation agg = newAggregation(match, project, group, limit)
            .withOptions(newAggregationOptions().cursor(new BasicDBObject()).build());
    AggregationResults<SensorReport> aggregate = rawdataTemplate.aggregate(agg, "raw_" + sensor_id, SensorReport.class);


    DBObject rawResults = aggregate.getRawResults();
    Map<String, Object> cursorData = (Map<String, Object>) rawResults.get("cursor");
    List<Map> sensorReports = (List<Map>) cursorData.get("firstBatch");

    return sensorReports;

Это запрос mongodb. 

db.raw_5d64eaef2a41be3ac416c338.aggregate(
[
    {
        $match: {
            'sdate': {$gte: ISODate('2019-10-17T00:00:20+09:00')},
            'edate': {$lte: ISODate('2019-10-21T00:00:20+09:00')}
        } 
    },
    {
        $project: {
            rms : '$rms',
            year : {$year: '$sdate'},
            month : {$month: '$sdate'},
            day : {$dayOfMonth: '$sdate'},
            hour : {$hour: '$sdate'},
            minute : {$minute: '$sdate'}
        }  
    },
    {
        $group: {
            _id: {
                year: '$year',
                month: '$month',
                day: '$day',
                hour: '$hour',
                minute: '$minute'
            },
            rms: {$avg:'$rms'},
        }
    }
]

)

Это результат теста июня. 

java.lang.AssertionError: expected:<101> but was:<4532>
at org.junit.Assert.fail(Assert.java:88)
at org.junit.Assert.failNotEquals(Assert.java:834)
at org.junit.Assert.assertEquals(Assert.java:645)
at org.junit.Assert.assertEquals(Assert.java:631)
at module.cms.Cms_0200DAOImplTest.getSensorDataTest(Cms_0200DAOImplTest.java:150)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:498)
at org.junit.runners.model.FrameworkMethod$1.runReflectiveCall(FrameworkMethod.java:50)
at org.junit.internal.runners.model.ReflectiveCallable.run(ReflectiveCallable.java:12)
at org.junit.runners.model.FrameworkMethod.invokeExplosively(FrameworkMethod.java:47)
at org.junit.internal.runners.statements.InvokeMethod.evaluate(InvokeMethod.java:17)
at org.junit.internal.runners.statements.RunBefores.evaluate(RunBefores.java:26)
at org.springframework.test.context.junit4.statements.RunBeforeTestMethodCallbacks.evaluate(RunBeforeTestMethodCallbacks.java:74)
at org.springframework.test.context.junit4.statements.RunAfterTestMethodCallbacks.evaluate(RunAfterTestMethodCallbacks.java:83)
at org.springframework.test.context.junit4.statements.SpringRepeat.evaluate(SpringRepeat.java:72)
at org.springframework.test.context.junit4.SpringJUnit4ClassRunner.runChild(SpringJUnit4ClassRunner.java:233)
at org.springframework.test.context.junit4.SpringJUnit4ClassRunner.runChild(SpringJUnit4ClassRunner.java:87)
at org.junit.runners.ParentRunner$3.run(ParentRunner.java:290)
at org.junit.runners.ParentRunner$1.schedule(ParentRunner.java:71)
at org.junit.runners.ParentRunner.runChildren(ParentRunner.java:288)
at org.junit.runners.ParentRunner.access$000(ParentRunner.java:58)
at org.junit.runners.ParentRunner$2.evaluate(ParentRunner.java:268)
at org.springframework.test.context.junit4.statements.RunBeforeTestClassCallbacks.evaluate(RunBeforeTestClassCallbacks.java:61)
at org.springframework.test.context.junit4.statements.RunAfterTestClassCallbacks.evaluate(RunAfterTestClassCallbacks.java:71)
at org.junit.runners.ParentRunner.run(ParentRunner.java:363)
at org.springframework.test.context.junit4.SpringJUnit4ClassRunner.run(SpringJUnit4ClassRunner.java:176)
at org.eclipse.jdt.internal.junit4.runner.JUnit4TestReference.run(JUnit4TestReference.java:89)
at org.eclipse.jdt.internal.junit.runner.TestExecution.run(TestExecution.java:41)
at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.runTests(RemoteTestRunner.java:541)
at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.runTests(RemoteTestRunner.java:763)
at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.run(RemoteTestRunner.java:463)
at org.eclipse.jdt.internal.junit.runner.RemoteTestRunner.main(RemoteTestRunner.java:209)
...