ElasticSearch безболезненно, как я могу получить доступ к массиву в _source

Question

Я пытаюсь выполнить поисковый запрос к API ElasticSearch (6.4.0), который включает в себя пользовательскую функцию сценария.В этой функции я пытаюсь получить доступ к массиву, который должен быть частью данных ответа.Но я всегда получаю 'null_pointer_exception':

{
"error": {
    "root_cause": [
        {
            "type": "script_exception",
            "reason": "runtime error",
            "script_stack": [
                "i = 0; i < params['_source']['userStats'].length; i++) { } ",
                "                 ^---- HERE"
            ],
            "script": "double scoreBoost = 1; for (int i = 0; i < params['_source']['userStats'].length; i++) { } return _score * Math.log1p(scoreBoost);",
            "lang": "painless"
        }
    ],
    "type": "search_phase_execution_exception",
    "reason": "all shards failed",
    "phase": "query",
    "grouped": true,
    "failed_shards": [
        {
            "shard": 0,
            "index": "search--project",
            "node": "...",
            "reason": {
                "type": "script_exception",
                "reason": "runtime error",
                "script_stack": [
                    "i = 0; i < params['_source']['userStats'].length; i++) { } ",
                    "                 ^---- HERE"
                ],
                "script": "double scoreBoost = 1; for (int i = 0; i < params['_source']['userStats'].length; i++) { } return _score * Math.log1p(scoreBoost);",
                "lang": "painless",
                "caused_by": {
                    "type": "null_pointer_exception",
                    "reason": null
                }
            }
        }
    ]
},
"status": 500

}

Также не работает doc ['userStats'].

Вот полное тело запроса:

{
"size": 10,
"query": {
    "function_score": {
        "query": {
            "bool": {
                "filter": {
                    "term": {
                        "_routing": "00000000-0000-0000-0000-000000000000"
                    }
                },
                "should": {
                    "query_string": {
                        "query": "123*",
                        "default_operator": "and",
                        "fuzziness": 1,
                        "analyze_wildcard": true,
                        "fields": [
                            "name^4",
                            "number^2",
                            "description",
                            "projectTypeId",
                            "projectStatusId",
                            "tags^1.5",
                            "company.name^2",
                            "company.number^2",
                            "company.industry",
                            "company.tags^1.5",
                            "company.companyTypes.name",
                            "company.companyContactInfos.value",
                            "company.companyContactInfos.addressLine1^1.25",
                            "company.companyContactInfos.addressLine2",
                            "company.companyContactInfos.zipCode^0.5",
                            "company.companyContactInfos.city",
                            "company.companyContactInfos.state",
                            "company.companyContactInfos.country",
                            "projectType.id",
                            "projectType.name",
                            "projectType.description",
                            "projectStatus.id",
                            "projectStatus.name",
                            "members.name",
                            "members.projectRoleName"
                        ]
                    }
                },
                "minimum_should_match": 1
            }
        },
        "functions": [
            {
                "script_score": {
                    "script": {
                        "source": "double scoreBoost = 1; for (int i = 0; i < params['_source']['userStats'].length; i++) { } return _score * Math.log1p(scoreBoost);",
                        "lang": "painless",
                        "params": {
                            "dtNow": 1543589276,
                            "uId": "00000000-0000-0000-0000-000000000000"
                        }
                    }
                }
            }
        ],
        "score_mode": "multiply"
    }
}

}

Без части script_score ответ выглядит следующим образом:

{
"took": 0,
"timed_out": false,
"_shards": {
    "total": 1,
    "successful": 1,
    "skipped": 0,
    "failed": 0
},
"hits": {
    "total": 1,
    "max_score": 4,
    "hits": [
        {
            "_index": "search--project",
            "_type": "projectentity",
            "_id": "00000000-0000-0000-0000-000000000000",
            "_score": 4,
            "_routing": "00000000-0000-0000-0000-000000000000",
            "_source": {
                "name": "123",
                "description": "123...",
                "projectTypeId": "00000000-0000-0000-0000-000000000000",
                "projectStatusId": "00000000-0000-0000-0000-000000000000",
                "tags": [
                    "232",
                    "2331",
                    "343"
                ],
                "plannedDuration": 0,
                "startDate": "2018-07-09T22:00:00Z",
                "projectType": {
                    "id": "00000000-0000-0000-0000-000000000000",
                    "name": "test 1",
                    "icon": "poll"
                },
                "projectStatus": {
                    "id": "00000000-0000-0000-0000-000000000000",
                    "name": "In Progress",
                    "type": "progress"
                },
                "members": [
                    {
                        "userId": "00000000-0000-0000-0000-000000000000",
                        "name": "dummy",
                        "projectRoleName": "test",
                        "hasImage": false
                    },
                    {
                        "userId": "00000000-0000-0000-0000-000000000000",
                        "name": "dummy ",
                        "projectRoleName": "Manager",
                        "hasImage": false
                    }
                ],
                "id": "00000000-0000-0000-0000-000000000000",
                "userStats": [
                    {
                        "userId": "00000000-0000-0000-0000-000000000000",
                        "openCount": 55,
                        "lastOpened": 1543851773
                    },
                    {
                        "userId": "00000000-0000-0000-0000-000000000000",
                        "openCount": 9,
                        "lastOpened": 1542372179
                    }
                ],
                "indexTime": "2018-12-03T15:42:53.157649Z"
            }
        }
    ]
}

}

Отображение выглядит следующим образом:

{
"search--project": {
    "aliases": {},
    "mappings": {
        "projectentity": {
            "_routing": {
                "required": true
            },
            "properties": {
                "company": {
                    "properties": {
                        "companyTypes": {
                            "properties": {
                                "icon": {
                                    "type": "text",
                                    "fields": {
                                        "keyword": {
                                            "type": "keyword",
                                            "ignore_above": 256
                                        }
                                    }
                                },
                                "id": {
                                    "type": "text",
                                    "fields": {
                                        "keyword": {
                                            "type": "keyword",
                                            "ignore_above": 256
                                        }
                                    }
                                },
                                "indexTime": {
                                    "type": "date"
                                },
                                "name": {
                                    "type": "text",
                                    "fields": {
                                        "keyword": {
                                            "type": "keyword",
                                            "ignore_above": 256
                                        }
                                    }
                                }
                            }
                        },
                        "id": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        },
                        "indexTime": {
                            "type": "date"
                        },
                        "name": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        },
                        "number": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        }
                    }
                },
                "id": {
                    "type": "text",
                    "fields": {
                        "keyword": {
                            "type": "keyword",
                            "ignore_above": 256
                        }
                    }
                },
                "members": {
                    "properties": {
                        "hasImage": {
                            "type": "boolean"
                        },
                        "name": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        },
                        "projectRoleName": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        },
                        "userId": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        }
                    }
                },
                "name": {
                    "type": "text",
                    "fields": {
                        "keyword": {
                            "type": "keyword",
                            "ignore_above": 256
                        }
                    }
                },
                ...
                "plannedDuration": {
                    "type": "long"
                },
                "startDate": {
                    "type": "date"
                },
                "userStats": {
                    "properties": {
                        "lastOpened": {
                            "type": "long"
                        },
                        "openCount": {
                            "type": "long"
                        },
                        "userId": {
                            "type": "text",
                            "fields": {
                                "keyword": {
                                    "type": "keyword",
                                    "ignore_above": 256
                                }
                            }
                        }
                    }
                }
            }
        }
    },
    "settings": {
        "index": {
            "creation_date": "1539619646426",
            "number_of_shards": "5",
            "number_of_replicas": "1",
            "uuid": "G5ohN1FvQBGkYFh_803Ifw",
            "version": {
                "created": "6040299"
            },
            "provided_name": "search--project"
        }
    }
}

}

У кого-нибудь есть предложения, что я делаю не так?Спасибо.

Answer 1

В запросе ваши params определены как dtdNow и uid.Поэтому, если вы хотите использовать их в своем скрипте, вы должны сделать params.dtdNow.

Если вы хотите использовать свойство из вашего _source (то есть userStats), вам следует использовать ctx._source.userStats.length.В документации есть еще несколько примеров: https://www.elastic.co/guide/en/elasticsearch/painless/current/painless-examples.html.

РЕДАКТИРОВАТЬ

С запросом function_score вы либо используете карту doc, либо params['_source'].Разница в том, что когда вы используете doc, он кэшируется в памяти и params['_source'] будет загружаться каждый раз (см. https://www.elastic.co/guide/en/elasticsearch/reference/current/search-request-script-fields.html). Другое предостережение: вам нужно использовать не анализированное поле или анализируемое поле text, если включено fielddata. https://www.elastic.co/guide/en/elasticsearch/reference/master/modules-scripting-fields.html#modules-scripting-doc-vals

Чтобы добиться того, что вы пытаетесь сделать, вы должны иметь возможность просто использовать неанализированное поле в вашем *Объект 1030 *. Примерно такой doc['userStats.openCount'].length (здесь я предполагаю, что для вашего userStats объекта требуется openCount).