Есть ли способ узнать, почему мое сопоставление Elasticsearch v7.6 не работает и по умолчанию используется базовое сопоставление? - PullRequest
0 голосов
/ 03 апреля 2020

Я обновляю свой проект Elasticsearch с v6.6 до v7.6.2. Я использую Elasticsearch. NET и NEST для создания моего индекса, включая сопоставления, настройки и для ввода моих данных в Elasticsearch из моего SQL дБ.

Все хорошо работает в v6.6, но когда я обновился до v7.6.2, он больше не принимает мои пользовательские сопоставления и настройки. Я имею в виду такие вещи, как мои вложенные объекты, мои собственные анализаторы и т. Д. c. Данные действительно попадают в систему, но по умолчанию используется сопоставление по умолчанию (в большинстве случаев это все ключевые слова или простой тип данных).

Этот тип поведения обычно происходит, когда в ваших сопоставлениях есть что-то синтаксически неправильное или в вашем POCO. Это не мое дело, я не думаю.

Есть ли какие-то критические изменения в v7.x, которые я мог пропустить? Я довольно подробно изучил документацию.

Чтобы привести пример того, как должно выглядеть мое отображение, вот выдержка из моего кластера v6.6.

. ... обратите внимание на то, что объект 'products' имеет тип: nested ...

[{"searchdata":{"_all":{"enabled":false},"properties":{"groupid":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"products":{"type":"nested","properties":{"adddate":{"type":"date"},"additionaltitles":{"type":"text"},"additionaltitleslist":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"adult":{"type":"integer"},"artists":{"properties":{"id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"name":{"type":"text","norms":false,"fields":{"ci":{"type":"text","norms":false,"analyzer":"caseInsensitive"},"nc":{"type":"text","norms":false,"analyzer":"titleNoCharAnalyzer"},"raw":

и вот что он показывает как версию по умолчанию в v7.6.2 ...

... обратите внимание на то, что объект «продукты» не является вложенным, множество типов «ключевых слов», никаких пользовательских анализаторов и т. Д. c. ...

    [{"_doc":{"properties":{"groupid":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"products":{"properties":{"adult":{"type":"long"},"artists":{"properties":{"id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"name":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"nameidsplit":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"nameremarticle":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}}}},"catalognum":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"costprice":{"type":"float"},"cover":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"credits":{"properties":{"id":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"name":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"nameidsplit":{"type":"text","fields":{"keyword":{"type":"keyword","ignore_above":256}}},"nameremarticle":{"type":"text","fields":

Как вы можете заметить, версия v6.6 гораздо более подробная и содержит мои вложенные объекты, и т. Д. c. Но моя версия v7.6.2 содержит базовую c структуру по умолчанию.

Что-то здесь не так, но я не знаю, что.

Есть ли отладка уровень, который я могу включить, который скажет мне, почему он «проваливается»?

ОБНОВЛЕНИЕ Итак, я выкладываю немного сокращенную версию того, как я сопоставляю свои объекты и настройки Вот. Надеюсь, это поможет понять эту проблему.

var indexCreate = client.Indices.Create(indexName, nc => nc
.Settings(st => st
    .RefreshInterval(60) //slowing the refresh interval so we can get a running count
    .NumberOfReplicas(0) //must be set to refresh after created
    .NumberOfShards(numOfShards)
    .Analysis(a => a
        .Analyzers(an => an
            .UserDefined("fullTermCaseInsensitive", FullTermCaseInsensitive)
            .UserDefined("fullTerm", FullTerm)
            .UserDefined("caseInsensitive", CaseInsensitive)                      
        )
        .TokenFilters(tf => tf
            .UserDefined("syn", Syn)
            .UserDefined("myStopFilter", MyStopFilter)
            .UserDefined("wordDelimiter", WordDelimiter)                           
        )
    )
)
.Map<Store24>(m => m
    .Dynamic(false)

    .AutoMap()
    .Properties(props =>
    {
        SetPutMappingStore24(props); //see function below
        return props;
    })
));
       private static void SetPutMappingStore24(PropertiesDescriptor<Store24> pm)
       {
            pm.Nested<Product>(x => x
                .AutoMap()
                .Name(nm => nm.Products)
                .Properties(pr => pr
                    .Nested<StorePriceSplit>(sp => sp
                        .Name("storeprice").AutoMap()
                    )
                .Properties(props =>
                    {
                        SetPutMappingDescriptorTiWo(props, "tracks");
                        SetPutMappingDescriptorTiWo(props, "title");
                    }
                )
           );

       //...... more fluent mappings here
       }
    [ElasticsearchType(IdProperty = "Groupid")]
    public class Store24
    {
        /// <summary>
        /// Identifiers
        /// </summary>
        [Key]
        [Keyword]
        public string Groupid { get; set; }

        [JsonIgnore]
        public string Upc { get; set; }

        [JsonIgnore]
        public string Titleremarticle { get; set; }

        [Nested]
        [PropertyName("products")]
        public IEnumerable<Product> Products { get; set; }

    //... more properties here
    }
    [ElasticsearchType(RelationName = "product")]
    public class Product
    {
        [Key]
        [Text(Analyzer = "fullTermCaseInsensitive")]
        public string Upc { get; set; }

        [Text(Analyzer = "fullTermCaseInsensitive", Fielddata = true)]
        public string Titleremarticle { get; set; }

    //...more properties here
    }

Я использую два объекта, один из которых называется Store24 , который сопоставляется с данными, возвращаемыми из SQL и один называется Product , который создает отображение Elasticsearch.

1 Ответ

0 голосов
/ 07 апреля 2020

Я разобрался в собственной проблеме. Кажется, создание индекса приводило к ошибке, но я ее не видел. Он был «скрыт» ответом на возвращенный объект Indices.Create (). (объект var indexCreate в моем примере выше). После того, как я ткнул в него, выдается следующее сообщение об ошибке: «Фильтр токенов [wordDelimiter] не может использоваться для анализа синонимов».

Это было проблемой в моих настройках - я думаю, что критическое изменение для 7.x что я не видел На самом деле довольно сложный вопрос.

...