Лучший способ поиска Cassandra по столбцу без первичного ключа - PullRequest
0 голосов
/ 26 апреля 2018

Я храню исторические данные временных рядов на Кассандре.

cassandra@cqlsh>CREATE TABLE data."InstrumentTimeSeries" (
    key blob,
    column1 bigint,
    value blob,
    PRIMARY KEY (key, column1)
) WITH COMPACT STORAGE
AND bloom_filter_fp_chance = 0.01
AND comment = ''
AND dclocal_read_repair_chance = 0.0
AND default_time_to_live = 0
AND gc_grace_seconds = 864000
AND max_index_interval = 2048
AND memtable_flush_period_in_ms = 0
AND min_index_interval = 128
AND read_repair_chance = 0.0
AND speculative_retry = '99.0PERCENTILE'
AND caching = {
    'keys' : 'ALL',
    'rows_per_partition' : 'NONE'
}
AND compression = {
    'sstable_compression' : ''
}
AND compaction = {
    'class' : 'SizeTieredCompactionStrategy'
};

В столбце «значение» я сохраняю весь JSON после сериализации этого. Теперь я хочу получить записи на основе некоторых ключей из json, хранящихся в столбце значений.

  1. Я могу создать дублирующуюся таблицу, добавив новые столбцы кластеризации как согласно требованиям. или
  2. Я могу вспомнить вторичный ИНДЕКС

У меня более 20 миллионов записей в таблице.

Каков наилучший способ сделать это?

Ответы [ 2 ]

0 голосов
/ 13 июня 2018

Пожалуйста, используйте функцию Solr или Spark DSE Cassandra, которая предоставляет полезные функции для столбцов без первичного ключа.

0 голосов
/ 26 апреля 2018

Если я правильно понимаю, вы сохраняете данные о цене как json в столбце значений. Я думаю, что в основном определение столбца высокой мощности. В этом случае не рекомендуется индексировать это, особенно если у вас много записей.

Вы можете найти дальнейшее объяснение здесь: https://docs.datastax.com/en/cql/3.3/cql/cql_using/useWhenIndex.html#useWhenIndex__when-no-index

Я не уверен, что вы подразумеваете под созданием дополнительной таблицы, но это может решить вашу проблему. Например, если вы планируете полностью разложить ваш JSON на столбцы, а затем использовать индексацию для соответствующих. Было бы проще понять вашу проблему, если бы вы могли добавить какой-то пример к вашему сообщению.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...