Как добавить пользовательский фасет / фильтр solr набора данных в веб-интерфейсе CKAN? - PullRequest
0 голосов
/ 20 декабря 2018

Вопрос:

Как я могу воспроизвести результат из приведенного ниже URL-адреса из конечной точки API package_search с веб-интерфейсом CKAN?

https://demo.ckan.org/api/3/action/package_search?fq=num_resources:[1%20TO%20*]

Я хочу разрешить пользователю фильтровать пакеты по ресурсам или без (от 0 num_resources или от 1 до * num_resources).

Что я пробовал:

Я посмотрел и попытался добавить некоторые аспекты и сортировку уже.

Фасет позволяет фильтровать по пакетам с количеством ресурсов X (например, 1).Сортировка позволяет сортировать все наборы данных по порядку количества ресурсов, например, пакеты с 10 ресурсами, затем 9 ресурсами, затем 8 и т. Д.

Я попытался дублировать URI API с приведенным ниже

https://demo.ckan.org/dataset?num_resources=[1%20TO%20*]

Если я добавлю часть fq, она тоже не будет работать.Действие search() захватит num_resources=[1 TO *] и добавит его к параметру solr fq ( можно увидеть здесь с инструкциями журнала ).

Однако, после устранения проблем ямы обнаружили, что действие search() контроллера пакетов CKAN позволяет вам добавлять значения к опции фильтра solr fq, как в вызове API, но сначала он преобразует параметры в строку num_resources:"[1 TO *]".Это прекрасно работает, чтобы получить одно значение, но не диапазон, который я ищу.Если я использую этот точный параметр (с кавычками, а не с вышеуказанной конечной точкой url / api) с API, я также получаю неверный результат.

Общая информация:

ОБНОВЛЕНИЯ:

2018-12-20:

С тех пор я обнаружил, что q=num_resources:[1%20TO%20*] в качестве строки запроса работает, поскольку это не экранируется в действии search().Параметры q извлекаются до того, как произойдет кодирование.

Однако это не идеально, поскольку он обновляет входные данные поиска и переопределяет любые существующие строки запроса, если только вы не добавляете строку запроса и добавляете ее в фильтры до сих пор.

# I've switched spaces to + to help with readability.
https://demo.ckan.org/dataset?q=num_resources:[1+TO+*]+Test

2018-12-21:

Работа над реализацией IPackageController из расширения.Похоже, что это правильный путь, учитывая обстоятельства.Добавлю реализацию после.

Однако я чувствую, что обновленная реализация параметров может быть выполнена в package_search * ckan

Получается поисковый индекс организация чтения реализована немного по-другому, поэтому точно такая же реализация не будет работать.дополнительные параметры фактически включаются как часть q параметров вместо fq как поиск.

1 Ответ

0 голосов
/ 17 января 2019

Согласно моему последнему обновлению, кажется, что лучший способ достичь этого - через IPackageController из расширения и использовать before_search() для изменения параметров поиска.

Это хорошо работает, однако, было бы неплохо, если бы CKAN позволил передавать дополнительные фильтры fq на свои основные страницы поиска (набор данных и организация ?fq=num_resources:[1 TO *] и добавлять к fq).Кроме того, кажется, что наборы данных немного отличаются в назначении параметров для fq, чем в организациях.Вы можете увидеть это в этих 2 строках по их действиям ( поиск в наборе данных против организация прочитана ).В моем случае я решил обработать это только для поиска в наборе данных.

Основные элементы

# In plugin class implement IPackageController.
class CustomPlugin(plugins.SingletonPlugin, toolkit.DefaultDatasetForm):
    ...
    plugins.implements(plugins.IPackageController)


    # Lower in plugin class add needed functions from IPackageController, 
    # I decided to add them all and leave them untouched to avoid various 
    # errors I was getting.
    def before_search(self, search_params):
        u'''Extensions will receive a dictionary with the query parameters,
        and should return a modified (or not) version of it.

        Basically go over all search_params and look for values that contain my 
        additional filter and remove the double quotes. All fq values are a 
        single string, so do exact match to not remove other escaping / quotes.

        In query string in URL if you do `?num_resources=0` you get datasets with no
        resources (the opposite of this query string).
        '''
        for (param, value) in search_params.items():
            if param == 'fq' and 'num_resources:"[' in value:
                v = value.replace('num_resources:"[1 TO *]"', 'num_resources:[1 TO *]')
                search_params[param] = v

        return search_params

    def after_search(self, search_results, search_params):
        return search_results

    def before_index(self, pkg_dict):
        return pkg_dict

    def before_view(self, pkg_dict):
        return pkg_dict

    def read(self, entity):
        return entity

    def create(self, entity):
        return entity

    def edit(self, entity):
        return entity

    def delete(self, entity):
        return entity

    def after_create(self, context, pkg_dict):
        return pkg_dict

    def after_update(self, context, pkg_dict):
        return pkg_dict

    def after_delete(self, context, pkg_dict):
        return pkg_dict

    def after_show(self, context, pkg_dict):
        return pkg_dict

Затем для пользовательского интерфейса я добавил пользовательский список фасетов в search.html template.

<div>
  <section class="module module-narrow module-shallow">
    {% block facet_list_heading %}
      <h2 class="module-heading">
        <i class="fa fa-filter"></i>
        {% set title = 'Resources (data)' %}
        {{ title }}
      </h2>
    {% endblock %}
    {% block facet_list_items %}
      {% set title = 'Has Resources (data)' %}
      <nav>
        <ul class="{{ nav_class or 'list-unstyled nav nav-simple nav-facet' }}">
          {% set href = h.remove_url_param('num_resources',
                                           extras=extras,
                                           alternative_url=alternative_url) 
                        if c.fields_grouped['num_resources'] 
                        else h.add_url_param(new_params={'num_resources': '[1 TO *]' },
                                            alternative_url=alternative_url) %}
          <li class="{{ nav_item_class or 'nav-item' }}{% if c.fields_grouped['num_resources'] %} active{% endif %}">
            <a href="{{ href }}" title="{{ title }}">
              <span>{{ title }}</span>
            </a>
          </li>
        </ul>
      </nav>
    {% endblock %}
  </section>
</div>

Делая это таким образом, он не добавляет новый фасет с помощью IFacets, так как это добавляет список фасетов для num_resources, который дает опции фильтра 0, 1, 2, 3, ... (или что-то еще, что имеет смысл для вашей установки, например, если набор данных имеет 15 ресурсов, он показывает это как опцию).

Я также сделал некоторые изменения во фрагменте search_form.html, чтобы получить фильтр фасетов для отображения того, что я хотел, но это было просто лишним.

...