Где я могу найти класс "org.terrier.realtime.memory.MemoryIndex" для импорта и использования? - PullRequest
Новая
       36

Где я могу найти класс "org.terrier.realtime.memory.MemoryIndex" для импорта и использования?

0 голосов
/ 29 апреля 2019

Я слежу за Quickstart Guide: Integrating Search into your Application available на веб-сайте платформы Terrier Information Retrieval: Домашняя страница платформы Terrier IR , используя следующий код, доступный на их веб-странице.Код использует org.terrier.realtime.memory.MemoryIndex, но он недоступен в terrier jar files, который я включил в свой проект, используя maven.

Я проверил Terrier 5.1 и 5.0, но не смог найти MemoryIndex class и его конструктор. 

import java.io.File;
import java.io.StringReader;
import java.util.HashMap;
import java.util.Iterator;

import org.terrier.indexing.Document;
import org.terrier.indexing.TaggedDocument;
import org.terrier.indexing.tokenisation.Tokeniser;
import org.terrier.querying.LocalManager;
import org.terrier.querying.Manager;
import org.terrier.querying.ManagerFactory;
import org.terrier.querying.ScoredDoc;
import org.terrier.querying.ScoredDocList;
import org.terrier.querying.SearchRequest;
import org.terrier.realtime.memory.MemoryIndex;
import org.terrier.utility.ApplicationSetup;
import org.terrier.utility.Files;


public class IndexingAndRetrievalExample {

public static void main(String[] args) throws Exception {

    // Directory containing files to index
        String aDirectoryToIndex = "/my/directory/containing/files/";

    // Configure Terrier
            ApplicationSetup.setProperty("indexer.meta.forward.keys", "docno");
    ApplicationSetup.setProperty("indexer.meta.forward.keylens", "30");

    // Create a new Index
            MemoryIndex memIndex = new MemoryIndex();

    // For each file
            for (String filename : new File(aDirectoryToIndex).list() ) {

                    String fullPath = aDirectoryToIndex+filename;

        // Convert it to a Terrier Document
                    Document document = new TaggedDocument(Files.openFileReader(fullPath), new HashMap(), Tokeniser.getTokeniser());

        // Add a meaningful identifier
                    document.getAllProperties().put("docno", filename);

                    // index it
                    memIndex.indexDocument(document);
            }

            // Set up the querying process
            ApplicationSetup.setProperty("querying.processes", "terrierql:TerrierQLParser,"
            + "parsecontrols:TerrierQLToControls,"
            + "parseql:TerrierQLToMatchingQueryTerms,"
            + "matchopql:MatchingOpQLParser,"
            + "applypipeline:ApplyTermPipeline,"
            + "localmatching:LocalManager$ApplyLocalMatching,"
            + "filters:LocalManager$PostFilterProcess");

            // Enable the decorate enhancement
            ApplicationSetup.setProperty("querying.postfilters", "org.terrier.querying.SimpleDecorate");

            // Create a new manager run queries
            Manager queryingManager = ManagerFactory.from(memIndex.getIndexRef());

            // Create a search request
            SearchRequest srq = queryingManager.newSearchRequestFromQuery("search for document");

            // Specify the model to use when searching
            srq.setControl(SearchRequest.CONTROL_WMODEL, "BM25");

            // Enable querying processes
            srq.setControl("terrierql", "on");
            srq.setControl("parsecontrols", "on");
            srq.setControl("parseql", "on");
            srq.setControl("applypipeline", "on");
            srq.setControl("localmatching", "on");
            srq.setControl("filters", "on");

            // Enable post filters
            srq.setControl("decorate", "on");

            // Run the search
            queryingManager.runSearchRequest(srq);

            // Get the result set
            ScoredDocList results = srq.getResults();

            // Print the results
            System.out.println("The top "+results.size()+" of documents were returned");
            System.out.println("Document Ranking");
            for(ScoredDoc doc : results) {
                int docid = doc.getDocid();
                double score = doc.getScore();
                String docno = doc.getMetadata("docno")
                System.out.println("   Rank "+i+": "+docid+" "+docno+" "+score);
            }
    }
}

Ответы [ 2 ]

1 голос
/ 16 мая 2019

Я определил проблему.Проблема была с установкой зависимостей maven.Вот как можно решить проблему, добавив следующие зависимости при создании проекта maven: 

<dependencies>
<dependency>
    <groupId>org.terrier</groupId>
    <artifactId>terrier-core</artifactId>
    <version>5.1</version>
</dependency>
<dependency>
    <groupId>org.terrier</groupId>
    <artifactId>terrier-realtime</artifactId>
    <version>5.1</version>
</dependency>
</dependencies>
0 голосов
/ 29 апреля 2019

Похоже, класс MemoryIndex.java является частью ядра терьера версии 4.4.Дополнительная информация: https://jar -download.com / артефакты / org.terrier / terrier-core / 4.4 / исходный код / ​​org / terrier / realtime / memory / MemoryIndex.java

И их документация устарела.

...