Как посмотреть, есть ли в Lucene StandardTokenizer токены без вызова incrementToken () - PullRequest
1 голос
/ 17 октября 2011

Мне просто нужно знать, приводят ли результаты ввода токенов к каким-либо токенам, если он работает нормально, если нет, мне нужно токенизировать другим способом. Беда, если у него есть некоторые токены, вызывающие incToken (), которые ломают вещи так, что тогда я должен повторно токенизировать это, когда мне не нужно, потому что это было нормально в первый раз, как мне обойти это?

1 Ответ

1 голос
/ 20 октября 2011

Просто используйте incrementToken, затем reset.

...