Мне нужно создать лексер / парсер, который работает с входными данными переменной длины и структуры

Я пытаюсь выполнить «перевод» своего рода потока текста.Более конкретно, мне нужно токенизировать...

Мне нужно написать токенайзер на c / c ++, чтобы мне нужно было проанализировать строку вида char...

У меня есть EditText, в котором пользователь вводит математическое выражение. У меня есть две...

Я задал оригинальный вопрос здесь и получил практический ответ со смешанными Ruby и регулярными...

Я пытался написать простой токенайзер std :: string на c ++, и я не могу заставить его работать...

Я работаю над проектом, используя jQuery Tokeninput .Плагин описывается так: Tokeninput - это...

В следующем примере: class ZiggyTest2{ public static void main(String[] args){ Pattern p = Pattern

У меня есть документы в Solr / Lucene (3.x) со специальным полем для копирования facet_headline,...

Мне нужно токенизировать письмо, используя python Значит, мне нужно, чтобы заголовки, текст, все и...

Я пытаюсь разбить строку слов на список слов с помощью регулярных выражений. Я все еще начинающий с...

У меня есть входной файл, из которого мне нужно извлечь слова.Слова могут содержать только буквы и...

Мне нужна помощь в понимании того, как обращаться с объектами isstringstream. Я пытаюсь...

Мне нужно адаптировать StandardTokenizer от lucene к некоторым специальным целям, связанным с...

Предположим, у меня есть длинная строка, содержащая переводы строки и табуляции как: var x =...

Я использую следующую таблицу стилей для отображения таблицы в книге Excel с данными. Я не могу...

Я использую код здесь , чтобы разбить текст на отдельные слова, и он отлично работает для всех...

У меня проблема при поиске с Solr фразы, в которой есть стоп-слова.Solr отправить результат с...

Как я могу прочитать адрес электронной почты как токен? Я видел, что метод токенизатора имеет...

У меня есть следующая контекстно-бесплатная грамматика в текстовом файле 'grammar.txt' S ::= a S b...

Я читаю из CSV, построчно и разбиваю каждое значение через запятую.каждый токен является строковым...

Я работаю над программой, которая выполняет OCR на визитной карточке США и пытается вернуть такую...

Какой токенизатор подходит для этого: input: "This-something is something." output:...

Я использую Lucene.Net 2.9.2 и считаю, что мне нужно написать собственный токенизатор, но я хотел...

в Java, если у меня есть строка с этим форматом: ( string1 , string2 ) ( string2 ) ( string4 ,...