Где я могу скачать словарь с тегами и правила?

Question

Я учусь помечать части речи, применяя трансформационные правила. Первый шаг - пометить возможные POS для каждого слова в тексте, используя словарь вроде:

communicative JJ
communicator NN
communicators NNS
communion NN
communique NN
communiques NNS
communism NN

Второй шаг - применить трансформационные правила для изменения тегов. У меня есть только очень маленький словарь, содержащий вышеупомянутые пары слово / тег. Где я могу найти большой и где я могу найти правила трансформации? Говорят, что тегирование, основанное на преобразовании, может иметь много правил. Где я могу найти правила?

Заранее спасибо.

Answer 1

Вы получили бы возможности из корпуса, такие как те, которые доступны в NLTK .Это также даст вам частоты, с которых можно оценивать вероятности, если вы хотите сделать машинное обучение ( Brill -тиль).

Правила должны быть изготовлены вручную, после чего обучающийся на машинеможно узнать, когда применять какие.См., Например, Докторскую диссертацию Брилла для правил английского языка.