Мешок слов классификации - PullRequest
1 голос
/ 18 мая 2010

Мне нужно найти слова, обучающие слова и их классификацию. Простая классификация, такая как. Спортивные развлечения и политика в этом роде.

Где я могу найти слова и их классификации. Я знаю, что многие университеты сделали классификацию Мешка слов. Есть ли хранилище обучающих примеров?

Ответы [ 3 ]

1 голос
/ 24 мая 2010

Это не совсем то, что вы ищете, но вам может показаться http://labs.google.com/sets интересным.
Вы можете добавить несколько слов, и он выдаст список связанных слов, которые вы могли бырекурсивно бросить обратно на первую страницу, чтобы получить еще больше похожих словнаписать простой скрипт для выбора слов, которые часто встречаются в статьях из одной категории, но очень редко встречаются в статьях из других категорий

1 голос
/ 16 февраля 2012

Вы можете использовать 20 данных группы новостей http://people.csail.mit.edu/jrennie/20Newsgroups для поиска таких слов по теме. Запустите Support Vector Machine для данных, и вы получите массу слов для каждого класса. Вы можете использовать топ 20 или 50 слов. У набора данных есть 20 классов, таких как религия, политика, спорт и т.д.

0 голосов
/ 19 мая 2010

Я не знаю такого списка слов, но могу предложить использовать копию Википедии и классификации вики. Вы можете анализировать XML-версию Википедии (я это сделал) и собирать слова из разных тем.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...