Как определить язык данного текста

Question

В моем приложении Rails 3 пользователи могут писать сообщения на форуме. Я хотел бы определить, какой язык для данного сообщения. Я заинтересован в английском, русском и иврите. Есть ли в Ruby / Rails встроенная библиотека для такой задачи? Если нет, то любые идеи будут оценены.

Answer 1

Используйте это: https://github.com/nashby/wtf_lang

"ruby is so awesome!".lang # => "en"
"ruby is so awesome!".full_lang # => "ENGLISH"

Answer 2

Вы можете использовать API, предоставленный Google, чтобы угадать его с помощью Google Translate.

Смотрите документацию здесь: http://code.google.com/apis/language/translate/v1/using_rest_langdetect.html

Answer 3

Поскольку вас интересуют языки с разными наборами символов, вы можете выкопать коды символов, которые преимущественно находятся в ваших строках.Затем вы можете увидеть, попадают ли они в наборы кодов, которые представляют иврит / криклические символы.

Answer 4

API определения языка предоставляет Ruby GEM для определения языка.

Answer 5

Возможно, вы могли бы взглянуть на whatlanguage самоцвет?

Answer 6

Посмотрите на этот блог
http://blog.kenweiner.com/2008/04/server-side-language-detection-with.html
Это может быть полезно

Answer 7

http://rubygems.org/gems/prose Проза доза это без драгоценного камня.Попробуй.

Answer 8

Просто быстрая демонстрация WhatLanguage для всех, кто заинтересован: http://www.youtube.com/watch?v=lNqZ2cqOReo&list=UUJ_3fstMOH-g4yBxtvgAWkw&index=0&feature=plcp