Вероятностный морфологический анализатор русского и украинского языков на PHP

[standov]

для украинского — не адекват, по крайней мере демо

[standov]

хотя не, гоню

[xSeth]

Можно поподробнее. Насколько я знаю для украинского мало нормальных стеммеров :( По крайней мере стеммер Портера в украинской версии выглядит очень убого.

[podarokua]

кажется для украинского таки неадекват
уже только по
var $vowels = "аеиоуыэюя";
это понятно
ибо еще нужно ведь їіє

[Kicker]

Не подскажите где можно для других языков скачать словари?

[xSeth]

Насколько я знаю, для других языков отсутствуют словари :(

[VolCh]

Судя по описанию программа ориентирована прежде всего на славянские языки, для германских (английский, немецкий, ...) и романских (итальянский, испанский, французский, ...) в том же описании есть ссылки на более эффективные алгоритмы

[vosi]

дема у Вас как-то с утф-ом плохо работает

[Imposeren]

cp1251??? Вас из прошлого кто-то сюда телепортировал?

[xSeth]

Да именно cp1251. И я в этом не вижу проблемы, до сих пор для украинского языка нет нормального стеммера без огромных баз. А перекодировать с одной кодировки в другую очень просто.

[Imposeren]

Допустим, что пофиг. Но указать на страничке можно было кодировку? Нормальные браузеры по умолчанию считают UTF-8, если не указано. У вас не указано, поэтому нифига не работает.
(домашня)

[xSeth]

Прошу прощения. Исправил.

[Radik_Wind]

Однозначно в закладки. Спасибо.

[valter]

Самолётом -> Самолётом
Самолетом -> Самолет

[AotD]

Кстати чуть-чуть покопал в этом вопросе, накопал вот такую штуку: программа морфологического анализа текста на русском языке
Очень мне помогла =) Хотя грузит систему оччень хорошо :(

[AotD]

Текс, ссыль зарезалась, а комментировать чаще раза в 5 минут не могу, ну что за напасть?
company.yandex.ru/technology/mystem/