Я делаю "Часть речи Tagger". Я обрабатываю неизвестное слово с суффиксом.
Но главная проблема заключается в том, как бы я определил количество суффиксов... должно ли оно быть заранее определено (например, подход Вайшеделя) или мне нужно взять последние несколько алфавитов слов (например, подход Самуэльссона).
Какой подход будет лучше......
Беглый поиск в Google показывает, что для английского языка достаточно подхода Вайшеделя, который имеет лишь рудиментарную морфологическую флексию. Подход Самуэльссона работает лучше (что интуитивно понятно), когда речь идет об обработке флективных языков.
Ограниченный ресурсами подход к морфо-синтаксическому тегированию - Google Книги, стр. 9 цитата:
Для обработки неизвестных слов Брантс (2000) использует метод Самуэльссона. (1993) анализ суффиксов, который, по-видимому, лучше всего подходит для флективных языков.
(Однако это не прямое сравнение с подходом Вайшеделя.)
