Эксперты создали новый инструмент для оценки сложности текстов на малых языках
фото: фрипик
Российские учёные разработали инновационный инструмент для оценки сложности текстов на шести малоизученных языках народов России, включая адыгейский, башкирский, бурятский, татарский, осетинский и удмуртский. Этот специализированный ресурс представляет собой уникальное достижение в области лингвистики и когнитивных наук, поскольку он учитывает специфические грамматические и лексические особенности этих языков.
Ульяна Петрунина, эксперт Центра языка и мозга НИУ ВШЭ, подчеркнула, что разработанная модель анализирует структурные и морфосинтаксические характеристики каждого из шести языков. Адаптация классической формулы индекса удобочитаемости Флеша к языкам с различной грамматикой и длиной слов позволила создать эффективный алгоритм, который может быть легко адаптирован для анализа других малоизученных языков.
Данный проект соответствует государственной языковой политике России, утверждённой в 2025 году, которая направлена на сохранение и развитие языкового разнообразия, а также на расширение сферы их применения в стране. Реализация этой политики требует создания инструментов, способствующих повышению доступности и функциональности малоизученных языков в различных сферах коммуникации.
Центр языка и мозга НИУ ВШЭ разработал онлайн-сервис для оценки сложности текстов, который использует частотные списки из 5 тысяч наиболее часто встречающихся слов для каждого языка. Сервис также анализирует такие параметры текста, как лексическая плотность, семантическое разнообразие и описательность. Этот ресурс будет полезен не только для преподавателей при подборе учебных материалов, но и для учёных, занимающихся созданием сопоставимых текстов для лингвистических и когнитивных исследований.
В перспективе планируется расширение функционала сервиса, что позволит включить в него другие малоизученные языки, как российские, так и зарубежные. Это будет способствовать развитию междисциплинарных исследований и укреплению научного потенциала в области изучения языкового разнообразия.
