
Лексический мир не стоит на месте. В нем постоянно что-то происходит: новые слова приходят, становятся популярными, а затем стремительно устаревают. Уследить за передвижением терминов кажется невозможно, но в Мурманском арктическом университете нашли способ, как “остановить лексическое мгновение”. Ученые создали компьютерную программу для мониторинга устаревших и новых терминов.
- Принцип действия разработки напоминает сито. Программа точно также “просеивает” тексты в поисках лексического материала, подсчитывая частоту употребления слов.
Метод уже успешно себя зарекомендовал. Благодаря технологии ученые выяснили, что в последнее время в русском языке возросло употребление часто используемых лексем, а новых практически не поступает.
В ходе работы, алгоритм исследовал 250 млн слов разновременных корпусов Национального корпуса русского языка (НКРЯ). В фокусе внимания программы были три периода: досоветский (1700-1916 годы), советский (1918-1991 годы) и постсоветский (1992-2016 годы).
- Обнаруживая слово, технология приводит его к начальной форме, посчитывает словоформы, а затем сравнивает частоту употребления термина в каждом периоде.
По итогам анализа, специалисты создали таблицы популярности слов, в которых наглядно показано, какие термины пришли в язык и останутся в нем надолго, а какие понятия скоро забудутся. Например, раньше слова псевдогаллюцинация, маслообразный, транссубъективный, ангельчик, трансформизм были общеупотребимы, а теперь стали лексическими “динозаврами”, о которых никто не помнит.
Программы выявила и ряд новых слов, появившихся после 1991 года: транслит, лизинговый, офисный, мембранозный, инвестирование, ликвидность, внедорожник.
Новый метод отслеживания лексем обнаружил снижение новых слов в русском языке, но при этом, зафиксировал рост словарного запаса за счет часто используемых терминов, а также увеличение доли чисел в текстах.
По словам разработчиков программы, полученные данные найдут применение в прогнозировании языкового развития и обучении нейросетей. С помощью информации алгоритмы будут обучаться предвосхищать лексические тенденции и понимать их смысловую основу.