Употребление слов будет отслеживать программа

Употребление слов будет отслеживать программа

Употребление слов будет отслеживать программа

Лексический мир не стоит на месте. В нем постоянно что-то происходит: новые слова приходят, становятся популярными, а затем стремительно устаревают. Уследить за передвижением терминов кажется невозможно, но в Мурманском арктическом университете нашли способ, как “остановить лексическое мгновение”. Ученые создали компьютерную программу для мониторинга устаревших и новых терминов.

  • Принцип действия разработки напоминает сито. Программа точно также “просеивает” тексты в поисках лексического материала, подсчитывая частоту употребления слов.

Метод уже успешно себя зарекомендовал. Благодаря технологии ученые выяснили, что в последнее время в русском языке возросло употребление часто используемых лексем, а новых практически не поступает.

В ходе работы, алгоритм исследовал 250 млн слов разновременных корпусов Национального корпуса русского языка (НКРЯ). В фокусе внимания программы были три периода: досоветский (1700-1916 годы), советский (1918-1991 годы) и постсоветский (1992-2016 годы).

  • Обнаруживая слово, технология приводит его к начальной форме, посчитывает словоформы, а затем сравнивает частоту употребления термина в каждом периоде.

По итогам анализа, специалисты создали таблицы популярности слов, в которых наглядно показано, какие термины пришли в язык и останутся в нем надолго, а какие понятия скоро забудутся. Например, раньше слова псевдогаллюцинация, маслообразный, транссубъективный, ангельчик, трансформизм были общеупотребимы, а теперь стали лексическими “динозаврами”, о которых никто не помнит.

Программы выявила и ряд новых слов, появившихся после 1991 года: транслит, лизинговый, офисный, мембранозный, инвестирование, ликвидность, внедорожник.

Новый метод отслеживания лексем обнаружил снижение новых слов в русском языке, но при этом, зафиксировал рост словарного запаса за счет часто используемых терминов, а также увеличение доли чисел в текстах.

По словам разработчиков программы, полученные данные найдут применение в прогнозировании языкового развития и обучении нейросетей. С помощью информации алгоритмы будут обучаться предвосхищать лексические тенденции и понимать их смысловую основу. 


Корзина0 позиций