Валидация моделей машинного обучения для автоматизированного определения тональности русскоязычных текстов

Басина, Полина Александровна; Дунаева, Дарья Олеговна; Саркисова, Анна Юрьевна

Валидация моделей машинного обучения для автоматизированного определения тональности русскоязычных текстов

Басина, Полина Александровна, Дунаева, Дарья Олеговна, Саркисова, Анна Юрьевна

Дата публикации: 2022

Дата публикации в реестре: 2023-12-05T16:20:31Z

Аннотация:

Приводятся результаты валидации 6 моделей машинного обучения для определения тональности русскоязычных публикаций по тематике качества жизни населения. Использованы коэффициенты межаннотаторского согласия – альфы Криппендорфа, каппа Коэна и каппа Флейса. Полученные значения коэффициентов показали низкий уровень надежности между экспертными метками и метками, которые были присвоены моделями. Сделаны выводы о наиболее частых причинах разногласий при определении тональности моделями машинного обучения.

Ключевые слова:
машинное обучение, валидация моделей, распознавание эмоций, тексты на русском языке, автоматизированная обработка информации

Тип: статьи в журналах

Источник: Вестник Томского государственного университета. 2022. № 485. С. 206-216