У меня уже собраны тексты формального и неформального стиля. Нужно сформировать частотный словарь для каждого стиля и автоматически сопоставить их. К каждому слову добавить контекст использования. Создать лексический словарь и для каждого слова словарь употреблений.
Формирование частотного словаря для каждого стиля:
Вычислите частоту использования каждого слова в текстах обоих стилей.
Запишите слова и их частоту соответственно стилю, добавьте контексты использования.
Формирование словаря лексем и их употреблений:
Разбейте тексты на слова и определите их часть речи.
Создайте словарь лексем с словами, частями речи и их использованием в контексте.
Пропускание через тональный словарь:
Проверьте каждое слово на его наличие в тональном словаре и определите оценку.
Сопоставление лексики и получение процентов для диаграмм:
Сравните словари для каждого стиля и определите процент использования каждого слова.
Визуализируйте результаты с помощью графиков.
Оценка лексики через словарь:
Используйте словарь оценочной лексики для определения тональности каждого слова в контексте.
Статистические методы для определения этих стилей также необходимо использовать.
