Система аналізу трендів новин та виявлення аномалій

Інтелектуальна система збору, обробки та аналізу новинного контенту з сотень джерел в режимі реального часу. Агрегує новини, проводить семантичний аналіз змісту, враховує поведінку користувачів (коментарі, соціальні реакції) та генерує інсайти про тренди, аномалії та загальну тональність.

Основні функції:
* Збір новин з RSS, API та вебсайтів за допомогою кастомних парсерів,
* Аналіз змісту новин: класифікація тем, виявлення ключових слів, визначення тону (позитивний, негативний, нейтральний),
* Взаємодія з соцмережами: облік реакцій, коментарів та поширення новин,
* Візуалізація динаміки популярності тем, згадок, емоцій та поведінкових шаблонів,
* Виявлення нетипових активностей і аномалій у потоках новин чи поведінці користувачів.

Технологічний стек:
* Python — обробка даних, NLP-аналіз, виявлення аномалій,
* Node.js — обробка запитів, API-інтерфейси, робота з потоками даних,
* MySQL — збереження новин, користувацької активності та результатів аналізу,
* RabbitMQ — асинхронна обробка даних,
* Docker — контейнеризація сервісів для стабільного деплойменту,
* GitHub Actions — автоматизація CI/CD, тестування, збірка образів,
* OpenAI Platform — використання GPT-моделей для покращеного контент-аналізу та генерації структурованих даних.

Роль у проєкті:
Проект "під ключ" - єдиний full-stack розробник. Aрхітектура системи, інтеграція NLP моделей, побудова пайплайнів обробки даних та автоматизація CI/CD, UI дашборди для візуалізації результатів аналізу.

#python #NodeJS #javascript #MySQL #rabbitmq #openai #nlp #ml #Парсинг #bigdata