ШИ агент по сбору и структурированию информации

Добрый день. Готов реализовать.
Уже делал похожие задачи:
- https://gloap.net/news/ - все новости и картинки к ним создаются и публикуются автоматически на основе данных с других сайтов
- https://o-keto.com/news/ - все ТОП-5 исследований и картинки к ним формируются и публикуются автоматически на основе данных из двух других сайтов
- https://o-keto.com/ - ИИ-нутрициолог из RAG-базы на основе Google Docs
- https://gloap.net/ - ИИ-поиск вакансий и ИИ-подбор резюме из RAG-базы
- https://gloap.net/ - ИИ-рекрутер: поиск моряков на внешних сайтах и общение в мессенджерах
- vraki.net - более 100 различных парсеров, 95% контента сайта парсится
- obuvnov.ru - система с более чем 100 млн товаров, которые ежедневно обновляются через фиды
…
Могу собрать MVP под ключ: обход источников, поиск изменений, структурирование данных, сведение и удобная выдача результата. Если есть детальный список источников и сценарий результата, смогу точнее оценить сроки и стоимость.

Показать оригинал

Перевести

Добрый день. Делал похожие сценарии через n8n: сбор данных из источников, AI-анализ контента, отбор полезных сигналов и формирование дайджестов в Telegram и таблицах.

Для этого MVP предложил бы построить поток: мониторинг изменений → AI-фильтрация шума → категоризация → запись результатов → автоматические уведомления.

Могу оперативно подключиться и начать реализацию уже сегодня.

Показать оригинал

Перевести

Здравствуйте!

Описанная вами задача — это прямо мой профиль. У меня около 3 лет опыта в разработке систем автоматизации и ИИ-мониторинга, поэтому я отлично понимаю, как настроить логику отбора так, чтобы нейросеть отсеивала 90% инфошума и извлекала только реальные сигналы.

Недавно реализовал похожий кейс: систему ИИ-скрининга сайтов и RSS-лент, которая анализировала контент по триггерам, категоризировала его и отправляла готовые уведомления.

Как предлагаю сделать:
Построим MVP на базе n8n и OpenAI/Claude API/или другие варианты под бюджет. Свяжем мониторинг нужных сайтов, ИИ-анализ с четким распределением по категориям, автозапись в Google Sheets и мгновенные структурированные уведомления в ваш Telegram-бот. После запуска подготовлю простую инструкцию, чтобы вы могли сами легко добавлять новые сайты.

… Условия:
Сроки: 3–5 дней на запуск рабочего MVP под ключ.

Бюджет: Готов подстроиться под ваши возможности, обсудим финальную цену в личных сообщениях исходя из вашего бюджета и списка сайтов.

Безопасность и результат: можем проект сделать через сейф.

Присылайте список источников в личные сообщения — обсудим детали и сразу начнем!

Показать оригинал

Перевести

Добрый день, Павел! Подобный мониторинг я уже собирал — система ежедневно обходила список сайтов и новостных лент, ловила новые публикации и изменения на страницах, прогоняла текст через OpenAI на короткое резюме и тег (новость, тендер, вакансия, партнерство и т.д.) и складывала все в Google Sheets с утренним дайджестом в Telegram. Главное здесь, как вы и пишете, не сам парсинг, а отсеивание сигнал/шум — это делаю через AI-оценку релевантности по вашим критериям плюс дедупликацию, чтобы в дайджест попадало только достойное внимания, а не каждая мелочь. На MVP взял бы n8n как каркас (так проще всего добавлять новые источники) плюс OpenAI для анализа — 10 источников, таблица с результатами, Telegram-бот и короткая инструкция, как подключать следующие сайты. Ориентировочно за 5 дней под ваш бюджет, а дальше по желанию спокойно дорабатываем до постоянного доработки. Подскажите только — источники это преимущественно обычные сайты и новостные ленты, или есть среди них что-то закрытое с логином?

Показать оригинал

Перевести

Добрый день, Павел, заинтересовал ваш проект, буду рад сотрудничеству.
Имею всесторонний опыт работы с парсингом/скрапингом контента. Работал как с новостными, так и с закрытыми ресурсами.

1. Создавал подобные системы на базе N8N. Полный стек инструментов будет зависеть от степени защиты сайта и объема информации, который нужен.

2. Есть опыт сбора данных из rss, html, визуальных элементов, с поиском целевых урлов на закрытых сайтах, эмуляцией пользователей, использованием прокси.

3. Все процессы внутри N8N.
Инструмент парсинга в зависимости от типа нужных данных - если ничего закрытого, достаточно perplexity с четкими ограничениями. Если что-то более серьезное и защищенное - ScrapingBee и подобные.
… Сценарий для агента, который будет парсить информацию - целевые темы, страницы.
Для анализа полученных данных - gpt4.1-5.4 mini, в зависимости от типа и объема.
Хранение обработанных данных - Google Sheets для тестов, масштабирование на Notion, с созданием БД и категоризацией.
Телеграм бот - через N8N.

4. Бюджет и сроки зависят от типа данных и уровня защиты. Ориентировочная стоимость от 5000 грн.

Готов обсудить детали проекта.
Удачного вам дня!)

Показать оригинал

Перевести

Добрый день!! У меня есть опыт интеграции ИИ инструментов в рабочие системы, есть выполненные проекты, которые можно посмотреть у меня в профиле!! Обращайтесь!!!

Показать оригинал

Перевести

У нас уже есть почти готовое похожее решение для мониторинга источников, которое можно быстро адаптировать и запустить для вашего MVP, можем обсудить детали здесь на бирже, я на связи (:

Ориентировочно MVP на 10 источников я бы оценил от 18 000 грн и 7 рабочих дней.

Мы уже делали похожие системы, где нужно не просто собрать страницы, а отделить полезный сигнал от шума, коротко объяснить суть и передать результат в таблицу или сообщение.

По реализации вижу простой первый этап - n8n или Make для раскладки и интеграций, Apify или легкий парсер для сложных сайтов, OpenAI API для короткого вывода, типа сигнала и приоритета, далее Google Sheets или Airtable и уведомления в Telegram или почту.

Смотрите, тут нюанс - для качества надо будет согласовать 5-7 примеров того, что для вас важный сигнал, а что шум.
…
Уточню 2 момента.

- Источники будут преимущественно новостные страницы, страницы конкурентов или документы PDF тоже нужно отслеживать.
- Нужна лишь таблица и дайджест, или еще статусы на кшталт требует действия, проверено, неактуально.

Похожие примеры Ingello.

- https://business.ingello.com/vorfahr - автоматизация и ИИ-логика для бизнес-процессов, близко к вашей задаче с отбором полезных сигналов.
- https://business.ingello.com/fractal - агентные процессы и работа с повторяющимися сценариями, похоже по подходу к ИИ-классификации.

Главная страница по системам - https://systems-fl.ingello.com/ua

Показать оригинал

Перевести

Добрый день! Именно такие системы и строил — реализуется.
MVP сделаю на n8n + Apify + OpenAI API. Логика такая: регулярная проверка источников, AI-анализ каждого сигнала с классификацией на типы, фильтрация шума и только важное летит в Telegram и записывается в Google Sheets с коротким выводом.
10 источников на старте — нормальный объем для MVP. После сдачи получите инструкцию как самостоятельно добавлять новые сайты без программиста. Если результат устроит — готов к долгосрочному доработке.
Уточните пожалуйста какие именно сайты нужно мониторить и куда удобнее получать дайджест — Telegram или email? Готов обсудить детали.

Показать оригинал

Перевести

Добрый день! У нас есть опыт в разработке систем мониторинга на базе LLM и инструментов парсинга. Реализуем это через Python-агентов с использованием LangChain для структурирования данных и интеграцией с API для автоматизации сбора новостей. Построим надежный MVP, который обеспечит точный мониторинг ваших источников. Готовы обсудить детали технического стека для вашего проекта.

Показать оригинал

Перевести

Добрый день, готов выполнить ваше задание быстро и качественно. У меня большой опыт в создании различных ботов. Напишите в личные сообщения, обсудим детали. С удовольствием помогу)

Показать оригинал

Перевести