Нужно сделать агрегатор с ии компонентами

Здравствуйте, Виктор
Можно ознакомится с сайтами донорами?
Имею опьіт разработки апи и веб проектов на кроссплатформенном .Net
Возможно смогу біьть полезен..

Здравствуйте, Виктор

Я разработчик в сфере ML/DL. Готов выполнить Ваш проект. Напишите мне, обсудим.

Здравствуйте!
С удовольствием возьмусь за ваш проект!
Большой опыт в этом.
Пишите в ЛС и смотрите портфолио

Здравствуйте! Отлично понимаю задачу: уже создавал парсеры, объединяющие дублирующиеся объявления по разным признакам (цена, телефоны, тексты, фото). Смогу собрать агрегатор, где будет API, админка и логика склейки дублей с указанием источников. Опыт в machine learning и web scraping есть, можем настроить обучение модели на примерах и дать интерфейс редактирования. Реализация — быстро, чётко, на результат. Если на связи — обсудим детали.

Да, я могу с этим справиться. Вам нужна внутренняя система, которая извлекает списки из нескольких источников, определяет, какие из них одинаковы, и четко организует их с помощью API. Я выполнял похожую работу, когда данные из разных мест нужно было сгруппировать, очистить и сделать доступными с помощью простой структуры.

Для части сбора я настрою скраперы или использую доступные каналы в зависимости от каждого сайта. Как только данные будут введены, я смогу создать интеллектуальную систему сопоставления, которая отлавливает дубликаты, даже если формулировка или цена немного отличаются. Я могу использовать сочетание правил и моделей ИИ, чтобы сделать это сопоставление максимально точным. Каждый листинг будет включать количество дубликатов, ссылки на каждую исходную версию и сравнение таких вещей, как номера телефонов, цена или описание.

API вернет список всех уникальных листингов и предоставит полную информацию при необходимости. Я также создам панель администратора, где вы сможете просматривать собранные данные, исправлять все, что кажется неправильным, и следить за тем, как работает система. Если хотите, я могу сделать так, чтобы система училась на ваших исправлениях и постепенно улучшалась со временем.

Дайте мне знать, когда вы захотите вникнуть в детали. Я могу набросать схему и составить план, который соответствует тому, как вы хотите двигаться дальше.

Привет,

Похоже, это то, что я могу сделать хорошо. Я создал несколько систем, которые извлекают структурированные и неструктурированные данные, очищают их и делают пригодными для использования через API. Обнаружение дубликатов с помощью ИИ вполне осуществимо и может быть улучшено со временем, если мы соберем примеры, где модель допустила ошибку.

Что касается сбора, я бы написал умные скраперы, которые могут обрабатывать изменения в макете и структуре. Затем я бы использовал сочетание текстового сходства, сопоставления телефонов и цен и, возможно, встраивания, если контент разнообразен. Каждый уникальный листинг будет включать исходные ссылки и подробные различия, такие как цена или описание, если они есть.

API вернет чистые структурированные данные, и я также предоставлю небольшую панель администратора, где вы сможете увидеть, что было собрано, проверить, как обрабатывались дубликаты, и исправить любые ошибки. Эта обратная связь может быть возвращена обратно в модель, если вы хотите.

Дайте мне знать, если вы хотите просмотреть образец данных или небольшой прототип.

Добрый день
с удовольствием помогу вам в реализации задачи создания анрегатора
--------