Прайс-агрегатор (парсинг и матчинг товаров с интернет-магазинов)
Нужно создать прайс-агрегатор включая парсинг и матчинг товаров. Основная проблема которую хотим решить - получение обновляемого регулярного фида сматченых товаров из разных магазинов.
План-минимум - ежедневно обновляемый фид сматченых товаров.
Структурные блоки прайс-агрегатора:
1. Карточка товара с картинками, описаниями и характеристиками товаров. Саму карточку и характеристики товаров нужно спарсить. Один и тот же товар в разных интернет магазинах может называться по разному и иметь различный артикул. Товар должен матчиться и привязываться к карточке товаров. Внутри карточки видно стоимость и наличие по магазинам и есть возможность сортировки/фильтрации.
2. Категоризатор с деревом категорий. В разных магазинах категории/подкатегории имеют разную структуру и называются по разному, нужно чтобы они парсились и правильно матчились.
3. База товаров, наличия и цен. Цены и наличие товаров должны ежедневно обновляться. В базе может быть 200,000-2,000,000 товаров. Магазинов с которых нужно парсить может быть 1000-3000. Для старта можно ограничиться 100,000 товаров и 50 магазинами.
4. Фильтры. Возможность фильтровать товары по характеристикам. В каждой группе товаров должны быть свои фильтры (для обуви - размер, цвет, материал, бренд, утепление и т.д., а в пылесосе - тип пылесборник, тип уборки, мощность всасывания, насадки, вес и т.д.). Характеристики и фильтры для каждой категории нужно спарсить.
Примеры магазинов для парсинга: mvideo, эльдорадо, связной, lamoda, asos, Перекресток, Остин.
Примеры похожих проектов: hotline.ua, e-katalog.ru, yandex market.
-
Автоматический матчинг — сбор информации с сайтов интернет-магазинов и автоматические сопоставление с вашим ассортиментом.
1. Карточка товара с картинками, описаниями и характеристиками товаров. Саму карточку и характеристики товаров нужно спарсить.
Если у Вас есть свой ассортимент тогда это матчинг. А то что Вы накатали просто парсер. -
Каждый сайт имеет свою структуру и требует написания отдельных правил парсинга. Сайты типа hotline не парсеры, в них люди самостоятельно загружают прайс-листы. Hotline-бот не ходит по сайтам. Вы готовы оплачивать написание такого количества парсеров? А если сайт изменит структуру, то парсер необходимо переписывать. А если забанит?
Разные сайты могут называть разные товары одинаково. Как предполагается их различать?
Количество товаров в вашем проекте не имеет значения для того, кто умеет грамотно организовать структуру. -
То, что вы хотите сделать - понятно. Подход изначально ошибочен. В предидущем посте вам кратко изложили технические сложности. А есть еще финансовые, административные, правовые, сеошные. В общем, нужно либо делать по-другому, либо вложить кучу бобла в разработку ПО и коллектив, и затем, с высокой степенью вероятности, их назад не вернуть. Та работа, которую вы описали - я даже примерно затрудняюсь ее оценить, но это очень дорого. И работать должна команда. Если кто-то возьмется все сделать один и за неделю - это развод.
-
Да Вы что не поняли он хочет искусственный интеллект)))
-
Я готов воплощать любые хотелки клиента, особенно на постоянной основе. Но и чтобы клиент отдавал себе отчёт в том, что его проект будет представлять и как будет реализован, и за какую цену
-
Current freelance projects in the category Data Parsing
Pricing of auto parts from suppliers for auto parts websites based on Prom.Technical task Project Configuration of filling and synchronization of two Prom.ua stores with suppliers of auto parts. Task It is necessary to implement the loading and updating of products from auto parts suppliers for two online stores on Prom.ua. ⸻ 1. Connecting… Data Parsing ∙ 6 hours 3 minutes back ∙ 31 proposals |
Database parsing
45 USD
Channel requirements: 1. Content language: Russian or Ukrainian (mixed RU/UA content is allowed) 2. Number of subscribers: At least 500 subscribers 3. Activity: The last post published no later than 32 hours ago 4. Comments: Comments must be open under the posts (through a group… Databases & SQL, Data Parsing ∙ 7 hours 23 minutes back ∙ 26 proposals |
Scrape the database and add it to the Telegram chatScrape the database from List.ua and add by numbers to the Telegram chat. The chat is about repairs and interior design. Data Parsing, Customer Support ∙ 1 day back ∙ 27 proposals |
It is necessary to develop a Telegram bot for monitoring cars from auctions in the USA (Copart, IAAI)A Telegram bot is needed for automatic searching and monitoring of "BUY IT NOW" cars at auctions in the USA (Copart, IAAI). The bot should operate automatically and send notifications about new cars that meet the specified filters.Main functionalityFilter settings: 1. Car… Data Parsing, Bot Development ∙ 1 day 8 hours back ∙ 90 proposals |
Parsing products, preparation for import to WPScrape the full catalog of these websites: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ All products need to be combined into one general table for import into WP.… Web Programming, Data Parsing ∙ 4 days 1 hour back ∙ 60 proposals |