Прайс-агрегатор (парсинг и матчинг товаров с интернет-магазинов)
Нужно создать прайс-агрегатор включая парсинг и матчинг товаров. Основная проблема которую хотим решить - получение обновляемого регулярного фида сматченых товаров из разных магазинов.
План-минимум - ежедневно обновляемый фид сматченых товаров.
Структурные блоки прайс-агрегатора:
1. Карточка товара с картинками, описаниями и характеристиками товаров. Саму карточку и характеристики товаров нужно спарсить. Один и тот же товар в разных интернет магазинах может называться по разному и иметь различный артикул. Товар должен матчиться и привязываться к карточке товаров. Внутри карточки видно стоимость и наличие по магазинам и есть возможность сортировки/фильтрации.
2. Категоризатор с деревом категорий. В разных магазинах категории/подкатегории имеют разную структуру и называются по разному, нужно чтобы они парсились и правильно матчились.
3. База товаров, наличия и цен. Цены и наличие товаров должны ежедневно обновляться. В базе может быть 200,000-2,000,000 товаров. Магазинов с которых нужно парсить может быть 1000-3000. Для старта можно ограничиться 100,000 товаров и 50 магазинами.
4. Фильтры. Возможность фильтровать товары по характеристикам. В каждой группе товаров должны быть свои фильтры (для обуви - размер, цвет, материал, бренд, утепление и т.д., а в пылесосе - тип пылесборник, тип уборки, мощность всасывания, насадки, вес и т.д.). Характеристики и фильтры для каждой категории нужно спарсить.
Примеры магазинов для парсинга: mvideo, эльдорадо, связной, lamoda, asos, Перекресток, Остин.
Примеры похожих проектов: hotline.ua, e-katalog.ru, yandex market.
-
Автоматический матчинг — сбор информации с сайтов интернет-магазинов и автоматические сопоставление с вашим ассортиментом.
1. Карточка товара с картинками, описаниями и характеристиками товаров. Саму карточку и характеристики товаров нужно спарсить.
Если у Вас есть свой ассортимент тогда это матчинг. А то что Вы накатали просто парсер. -
Каждый сайт имеет свою структуру и требует написания отдельных правил парсинга. Сайты типа hotline не парсеры, в них люди самостоятельно загружают прайс-листы. Hotline-бот не ходит по сайтам. Вы готовы оплачивать написание такого количества парсеров? А если сайт изменит структуру, то парсер необходимо переписывать. А если забанит?
Разные сайты могут называть разные товары одинаково. Как предполагается их различать?
Количество товаров в вашем проекте не имеет значения для того, кто умеет грамотно организовать структуру. -
То, что вы хотите сделать - понятно. Подход изначально ошибочен. В предидущем посте вам кратко изложили технические сложности. А есть еще финансовые, административные, правовые, сеошные. В общем, нужно либо делать по-другому, либо вложить кучу бобла в разработку ПО и коллектив, и затем, с высокой степенью вероятности, их назад не вернуть. Та работа, которую вы описали - я даже примерно затрудняюсь ее оценить, но это очень дорого. И работать должна команда. Если кто-то возьмется все сделать один и за неделю - это развод.
-
Да Вы что не поняли он хочет искусственный интеллект)))
-
Я готов воплощать любые хотелки клиента, особенно на постоянной основе. Но и чтобы клиент отдавал себе отчёт в том, что его проект будет представлять и как будет реализован, и за какую цену
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Zeskanuje grupy na Telegramie
58 PLN
Należy zeskrobać telegramy grupy i posortować je według folderów. Potrzebne są grupy publiczne i prywatne. Wszystko, co jest w Polsce Parsowanie danych, Tworzenie chatbota ∙ 2 godziny 16 minut temu ∙ 5 ofert |
Badanie segmentu premium KijowaBadanie segmentu premium w Kijowie Potrzebne jest przeprowadzenie poszukiwań otwartych publicznych kanałów komunikacji z przedstawicielami segmentu premium w Kijowie. Co należy zebrać: otwarcie opublikowany email lub telefon do kontaktu, jeśli jest umieszczony w publicznym… Parsowanie danych, Wyszukiwanie i zbieranie informacji ∙ 12 godzin 20 minut temu ∙ 11 ofert |
Wymagany specjalista ds. promocji w Telegramie.
106 PLN
Zadania: zapraszanie rzeczywistych użytkowników z bazy nazw użytkowników do nowych czatów oraz wysyłanie wiadomości do docelowej bazy. Interesuje nas tylko jakościowy ruch i praca z żywą publicznością — wykonawców korzystających z botów, sztucznego zwiększania lub niskiej… Parsowanie danych, Promocja w sieciach społecznościowych (SMM) ∙ 3 dni 6 godzin temu ∙ 8 ofert |
Zbieranie bazy danych B2B firm w Niemczech
149 PLN
Cel: Uzyskanie listy potencjalnych pracodawców (klientów) do wysyłki B2B. Region: Monachium (München) + promień 50 km. Wymagane nisze: Firmy budowlane (Bauunternehmen) Przemysł spożywczy (Lebensmittelhersteller, zakłady mięsne, piekarnie) Logistyka i kompleksy magazynowe… Parsowanie danych, Sprzedaż i generowanie leadów ∙ 3 dni 9 godzin temu ∙ 34 oferty |
Konsultacja dotycząca parsowania subskrybentów kont InstagramWitam. Konieczne jest przeprowadzenie wstępnej oceny możliwości realizacji następującego zadania. Posiadam listę kont na Instagramie. Celem jest uzyskanie danych kontaktowych (w pierwszej kolejności adresów e-mail) użytkowników, którzy obserwują te konta. Wcześniej spotkałem… Parsowanie danych ∙ 7 dni 1 godzina temu ∙ 13 ofert |