Разработка парсера
Всем привет! Есть необходимость в создании парсера.
Требуемый функционал:
- Максимально простой интерфейс, но с потенциалом для разгона визуала (сразу прошу подсказать какая должна быть инфраструктура для корректной работы парсера, хостинг, домен, сервер? Предполагается что изначально будет только один пользователь, в потенциале это может быть многопользовательская платформа);
- Должен парсить интернет-магазины по списку товаров (другими словами мы вбиваем список с названиями товаров, а парсер должен найти ссылки на эти товары и выдать в конечном итоге список ссылок с уникальными доменами из определенной географической зоны / либо доменной зоны, ну например ".ua", ".ru", вместе с ссылками он должен будет выгрузить цены на эти товары и статус наличия. При этом нужно предусмотреть возможность вбить вместе с названиями товаров и список доменнов которые нас интересуют. Еще можно предусмотреть поиск не только по названию продукта, но и по артикулу;
- Будет очень хорошо если сможет создавать выгрузку в табличных форматах и очень-очень хорошо если можно будет загрузить свою таблицу с товарами, ценами и статусом наличия (либо xml ссылку) и на ее основе создать список товаров которые требуется найти и провести сравнение между "моим списком" и "спарсеным списком" по ценам и наличию;
- Еще было бы хорошо парсить позицию этих товаров в органической выдаче Гугла/Яндекса относительно выбранного региона и парсить позицию в платной выдаче. В лайтовом формате можно было бы собирать просто статус (есть ли реклама по этому товару или нет);
Прошу прикинуть возможность реализации такого функционала, необходимую ресурсную базу, сроки (хотя бы примерные) ну и конечно стоимость реализации.
Предполагается тестирование такого парсера внутри компании, а потом вывод в коммерческий продукт.
-
152 1 0 Рекомендую поискать подобного рода софт по подписке.
Ибо разработка того чего вы хотите, обойдется в приличные деньги.
Я конечно не истина последней инстанции, но в данной задаче нужно разрабатывать ИИ который бы определял цену и наличие, на каждом магазине.
А это приличные затраты и финансово, потому что low lvl специалист Вам этого не реализует. Ну и время на обучение этого самого ИИ.
При условии что в задаче фигурируют оба поисковика.
Все остальное более чем реализуемо.
Вся заморочка лишь в том что б научить программу определять на страничке продукта где цена, и забирать эту цену.
… Веть разметка на каждом магазине разная.
Структурированных данных в открытом инете нету.
Хотя может и найдеться на фрилансе такой спец, который Вам реализует это дешево и быстро
Но я в этом искренне сомневаюсь, потраченное время и деньги...
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Baza stron na woocommercePotrzebna jest baza ukraińskich stron internetowych sklepów internetowych na woocommerce z kontaktami, które są podane na stronach. Tylko działające strony (wskaźnik: aktualizacja katalogu/treści, działająca domena) Format tabeli - adres strony, numer telefonu, e-mail. Parsowanie danych ∙ 1 dzień 16 godzin temu ∙ 20 ofert |
Stworzyć dashboard w https://airtable.com/ dotyczący efektywności reklamowych kreacji z facebook adsPełnoprawne TZ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Bazy danych i SQL, Parsowanie danych ∙ 3 dni 6 godzin temu ∙ 17 ofert |
Stworzenie pliku Exel do załadowania towarów na strony innych partnerów.Interesuje mnie, aby stworzyć tabelę Excel ze wszystkimi parametrami. Oto strona - https://heiztechnik.com.ua/ A pozycje, które mnie interesują, powinny być przeniesione: Kotły ręczne: 1) TIS UNI 15-95 kW (10) szt 2)TIS HARD 150-500 kW (7) szt Kotły na pelety: 1)TIS PELLET… Parsowanie danych ∙ 3 dni 10 godzin temu ∙ 35 ofert |
Wymagany programista do parsowania katalogu i automatyzacji importu danychSzczegółowe TZ w załączonym dokumencie proszę w odpowiedzi podać orientacyjną cenę i terminy realizacji czy masz doświadczenie w parsowaniu dużych katalogów jakie możliwe trudności lub ograniczenia widzisz w tym zadaniu Bazy danych i SQL, Parsowanie danych ∙ 3 dni 13 godzin temu ∙ 40 ofert |
Znaleźć feed produktowy (Google Merchant XML) dla strony na OpenCart
58 PLN
Konieczne jest znalezienie bezpośredniego linku do działającego pliku z danymi produktowymi (XML) konkurenta dla Google Merchant Center Platforma (CMS): OpenCart / ocStore Znajdź oryginalny plik z danymiWymagania dotyczące wyniku: Roboczy link do pliku XML Python, Parsowanie danych ∙ 3 dni 18 godzin temu ∙ 25 ofert |