Разработка парсера
Всем привет! Есть необходимость в создании парсера.
Требуемый функционал:
- Максимально простой интерфейс, но с потенциалом для разгона визуала (сразу прошу подсказать какая должна быть инфраструктура для корректной работы парсера, хостинг, домен, сервер? Предполагается что изначально будет только один пользователь, в потенциале это может быть многопользовательская платформа);
- Должен парсить интернет-магазины по списку товаров (другими словами мы вбиваем список с названиями товаров, а парсер должен найти ссылки на эти товары и выдать в конечном итоге список ссылок с уникальными доменами из определенной географической зоны / либо доменной зоны, ну например ".ua", ".ru", вместе с ссылками он должен будет выгрузить цены на эти товары и статус наличия. При этом нужно предусмотреть возможность вбить вместе с названиями товаров и список доменнов которые нас интересуют. Еще можно предусмотреть поиск не только по названию продукта, но и по артикулу;
- Будет очень хорошо если сможет создавать выгрузку в табличных форматах и очень-очень хорошо если можно будет загрузить свою таблицу с товарами, ценами и статусом наличия (либо xml ссылку) и на ее основе создать список товаров которые требуется найти и провести сравнение между "моим списком" и "спарсеным списком" по ценам и наличию;
- Еще было бы хорошо парсить позицию этих товаров в органической выдаче Гугла/Яндекса относительно выбранного региона и парсить позицию в платной выдаче. В лайтовом формате можно было бы собирать просто статус (есть ли реклама по этому товару или нет);
Прошу прикинуть возможность реализации такого функционала, необходимую ресурсную базу, сроки (хотя бы примерные) ну и конечно стоимость реализации.
Предполагается тестирование такого парсера внутри компании, а потом вывод в коммерческий продукт.
-
2 days11 USD
152 1 0 2 days11 USD
Рекомендую поискать подобного рода софт по подписке.
Ибо разработка того чего вы хотите, обойдется в приличные деньги.
Я конечно не истина последней инстанции, но в данной задаче нужно разрабатывать ИИ который бы определял цену и наличие, на каждом магазине.
А это приличные затраты и финансово, потому что low lvl специалист Вам этого не реализует. Ну и время на обучение этого самого ИИ.
При условии что в задаче фигурируют оба поисковика.
Все остальное более чем реализуемо.
Вся заморочка лишь в том что б научить программу определять на страничке продукта где цена, и забирать эту цену.
… Веть разметка на каждом магазине разная.
Структурированных данных в открытом инете нету.
Хотя может и найдеться на фрилансе такой спец, который Вам реализует это дешево и быстро
Но я в этом искренне сомневаюсь, потраченное время и деньги...
Current freelance projects in the category Data Parsing
Data parsing through mobile APILooking for a person with experience in data parsing through mobile API, for parsing e-commerce, rozetka and similar sites. Tasks: 1. Intercepting traffic from the mobile application (Android), setting up a proxy, analyzing requests. 2. Identifying the necessary API endpoints… Python, Data Parsing ∙ 17 hours 50 minutes back ∙ 20 proposals |
Looking for a programmer or vibe coding Automation scraping data 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing I accidentally sent that link Web Programming, Data Parsing ∙ 20 hours 11 minutes back ∙ 30 proposals |
Create a dashboard in https://airtable.com/ for the performance of advertising creatives from Facebook ads.Full specification https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Databases & SQL, Data Parsing ∙ 5 days 14 hours back ∙ 19 proposals |
Creation of an Excel file for uploading products to the websites of other partners.I am interested in creating an Excel table with all parameters. Here is the website - https://heiztechnik.com.ua/ And the positions I am interested in to be transferred: Manual boilers: 1) TIS UNI 15-95 kW (10) pcs 2)TIS HARD 150-500 kW (7) pcs Pellet boilers: 1)TIS PELLET… Data Parsing ∙ 5 days 18 hours back ∙ 37 proposals |
A developer is required for parsing the catalog and automating data import.Detailed technical specifications in the attached document Please indicate the estimated cost and timeline in your response Do you have experience working with parsing large catalogs What possible difficulties or limitations do you see in this task Databases & SQL, Data Parsing ∙ 5 days 21 hours back ∙ 42 proposals |
Kyiv