Разработка парсера
Всем привет! Есть необходимость в создании парсера.
Требуемый функционал:
- Максимально простой интерфейс, но с потенциалом для разгона визуала (сразу прошу подсказать какая должна быть инфраструктура для корректной работы парсера, хостинг, домен, сервер? Предполагается что изначально будет только один пользователь, в потенциале это может быть многопользовательская платформа);
- Должен парсить интернет-магазины по списку товаров (другими словами мы вбиваем список с названиями товаров, а парсер должен найти ссылки на эти товары и выдать в конечном итоге список ссылок с уникальными доменами из определенной географической зоны / либо доменной зоны, ну например ".ua", ".ru", вместе с ссылками он должен будет выгрузить цены на эти товары и статус наличия. При этом нужно предусмотреть возможность вбить вместе с названиями товаров и список доменнов которые нас интересуют. Еще можно предусмотреть поиск не только по названию продукта, но и по артикулу;
- Будет очень хорошо если сможет создавать выгрузку в табличных форматах и очень-очень хорошо если можно будет загрузить свою таблицу с товарами, ценами и статусом наличия (либо xml ссылку) и на ее основе создать список товаров которые требуется найти и провести сравнение между "моим списком" и "спарсеным списком" по ценам и наличию;
- Еще было бы хорошо парсить позицию этих товаров в органической выдаче Гугла/Яндекса относительно выбранного региона и парсить позицию в платной выдаче. В лайтовом формате можно было бы собирать просто статус (есть ли реклама по этому товару или нет);
Прошу прикинуть возможность реализации такого функционала, необходимую ресурсную базу, сроки (хотя бы примерные) ну и конечно стоимость реализации.
Предполагается тестирование такого парсера внутри компании, а потом вывод в коммерческий продукт.
-
152 1 0 Рекомендую поискать подобного рода софт по подписке.
Ибо разработка того чего вы хотите, обойдется в приличные деньги.
Я конечно не истина последней инстанции, но в данной задаче нужно разрабатывать ИИ который бы определял цену и наличие, на каждом магазине.
А это приличные затраты и финансово, потому что low lvl специалист Вам этого не реализует. Ну и время на обучение этого самого ИИ.
При условии что в задаче фигурируют оба поисковика.
Все остальное более чем реализуемо.
Вся заморочка лишь в том что б научить программу определять на страничке продукта где цена, и забирать эту цену.
… Веть разметка на каждом магазине разная.
Структурированных данных в открытом инете нету.
Хотя может и найдеться на фрилансе такой спец, который Вам реализует это дешево и быстро
Но я в этом искренне сомневаюсь, потраченное время и деньги...
Актуальні фриланс-проєкти в категорії Веб-програмування
Софт для кліків на рекламуПотрібен софт, який буде маскуватися під мобільний пристрій і клікати рекламу яндекс директа в самому пошуковику яндекса по певному сайту. Додатково бажано здійснювати конверсійне дію (на сайті клікати по кнопці: "подзвонити" або "перехід в месенджер"). Упор на… Веб-програмування, Розробка ботів ∙ 34 хвилини тому ∙ 5 ставок |
Розробка простого сайту-каталогу (Чехія)Потрібно створити максимально бюджетний, але повністю функціональний сайт-каталог товарів для чеського ринку. Проєкт короткостроковий (запускається під розпродаж залишків товару), тому в пріоритеті — мінімальна ціна, швидкість реалізації та простота розгортання. Ніяких складних… HTML та CSS верстання, Веб-програмування ∙ 14 годин 19 хвилин тому ∙ 94 ставки |
Налаштування автоматизації: Форма на сайті → WhatsApp-бот → CRM (Make + WATI)Опис проекту: Є сайт компанії з перевезень. Клієнти залишають заявку через форму на сайті — форма приходить на email. Потрібно налаштувати наступну автоматизацію:Етап 1 — Форма → WhatsApp — Коли на пошту приходить нова заявка з сайту, система автоматично витягує ім'я та номер… Веб-програмування, Розробка ботів ∙ 15 годин 33 хвилини тому ∙ 29 ставок |
Хочу навчитись створювати сайти по Ксго/Кс2Потрібен ментор, який навчить мене створити CS2/CS:GO сервер. Хочу через Discord/Zoom покроково розібрати: хостинг/VPS, server.cfg, карти, плагіни, адмінку, бан-систему, Discord, сайт і статистику. Мова: українська або російська. HTML та CSS верстання, Веб-програмування ∙ 21 година 15 хвилин тому ∙ 10 ставок |
Шукаю програміста або вайб-кодера для автоматизації збору даних 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing я випадково на ту ссылку послав Веб-програмування, Парсинг даних ∙ 1 день тому ∙ 31 ставка |