Разработка парсера
Всем привет! Есть необходимость в создании парсера.
Требуемый функционал:
- Максимально простой интерфейс, но с потенциалом для разгона визуала (сразу прошу подсказать какая должна быть инфраструктура для корректной работы парсера, хостинг, домен, сервер? Предполагается что изначально будет только один пользователь, в потенциале это может быть многопользовательская платформа);
- Должен парсить интернет-магазины по списку товаров (другими словами мы вбиваем список с названиями товаров, а парсер должен найти ссылки на эти товары и выдать в конечном итоге список ссылок с уникальными доменами из определенной географической зоны / либо доменной зоны, ну например ".ua", ".ru", вместе с ссылками он должен будет выгрузить цены на эти товары и статус наличия. При этом нужно предусмотреть возможность вбить вместе с названиями товаров и список доменнов которые нас интересуют. Еще можно предусмотреть поиск не только по названию продукта, но и по артикулу;
- Будет очень хорошо если сможет создавать выгрузку в табличных форматах и очень-очень хорошо если можно будет загрузить свою таблицу с товарами, ценами и статусом наличия (либо xml ссылку) и на ее основе создать список товаров которые требуется найти и провести сравнение между "моим списком" и "спарсеным списком" по ценам и наличию;
- Еще было бы хорошо парсить позицию этих товаров в органической выдаче Гугла/Яндекса относительно выбранного региона и парсить позицию в платной выдаче. В лайтовом формате можно было бы собирать просто статус (есть ли реклама по этому товару или нет);
Прошу прикинуть возможность реализации такого функционала, необходимую ресурсную базу, сроки (хотя бы примерные) ну и конечно стоимость реализации.
Предполагается тестирование такого парсера внутри компании, а потом вывод в коммерческий продукт.
-
152 1 0 Рекомендую поискать подобного рода софт по подписке.
Ибо разработка того чего вы хотите, обойдется в приличные деньги.
Я конечно не истина последней инстанции, но в данной задаче нужно разрабатывать ИИ который бы определял цену и наличие, на каждом магазине.
А это приличные затраты и финансово, потому что low lvl специалист Вам этого не реализует. Ну и время на обучение этого самого ИИ.
При условии что в задаче фигурируют оба поисковика.
Все остальное более чем реализуемо.
Вся заморочка лишь в том что б научить программу определять на страничке продукта где цена, и забирать эту цену.
… Веть разметка на каждом магазине разная.
Структурированных данных в открытом инете нету.
Хотя может и найдеться на фрилансе такой спец, который Вам реализует это дешево и быстро
Но я в этом искренне сомневаюсь, потраченное время и деньги...
Актуальные фриланс-проекты в категории Веб-программирование
Разработка системы автоматизации публикации вакансий в Facebook-группах для кадрового агентстваИщу специалиста для создания и дальнейшего сопровождения системы публикации вакансий в Facebook-группах.О компании:Мы являемся кадровым агентством в Израиле и занимаемся подбором персонала для предприятий, заводов, складов, производственных компаний и других работодателей по… Веб-программирование, Разработка ботов ∙ 6 часов 7 минут назад ∙ 14 ставок |
Верстальщик для multi-page advertorial сайта (Health Media) — вайб-кодинг, чистый код
6654 UAH
Нужно создать многостраничный сайт в стиле health media, по образцу healthinsider.news. Не просто лендинг — полноценный псевдо-редакционный сайт (advertorial), под который будет литься трафик с Meta Ads. ВАЖНО: задача делается через вайб-кодинг (AI-assisted coding / vibe… HTML и CSS верстка, Веб-программирование ∙ 8 часов 50 минут назад ∙ 41 ставка |
Необходимо сделать редизайн вебсайта и разработать функционал личного кабинета оптового покупателяТехническое заданиеПроектРедизайн корпоративного вебсайта и разработка личного кабинета оптового покупателя, направление - детская одежда.Цель проектаСоздать современную цифровую платформу для B2B и B2C клиентов компании с акцентом на улучшение пользовательского опыта, повышение… Веб-программирование ∙ 11 часов 54 минуты назад ∙ 32 ставки |
Pіm система
10 000 UAH
Необходимо создать PIM систему. Количество товаров — несколько миллионов. Есть несколько поставщиков, которые предоставляют данные в разных форматах: csv, xml, API. Данные ограничены, часто нужно находить характеристики товаров в других источниках и дополнять. Необходимо… Базы данных и SQL, Веб-программирование ∙ 13 часов 38 минут назад ∙ 33 ставки |
Ищем специалиста, который сделает XML/YML файл с товарами для маркетплейсов Rozetka и Kasta.Необходимо подготовить файл с товарами: название, описание, цена, остатки, фото, категории, характеристики, размеры/цвета. Важно: файл должен проходить валидацию Rozetka и корректно загружаться на Kasta. Товар у нас есть в CRM Ситникс и на сайте ХорошопТовара ориентировочно 80… Веб-программирование ∙ 16 часов 44 минуты назад ∙ 27 ставок |