Парсер товаров из магазинов

Data Parsing — incorrectly specified categories?

Нужен парсер который будет собирать все товары из разных магазинов и записывать их в бд.

В будущем нужно будет эти данные вывести на сайт.

Либо сделать сайт который будет парсить данные с других магазинов, сразу же как только клиент нажмет на кнопку поиска.

Предлагайте наилучший вариант или свои варианты.

Напишите в своем сообщение "Прочитал", чтобы я понял что это не спам.

Update #1 from 23 September 2020

Магазинов может быть любое количество, в будущем придется их добавлять, по этому придется писать масштабируемый проект.

Proposals 9 Rejected 1 Discussions 2

Tatyana Kornushkova

Winning proposal

0 0

Projects -
Rating -
Rating 16

Budget: 600 RUB Deadline: 30 days

Прочитал.
Добрый день!
Я начинающий Java разработчик и новичек на данном сайте. Готова выполнить Ваше задание бесплатно в обмен на положительный отзыв (при условии что задание будет соответствовать Вашим ожиданиям) с целью приобретения опыта. Напишите, пожалуйста, какой сайт нужно парсить и мы сможем обсудить когда задание будет готово. Буду рада сотрудничеству!

Anuar Borangaziyev

1 0

Projects -
Rating -
Rating 192

Budget: 1000 RUB Deadline: 2 days

Прочитал. Здравствуйте, имею опыт парсинга, а также работой с записями в бд. Насчет сроков и цены: все будет зависеть от сайтов и их количества. Буду рад вам помочь! Пишите в лс.

Elchin Gurbanli

0 0

Projects -
Rating -
Rating 104

Budget: 1000 RUB Deadline: 15 days

Прочитал!

Здравствуйте, я Эльчин, MERN full stack разработчик с двумя годами опыта работы на backend'е и годом опыта работы над фронтэндом. Недавно завершил один из своих side-project'ов по веб-скрапингу на Node.js (https://github.com/elchingurban/instascraper). Также есть опыт работы с NoSQL Database (MongoDB + Mongoose) и написанием REST/CRUD API.
На данный момент пишу веб скрапер для Airbnb на puppeteer + cheerio (npm packages for browser automation).

Я уверен, что никаких проблем с проектом и коммуникацией не возникнет.

Прошу заметить, что скиллы и проекты не показывают полностью мой стек знаний и возможностей. Тем более-то есть у меня опыт работы над инстаграм парсером без использования Instagram API.

А что касательно реализации проекта: используя CORS интегрировать API, который будет выводить как JSON объект спарсенные данные через прокси(возможно, и прокси не нужны будут), с фронтом на React.js

Резюме: https://rb.gy/qojqoq
Github: https://github.com/elchingurban
Буду ждать вашего ответа!