Парсинг выдачи

Нужно сделать сервис который будет регулярно раз в неделю скачивать и сохранять в базу определенные страницы с амазона.

Сервис должен стоять на Linux VPS, база данных mysql or postgres. Скачивать каждую страницу нужно с интервалом 5-15 минут.

Этапы работы. Работа будет считаться завершенной когда по все этапам будет финализирована работа:

Нужно сделать сервис который будет регулярно раз в неделю скачивать и сохранять в базу определенные страницы с амазона.

Сервис должен стоять на Linux VPS, база данных mysql or postgres. Скачивать каждую страницу нужно с интервалом 5-15 минут.

Этапы работы. Работа будет считаться завершенной когда по все этапам будет финализирована работа:

1 Выдача рекомендаций на покупку VPS с хорошей цена/качество.

2. Настроить VPS и Установить/настроить докер и вся работа будет вестись внутри докера

3 Установка Базы и всего необходимого на докере. Структура базы примерно выглядит так – номер записи, дата и время скачивания, размер файла, код товара, ссылка на товар, исходный код страницы

4 Разработка непосредственно скрипта

5 Разработка клиента в котором можно производить настройку это веб клиент, или описание как менять код по ssh

6 Деплой

7 Передача кода и настроек

8 Проверка устойчивости работы приложения, т.е. в течении двух недель должно быть скачено не менее 2000 страниц поиска.

9 Расходы на Прокси или IP или подобные вещи для обхода блокировок не дороже чем 10 долл в месяц

Код на амазон идет по ссылке https://www.amazon.com/s?k=bamboo+mat+for+sushi+roll&ref=nb_sb_noss, Я передам весь список асинов запросов когда будет готов  код, а пока для теста – вот эти запросы

bamboo mat for sushi

sushi maker

sushi

                                                                                                                                                                           ,