Парсинг сторінок на Python
Потрібно зробити сервіс, який буде регулярно раз на тиждень завантажувати і зберігати в базі певні сторінки з Amazon.Сервіс повинен стояти на Linux VPS, базі даних mysql or postgres.Завантажити кожну сторінку потрібно з інтервалом 5-15 хвилин.Етапи роботи .Робота буде вважатися завершеною, коли по всіх етапах буде завершена робота:
1 Видача рекомендацій на покупку VPS з хорошою ціною / якістю.2 .Налаштувати VPS і Налаштувати/налаштувати докер і вся робота буде проводитися всередині докера
3 Установка Бази і все необхідне на докері.Структура бази приблизно виглядає так - номер запису, дата і час завантаження, розмір файлу, код товару, посилання на товар, початковий код сторінки
4 Розробка прямого скрипта
5 Розвиток клієнта, в якому можна зробити налаштування цього веб-клієнта, або опис як змінювати код за ssh
6 Тепло
7 Передача коду та налаштувань та інструкції/документація про роботу та зміни продукту
8 Перевірка стійкості роботи додатку, тобтоПротягом двох тижнів повинно бути завантажено щонайменше 2000 сторінок відгуків.9 Витрати на Прокси або IP або подібні речі для обігу блокування не коштують більше 10 доларів на місяць
Код на амазон йде за посиланням https://www.amazon.com/product-reviews/B07QFV9ZNC/, останні цифри, це ASIN товару.Я передаю весь список асинів запитів, коли буде готовий код, а поки для тесту - ось ці Асини B07Z64HQ1L, B07HRR4L5R, B01L8050AA, B00OAXPU5I, B07BMR1M5J
Будь ласка, зверніть увагу, що відгуки можуть бути на декількох сторінках і нам потрібен парсінг з усіх сторін - це наприклад друга сторінка для відгуків на цей товар - https://www.amazon.com/product-reviews/B07QFV9ZNC/ref=cm_cr_arp_d_paging_btm_next_2?pageNumber=2
Після того, як проект буде завершено, є кілька подібних замовлень.Наприклад, детально розрізати сторінку і ввести всі дані в БД.Я розглядаю заявки тільки з посиланням на портфель.І з оцінкою часу і ціни на роботу
Відгук замовника про співпрацю з Сергеєм Пасиногою
Парсинг сторінок на PythonКраще вирішено питання, складна задача вирішена
Відгук фрилансера про співпрацю з Valentin L
Парсинг сторінок на PythonСпівробітництвом задоволений!
Задача була поставлена чітко, без підводних каменів.
Зв'язок проходив гладко, без будь-яких недорозумінь.
Рекомендуємо до співпраці.
-
Валентин – добрий день!
З Амазон вже працював, в тому числі з відгуками про товар.
Також існують вже готові системи з роботи з прокси, проходження блокування і т.д.
Одних прокси там не достатньо, необхідна ще правильна робота з куками і юзер агентами.
Я готовий вам допомогти у будь-яких питаннях у цьому проекті, звертайтеся.
-
2267 73 4 4 Привітання проект об'ємний, якщо вам цікавиться якість і небажання витрачати час, а потребує рішення. Напишіть .
-
Обязательно на Python?
-
Valentin L Profitpalm Agency
Сам работаю на Питоне, поэтому и исполнение через
-
Актуальні фриланс-проєкти в категорії Python
Розробка програмного забезпечення з ШІПотрібно розробити програмне забезпечення для автоматичного виявлення, захоплення та супроводження об'єкта за допомогою відеокамери та поворотного механізму.Вихідні дані: Відеокамера з оптикою. Поворотний пристрій по двох осях (азимут/кут місця). Сервоприводи з керуванням через… AI та машинне навчання, Python ∙ 9 годин 33 хвилини тому ∙ 10 ставок |
ТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬГОЛОВНА ЦІЛЬ Створити стабільний преміальний продукт, який: генерує максимально якісні персональні пісні; не вигадує факти про клієнта; працює стабільно під навантаженням; легко масштабується; дозволяє аналізувати та… Python, Розробка ботів ∙ 10 годин 38 хвилин тому ∙ 27 ставок |
Спеціаліст з Excel / автоматизації процесів (Excel + бажано програмування)Шукаємо спеціаліста з ПРОСУНУТИМИ знаннями Excel для оптимізації існуючого файлу та автоматизації процесів. Буде великою перевагою, якщо ви також маєте навички програмування / VBA / Power Query / Power Automate або досвід створення складної логіки в Excel. Завдання проекту Є… Python, Бази даних та SQL ∙ 13 годин 37 хвилин тому ∙ 31 ставка |
Автоматизація процесів через API та PythonНижче описав поточний процес і те, до якого результату хотілося б прийти. Також прикладаю файли реального процесу, щоб краще зрозуміти, як він виглядає в реальності Поточний процес Зараз весь процес виконується вручну: завантаження/вивантаження файлів, перенесення даних… AI та машинне навчання, Python ∙ 14 годин 38 хвилин тому ∙ 39 ставок |
Потрібно створити бот в тг для оплати підписки.
2000 UAH
Потрібно створити бот в телеграмі де користувач зможе оформити підписку на доступ до веб камер котрі знгаходяться у дворі. Організувати в боті оплату двух видів підписок (на місяць і на один день). Бот повинен автоматично перевірити оплату і після видавати посилання-доступу Python, Розробка ботів ∙ 1 день 3 години тому ∙ 76 ставок |