Парсинг сторінок на Python
Потрібно зробити сервіс, який буде регулярно раз на тиждень завантажувати і зберігати в базі певні сторінки з Amazon.Сервіс повинен стояти на Linux VPS, базі даних mysql or postgres.Завантажити кожну сторінку потрібно з інтервалом 5-15 хвилин.Етапи роботи .Робота буде вважатися завершеною, коли по всіх етапах буде завершена робота:
1 Видача рекомендацій на покупку VPS з хорошою ціною / якістю.2 .Налаштувати VPS і Налаштувати/налаштувати докер і вся робота буде проводитися всередині докера
3 Установка Бази і все необхідне на докері.Структура бази приблизно виглядає так - номер запису, дата і час завантаження, розмір файлу, код товару, посилання на товар, початковий код сторінки
4 Розробка прямого скрипта
5 Розвиток клієнта, в якому можна зробити налаштування цього веб-клієнта, або опис як змінювати код за ssh
6 Тепло
7 Передача коду та налаштувань та інструкції/документація про роботу та зміни продукту
8 Перевірка стійкості роботи додатку, тобтоПротягом двох тижнів повинно бути завантажено щонайменше 2000 сторінок відгуків.9 Витрати на Прокси або IP або подібні речі для обігу блокування не коштують більше 10 доларів на місяць
Код на амазон йде за посиланням https://www.amazon.com/product-reviews/B07QFV9ZNC/, останні цифри, це ASIN товару.Я передаю весь список асинів запитів, коли буде готовий код, а поки для тесту - ось ці Асини B07Z64HQ1L, B07HRR4L5R, B01L8050AA, B00OAXPU5I, B07BMR1M5J
Будь ласка, зверніть увагу, що відгуки можуть бути на декількох сторінках і нам потрібен парсінг з усіх сторін - це наприклад друга сторінка для відгуків на цей товар - https://www.amazon.com/product-reviews/B07QFV9ZNC/ref=cm_cr_arp_d_paging_btm_next_2?pageNumber=2
Після того, як проект буде завершено, є кілька подібних замовлень.Наприклад, детально розрізати сторінку і ввести всі дані в БД.Я розглядаю заявки тільки з посиланням на портфель.І з оцінкою часу і ціни на роботу
Відгук замовника про співпрацю з Сергеєм Пасиногою
Парсинг сторінок на PythonКраще вирішено питання, складна задача вирішена
Відгук фрилансера про співпрацю з Valentin L
Парсинг сторінок на PythonСпівробітництвом задоволений!
Задача була поставлена чітко, без підводних каменів.
Зв'язок проходив гладко, без будь-яких недорозумінь.
Рекомендуємо до співпраці.
-
Валентин – добрий день!
З Амазон вже працював, в тому числі з відгуками про товар.
Також існують вже готові системи з роботи з прокси, проходження блокування і т.д.
Одних прокси там не достатньо, необхідна ще правильна робота з куками і юзер агентами.
Я готовий вам допомогти у будь-яких питаннях у цьому проекті, звертайтеся.
-
2267 73 4 4 Привітання проект об'ємний, якщо вам цікавиться якість і небажання витрачати час, а потребує рішення. Напишіть .
-
Обязательно на Python?
-
Valentin L Profitpalm Agency
Сам работаю на Питоне, поэтому и исполнение через
-
Актуальні фриланс-проєкти в категорії Python
AI Коментуюча Платформа для TikTok та Instagram.Мета проекту Розробити систему, яка дозволяє керувати великою кількістю акаунтів TikTok та Instagram і автоматично публікувати релевантні коментарі під вибраними відео з використанням ШІ. Основний функціонал1. Управління акаунтами Необхідно реалізувати можливість підключення… AI та машинне навчання, Python ∙ 12 годин 22 хвилини тому ∙ 13 ставок |
Побудувути модель калсифікації клієнтів1. Є дані клієнтів в Mongo/SQL (приблизно 20 000 заисів із сирими даними). 2. Необхідно на їх основі побудувати фічі та модель класифікації клієнтв на поведінкові групи. 3. Проект виконати на Python. AI та машинне навчання, Python ∙ 2 дні 6 годин тому ∙ 33 ставки |
ІТ Автоматизація ведення VAT- звітності
10 000 UAH
Необхідно розробити систему для автоматизації перенесення даних про продажі з CRM у бухгалтерську систему Wafeq. Система має імпортувати банківські та платіжні звіти, автоматично звіряти платежі з інвойсами, формувати інвойси для VAT-звітності та мінімізувати ручну роботу.… AI та машинне навчання, Python ∙ 2 дні 12 годин тому ∙ 43 ставки |
Інструмент звірки рахунків з банком, картами та бухгалтеромТехнічне завдання: інструмент звірки рахунків з банком, картами та бухгалтеромЗагальна метаПотрібен локальний інструмент (скрипт/невеликий додаток на Python), який запускається вручну раз на 1-2 місяці на моєму комп'ютері і робить звірку між:Рахунками, які я виставив клієнтам і… Python, Десктопні додатки ∙ 3 дні тому ∙ 42 ставки |
Автоматичне публікування відео в соціальні мережі за розкладомТехнічне завдання (ТЗ)Автоматична публікація відео в соціальні мережі за розкладомОпис проектуПотрібен скрипт/бот (Python бажано, або будь-яке інше рішення на ваш вибір — головне стабільність і простота підтримки), який автоматично публікує відео з папки в соціальні мережі та… Python, Розробка ботів ∙ 3 дні 12 годин тому ∙ 59 ставок |