Огляд проекту для спеціаліста зі збору даних та автоматизації
Ми шукаємо кваліфікованого розробника для створення автоматизованої системи, яка збирає інформацію про автомобілі з захищеної паролем веб-сторінки на основі критеріїв з Google-таблиці та публікує результати на вказану платформу.
Ключові обов'язки
Розробити скрипт для читання критеріїв пошуку (марка, модель, клас, рік) з Google-таблиці.
Реалізувати автоматичний вхід на веб-сайт. Створити рішення для веб-скрапінгу для пошуку та вилучення інформації про автомобілі на основі наданих критеріїв.
Розробити функціонал для публікації зібраної інформації на вказану платформу або оновлення Google-таблиці з результатами.
Налаштувати весь процес для автоматичного запуску за розкладом.
Необхідні навички та досвід
Впевненість у програмуванні на Python
Досвід роботи з бібліотеками для веб-скрапінгу (наприклад, Selenium, Playwright або BeautifulSoup)
Знайомство з API Google Sheets
Досвід у автоматизації веб-взаємодій, включаючи роботу з входами та управління сеансами
Знання найкращих практик для веб-скрапінгу, включаючи етичні аспекти та обмеження швидкості
Можлисть реалізувати надійне оброблення помилок та ведення журналу
Досвід у плануванні автоматизованих завдань
Бажані навички
Знайомство з термінологією автомобільної галузі
Досвід скрапінгу японських веб-сайтів
Знання технік розв'язання CAPTCHA
Результати проекту
Повнофункціональний скрипт на Python, який виконує всі кроки процесу автоматизації
Документація щодо налаштування та запуску скрипту, включаючи всі необхідні API-дані
Посібник щодо того, як змінити скрипт для різних критеріїв автомобілів або веб-сайтів у майбутньому
Додаткові зауваження
Успішний кандидат повинен бути готовий підписати угоду про нерозголошення через характер оброблюваних даних.
Рішення повинно бути розроблене з урахуванням масштабованості та підтримуваності.
Очікується регулярне оновлення та комунікація протягом процесу розробки.
Будь ласка, включіть у свою заявку свій досвід у схожих проектах та ваш підхід до вирішення потенційних викликів, таких як зміни структури веб-сайту або заходи проти скрапінгу.
-
1 день4493 UAH1 день4493 UAH
Добрий день. Завдання, вказане вище, привернуло мою увагу, і я готовий брати участь у процесі його виконання. Я досвідчений розробник на Python з великими знаннями бібліотеки Selenium, яка, ймовірно, буде основною у майбутньому коді. Я виконав безліч завдань від інших клієнтів, використовуючи цю бібліотеку, а також маю цілий ряд менших програм, які я написав для особистого використання. Крім того, я володію навичками обхіду різних типів CAPTCHA, керування сеансами браузера, кукісами та проксі. Я вважаю, що володію всіма необхідними навичками для цієї роботи. Я зможу оцінити завдання лише після дослідження конкретного веб-сайту. Чекаю на вашу відповідь.
Буду радий співпраці! -
3 дні4493 UAH
814 14 2 3 дні4493 UAHПривіт!
Я дуже зацікавлений у вашому проєкті! У мене є великий досвід у програмуванні на Python та веб-скрапінгу, і я багато працював з Playwright. Ось кілька моїх попередніх проєктів (українською), які є відповідними тут:
https://freelancehunt.com/project/napisat-skript/1304561.html
https://freelancehunt.com/project/bot-dlya-marketpleysa/1369556.html
Я виконував багато роботи з автоматизованим входом, вилученням даних та використанням API Google Sheets. Я також вмію керувати взаємодією з веб-сайтами та забезпечувати безперебійну роботу з гарною обробкою помилок та логуванням.
З нетерпінням чекаю на ваші подальші вказівки щодо проєкту, особливо щодо веб-сайту, з яким ми будемо працювати.
Чекаю на вашу відповідь!
-
14 днів31 448 UAH
956 14 0 14 днів31 448 UAHПривіт. Багато років займаюся автоматизацією процесів в Інтернеті. Вирішую завдання підвищеної складності, завдання, що потребують взаємодії декількох систем. Великий досвід скрапінгу, подолання захисту і рекаптч. Для точної оцінки проекту потрібні деталі, наразі оцінка умовна.
-
7 днів22 463 UAH
1993 12 0 7 днів22 463 UAHДоброго дня
Маю великий досвід розробки автоматизаційних скриптів дял збору інформації, в тому числі з можливістю авторизації в аккаунтах
Напишіть мені
Актуальні фриланс-проєкти в категорії Python
Налаштування двосторонньої інтеграції WhatsApp з Odoo CRMВітаю! Шукаємо спеціаліста для реалізації технічного завдання з налаштування двосторонньої інтеграції месенджера WhatsApp з CRM-системою Odoo. ⚠️ Важливе технічне уточнення:Офіційний WhatsApp Business API (WABA) не розглядається. Необхідно впровадити стабільне «сіре» рішення… Python, Веб-програмування ∙ 8 годин 53 хвилини тому ∙ 19 ставок |
Парсинг даних через мобільне APIШукаю людину з досвідом парсингу даних через мобільне API, для парсингу e-commerce, rozetka та аналоги Завдання: 1. Перехоплення трафіку мобільного додатку (Android) налаштування проксі, аналіз запитів 2. Визначення потрібних API endpoints, куди йдуть запити, які headers… Python, Парсинг даних ∙ 2 дні 5 годин тому ∙ 30 ставок |
Знайти товарний фід (Google Merchant XML) для сайту на OpenCart
700 UAH
Необхідно знайти пряме посилання на діючий товарний фід (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Знайти оригінальний фідВимоги до результату: Робоче посилання на XML-файл Python, Парсинг даних ∙ 7 днів 14 годин тому ∙ 29 ставок |
Розробка Тік-Ток ферми (контент-завод)Необхідно розробити систему для централізованого управління кількома TikTok-акаунтами з автоматичною публікацією контенту, використанням індивідуальних проксі та імітацією природної активності акаунтів. Функціональні вимоги1. Управління акаунтами Додавання та видалення… Python, Розробка ботів ∙ 8 днів 2 години тому ∙ 22 ставки |
Покращити роботу Claude Code та роботу з написанням програмного забезпеченняЗараз розробляю СРМ та Аналітику, софт. Роблю через Клод Код, але розумію, що результати не найкращі в плані змін. Є 2 задачі - Потрібно допомогти зробити пресет по навичкам, мд і так далі, щоб покращити якість. Взяти перевірені, з якими працювали, а не з інтернету перші. - В… AI та машинне навчання, Python ∙ 8 днів 8 годин тому ∙ 28 ставок |