Розробка парсера/скрапера на Python + Selenium
Розробити автоматизований парсер на Python + Selenium для збору даних про рекламні оголошення з сайтів:
Отримані дані необхідно агрегувати, підрахувати кількість унікальних посилань, сформувати рейтинг популярності рекламованих сторінок і передати результати в Notion через API.
Ми надамо доступ до існуючої кодової бази, яка вже реалізує базові функції авторизації, парсингу та інтеграції з Notion API для AdHeart.me. Код виконує інші задачі, однак може бути використаний як основа або для спрощення розробки поточного парсера.
Детальне ТЗ:
https://www.notion.so/sirka-cpa/Python-Selenium-209a01e1b37180749184c3d30ca4e97e?source=copy_link
По AdHeart.me код у нас практично готовий, потрібно лише доопрацювати його для отримання потрібних даних. (Зараз він витягує посилання на відео, а нам потрібні посилання на рекламовані воронки)
По AdHeart.me код у нас практически готов, нужно только доработать его для получения нужных данных. (Сейчас он вытягивает ссылки на видео, а нам нужны ссылки на рекламируемые воронки)
Додатки 5
Відгук замовника про співпрацю з Oleh Ovchynnykov
Розробка парсера/скрапера на Python + SeleniumМи недооцінили складність проекту. І я, як замовник, і Олег, як фахівець. В результаті проект замість 5 днів виконувався 2 місяці.
Однак, незважаючи ні на що, Олег довів справу до кінця і зміг надати робочий парсер.
Крім строків, єдине, на що можу поскаржитися, це уважність і дотримання наданого ТЗ. Після 50 разів я вже втратив рахунок, скільки мені доводилося перевіряти парсер і повертати його на доопрацювання.
Відгук фрилансера про співпрацю з Kirill Ivannyk
Розробка парсера/скрапера на Python + SeleniumДобрий закачик
Доведіть проект до кінця
Буду радий співпраці
-
5 днів13 307 UAH5 днів13 307 UAH
Привіт Кириле,
Я ретельно ознайомився з вашими технічними характеристиками та останніми оновленнями щодо коду AdHeart.me. Розуміючи, що ця частина проекту тепер потребує доопрацювання, а не створення з нуля, я можу запропонувати більш ефективний графік робіт.
Цей проект ідеально підходить для моїх навичок. Як сертифікований програміст Python за програмою PCAP™ з досвідом у автоматизації Selenium і, що важливо, Docker, я можу надати надійне, контейнеризоване рішення, яке вам потрібно.
Я впевнений у здатності вирішити всі конкретні технічні завдання, зокрема:
Модифікація існуючого коду AdHeart.me для парсингу посилань на воронки.
… Реалізація нового парсера для Facebook Ads Library з безкінечною прокруткою.
Структурування даних за допомогою Pandas та безшовна інтеграція з API Notion.
Доставка чистого, оптимізованого образу Docker для легкого розгортання, відповідно до ваших нефункціональних вимог.
Моє портфоліо доступне на www.revazgoguadze.com. Я готовий надати високоякісний, надійний інструмент для вашої команди.
З найкращими побажаннями,
Revaz Goguadze
-
Переможець4 дні11 090 UAH
3482 50 0 Переможець4 дні11 090 UAHДобрий день
готовий виконати цю роботу
Пишіть, буду радий допомогти
Виконаю ваше завдання, вже спілкувалися з вами
-
1 день17 743 UAH
3893 24 0 1 день17 743 UAHДобрий день,
Я готовий взятися за розробку автоматизованого парсера. Маю досвід роботи з Python і Selenium, а також уміння інтегрувати дані в Notion через API. З урахуванням наданого коду і необхідності доопрацювання для AdHeart.me, вважаю, що можу ефективно адаптувати існуючі функції і розробити нові для успішного виконання проекту.
Мій рейт 16$ за годину.
-
3 дні13 307 UAH
192 1 0 3 дні13 307 UAHЗдравствуйте. Маю великий досвід розробки ботів для парсингу на Python з використанням Selenium. Роботу можна поділити на 3 етапи:
1) Парсинг даних з сайтів (Selenium, BeautifulSoup)
2) Обробка та сортування (Pandas)
3) Відправка результату в Notion
Готовий обговорити з вами кожен крок, щоб мати спільне розуміння рішення вашого завдання. Буду радий допомогти, пишіть!
P.S Мова спілкування на ваш розсуд (російська, англійська)
-
4 дні17 743 UAH
2558 37 0 4 дні17 743 UAHПривіт!
З задоволенням візьмуся за ваш проект!
Мій великий досвід у цьому.
Пишіть у ЛС і дивіться портфоліо
-
7 днів22 179 UAH
1616 8 0 7 днів22 179 UAHЗдравствуйте
Я розробник у сфері ML/DL та Web Scraping. Готовий виконати Ваш проект. Напишіть мені, обговоримо.
-
11 днів13 307 UAH
720 6 1 11 днів13 307 UAHПереходя до суті проекту:
Планую писати власний механізм парсингу, механізм авторизації доопрацювати з існуючого репозиторію.
Коротко описуючи алгоритм роботи:
1 - Зв’язок із хмарним сервером і перевірка session overflow для AdHeart.me (необхідно уточнити деталі щодо пункту 12.5 у ТЗ);
2 - Перевірка підключення до вказаних сайтів;
3 - Збір інформації з таблиць Notion
3 - Парсинг сайтів за алгоритмом, вказаним у ТЗ. Вивантаження попередніх результатів у кеш (Redis);
4 - Обробка та агрегація даних;
… 5 - Вивантаження у локальну базу (планується використовувати PostgreSQL, також враховуються ваші переваги)
6 - Перевірка доступності Notion API
7 - Вивантаження з бази у Notion
Планую писати дві версії репозиторію (prod & dev) для спрощення розгортання та контейнеризації. Писатиму на Python 3.12 (можливо 3.13)
Передбачувана структура проекту:
-d services (основні алгоритми та кастомні бібліотеки)
--d scrape
---Facebook (функції та модулі для взаємодії з Facebook)
---AdHeart (функції та модулі для взаємодії з AdHeart)
---scrape_main (основний скрипт для парсингу)
--d Notion
---NotionAPI (взаємодія з Notion)
-d models (моделі для БД)
-d db
--postgresql (основна база)
--redis (кеш)
-d .venv (внутрішнє середовище)
-d requirements (папка з .txt файлами з залежностями)
- pyproject.toml (конфігураційний файл проекту)
- docker-compose
- README.md
- .env (змінні середовища)
- main.py (головний файл, диригент проекту)
Необхідно уточнити тонкі деталі та погодити порядок виконання і контроль. Також хочу обговорити етапи проекту та строки їх реалізації.
-
7 днів22 179 UAH
93843 1268 1 10 7 днів22 179 UAHЗдравствуйте.Є великий досвід у розробці парсерів.Обов’язково парсити FB Ads?Вони мають API
-
5 днів11 090 UAH
1412 4 0 5 днів11 090 UAHПривіт. У мене є практичний досвід роботи з Python, Selenium, агрегацією даних та інтеграціями API, включаючи Notion. Я готовий адаптуватися до наданої кодової бази та розширити її відповідно до поточних вимог ефективно. Я зосереджуюся на стабільності, підтримуваності та чистій реалізації.
Буду радий обговорити технічні деталі більш детально.
-
15 днів11 090 UAH
8867 60 0 1 15 днів11 090 UAHПривіт! Ми — компанія SolidWay і готові допомогти з розробкою автоматизованого парсера на Python з використанням Selenium. Ми маємо обширний досвід у розробці подібних рішень і впевнені, що зможемо створити ефективний парсер для збору даних про рекламні оголошення.
Наша команда вже працювала з інтеграцією API та парсингом даних, тому маємо необхідну експертизу для виконання поставлених завдань. Ми готові використовувати надану існуючу кодову базу і доопрацювати її для досягнення ваших цілей.
Обговоримо деталі проекту, щоб визначити, який обсяг робіт потрібен і як це співвідноситься з вашими очікуваннями. Також уточнимо терміни і бюджет після більш глибокого обговорення задачі.
-
14 днів10 646 UAH
1850 46 3 14 днів10 646 UAHПривіт!
Я зацікавлений у вашому проекті. Маю великий досвід у автоматизації та емуляції дій користувача (JavaScript, Selenium, Playwright), асинхронному та багатопоточному парсингу (Requests, WebSockets, HTTPX, BS4), обробці інформації (Openpyxl, JSON, MySQL, MongoDB, Google Sheets API), а також у розробці телеграм-ботів різної складності (Telethon, Pyrogram, Aiogram).
Зв’яжіться зі мною, щоб обговорити деталі та терміни виконання проекту.
Актуальні фриланс-проєкти в категорії Python
Багатосторінковий HTML-шаблон веб-сайту для онлайн-ставок та парсинг API матчів (
1109 UAH
|
Створити бот в телеграм (кабінет продавця)
700 UAH
Всім привіт Потрібен особистий кабінет користувача в форматі бота в телеграм Після запуску та проходження опитування, під користувача створюється особистий кабінет (його допускає в систему на подальші кнопки) Щоб до кожного хто зареєструвався висвічувалося в окремому меню… Python, Розробка ботів ∙ 1 день 6 годин тому ∙ 93 ставки |
Знайти товарний фід (Google Merchant XML) для сайту на OpenCart
700 UAH
Необхідно знайти пряме посилання на діючий товарний фід (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Знайти оригінальний фідВимоги до результату: Робоче посилання на XML-файл Python, Парсинг даних ∙ 1 день 16 годин тому ∙ 21 ставка |
Розробка Тік-Ток ферми (контент-завод)Необхідно розробити систему для централізованого управління кількома TikTok-акаунтами з автоматичною публікацією контенту, використанням індивідуальних проксі та імітацією природної активності акаунтів. Функціональні вимоги1. Управління акаунтами Додавання та видалення… Python, Розробка ботів ∙ 2 дні 4 години тому ∙ 19 ставок |
Покращити роботу Claude Code та роботу з написанням програмного забезпеченняЗараз розробляю СРМ та Аналітику, софт. Роблю через Клод Код, але розумію, що результати не найкращі в плані змін. Є 2 задачі - Потрібно допомогти зробити пресет по навичкам, мд і так далі, щоб покращити якість. Взяти перевірені, з якими працювали, а не з інтернету перші. - В… AI та машинне навчання, Python ∙ 2 дні 10 годин тому ∙ 23 ставки |