Парсер на python
Потрібно збирати дані з сайту, на якому стоїть зараз пасивний захист cloudflare, але переважно те щоб працювало і у разі активного.
Парсер не на запитах, оскільки сайт віддає готовий HTML.
Це повинен бути циклічний стабільний парсер, який буде збирати і записувати в базу даних знайдені дані з періодичністю на годину. Там головна сторінка на якій підсторінки з потрібними даними
-
960 8 2 Доброго дня.
Прописую грамотну архітектуру для простого деплоя з допомою докер і можу упакувати туди все що потрібно, знання bin, bash, zsh на високому рівні, впевнений користувач лінукс.
По стеку технологій, маю великий бекграунд
В парсингу використовую проксі, user-agent та пропис різних headers за потреби, вмію працювати з інспектором, javascript, dom, вмію витягувати данні навіть з ajax та graphql
Основні бібліотеки для парсингу: aiohttp,lxml,bs4,scrapy
Автоматизація web: Selenium
Створення API, на golang та python, GinGo, Flask, FastAPI, RestfulAPI, Swagger
Маю досвід роботи з Google sheets та google cloud console
Вміння працювати з різними базами sql та nosql.
… Рішення капч anticaptcha.
Знання потоків Semaphore, threading, concurrent.future. Вміння працювати з numpy та more_itools а саме chunked для розбиття паралельного скрапінгу на рівномірні потоки, що дуже пришвидшує збір обʼємних даних
Базові знання для будування веб інтерфейсів
Також з корисних навичок, вміння діставати сховані API, та працювати з xml
PyQuery для роботи з html документами
Pyppeteer також для автоматизацій
-
862 14 2 Вітаю! Вже працював з такими сайтами. Готовий виконати.
Будь ласка, надайте сайт, і які саме дані треба парсити.
-
175 2 1 Можу зробити, але не на python. Маю досвід з обходу cloudflare. Точні строки та ціну зможу визничити тільки після того як ознайомлюсь з сайтом
-
645 11 0 Доброго дня, я готовий вирішити вашу задачу, надайте будь ласка посилання на сайт щоб я зміг його проаналізувати
-
888 18 2 1 Доброго дня!
Зацікавив Ваш проєкт, готова взятися за реалізацію якнайшвидше!
Зв'яжіться зі мною для обговорення деталей проєкту.
-
900 12 1 Добрий день, Назаре! Я Junior Python Developer
Готовий виконати ваше замовлення швидко та якісно!
Маю великий досвід в розробці парсерів та різних інших скриптів.
Напишу на Python за допомогою bs4. Отримаєте готовий exe файл та сам код!
Зможу підтримувати проект в майбутньому!
-
4975 41 4 1 Маю великий досвід у розробці парсерів на Python (bs4)
Зроблю все швидко та якісно !
Напишіть в лс.
-
1993 12 0 Добрий вечір!
Маю великий досвід розробки парсерів
Напишіть мені
-
592 5 0 вітаю! виконую парсинг даниг. Можу виконати ваше замовлення.
-
Добрий вечір, дайте посилання на сайт, будь ласка.
-
Купа зайвих слів. Дайте посилання на сайт, а там вже розберемось який там захист
-
Актуальні фриланс-проєкти в категорії Python
Вичислити місцезнаходження втраченого айфону
2500 UAH
Телефон було втрачено день тому, жива локація через FIND MY app вже не оновлюється, телоефон ніби оффлайн, lost mode увімкнено. Потрібно визначити +- точну локацію цього пристрою якиись нестандартними способами - все що було в інтернеті вже спробував - не помагає. Шукаю генія Python, Парсинг даних ∙ 7 годин 21 хвилина тому ∙ 2 ставки |
Створення Тік-ток ферми з генерацією доходу
27 000 UAH
в пошуках людини, яка може написати софт для ферми Тік Ток, щоб ми змогли генерувати трафік, отримувати дохід. Шукаємо готове рішення з повним циклом. Python, Розробка ботів ∙ 7 годин 49 хвилин тому ∙ 4 ставки |
AI Коментуюча Платформа для TikTok та Instagram.Мета проекту Розробити систему, яка дозволяє керувати великою кількістю акаунтів TikTok та Instagram і автоматично публікувати релевантні коментарі під вибраними відео з використанням ШІ. Основний функціонал1. Управління акаунтами Необхідно реалізувати можливість підключення… AI та машинне навчання, Python ∙ 1 день 15 годин тому ∙ 18 ставок |
Побудувути модель калсифікації клієнтів1. Є дані клієнтів в Mongo/SQL (приблизно 20 000 заисів із сирими даними). 2. Необхідно на їх основі побудувати фічі та модель класифікації клієнтв на поведінкові групи. 3. Проект виконати на Python. AI та машинне навчання, Python ∙ 3 дні 9 годин тому ∙ 39 ставок |
ІТ Автоматизація ведення VAT- звітності
10 000 UAH
Необхідно розробити систему для автоматизації перенесення даних про продажі з CRM у бухгалтерську систему Wafeq. Система має імпортувати банківські та платіжні звіти, автоматично звіряти платежі з інвойсами, формувати інвойси для VAT-звітності та мінімізувати ручну роботу.… AI та машинне навчання, Python ∙ 3 дні 14 годин тому ∙ 49 ставок |