Парсер на python
Потрібно збирати дані з сайту, на якому стоїть зараз пасивний захист cloudflare, але переважно те щоб працювало і у разі активного.
Парсер не на запитах, оскільки сайт віддає готовий HTML.
Це повинен бути циклічний стабільний парсер, який буде збирати і записувати в базу даних знайдені дані з періодичністю на годину. Там головна сторінка на якій підсторінки з потрібними даними
-
960 8 2 Доброго дня.
Прописую грамотну архітектуру для простого деплоя з допомою докер і можу упакувати туди все що потрібно, знання bin, bash, zsh на високому рівні, впевнений користувач лінукс.
По стеку технологій, маю великий бекграунд
В парсингу використовую проксі, user-agent та пропис різних headers за потреби, вмію працювати з інспектором, javascript, dom, вмію витягувати данні навіть з ajax та graphql
Основні бібліотеки для парсингу: aiohttp,lxml,bs4,scrapy
Автоматизація web: Selenium
Створення API, на golang та python, GinGo, Flask, FastAPI, RestfulAPI, Swagger
Маю досвід роботи з Google sheets та google cloud console
Вміння працювати з різними базами sql та nosql.
… Рішення капч anticaptcha.
Знання потоків Semaphore, threading, concurrent.future. Вміння працювати з numpy та more_itools а саме chunked для розбиття паралельного скрапінгу на рівномірні потоки, що дуже пришвидшує збір обʼємних даних
Базові знання для будування веб інтерфейсів
Також з корисних навичок, вміння діставати сховані API, та працювати з xml
PyQuery для роботи з html документами
Pyppeteer також для автоматизацій
-
838 14 2 Вітаю! Вже працював з такими сайтами. Готовий виконати.
Будь ласка, надайте сайт, і які саме дані треба парсити.
-
175 2 1 Можу зробити, але не на python. Маю досвід з обходу cloudflare. Точні строки та ціну зможу визничити тільки після того як ознайомлюсь з сайтом
-
645 11 0 Доброго дня, я готовий вирішити вашу задачу, надайте будь ласка посилання на сайт щоб я зміг його проаналізувати
-
888 18 2 1 Доброго дня!
Зацікавив Ваш проєкт, готова взятися за реалізацію якнайшвидше!
Зв'яжіться зі мною для обговорення деталей проєкту.
-
900 12 1 Добрий день, Назаре! Я Junior Python Developer
Готовий виконати ваше замовлення швидко та якісно!
Маю великий досвід в розробці парсерів та різних інших скриптів.
Напишу на Python за допомогою bs4. Отримаєте готовий exe файл та сам код!
Зможу підтримувати проект в майбутньому!
-
4987 41 4 1 Маю великий досвід у розробці парсерів на Python (bs4)
Зроблю все швидко та якісно !
Напишіть в лс.
-
1993 12 0 Добрий вечір!
Маю великий досвід розробки парсерів
Напишіть мені
-
592 5 0 вітаю! виконую парсинг даниг. Можу виконати ваше замовлення.
-
Добрий вечір, дайте посилання на сайт, будь ласка.
-
Купа зайвих слів. Дайте посилання на сайт, а там вже розберемось який там захист
-
Актуальні фриланс-проєкти в категорії Python
Розробка програмного забезпечення з ШІПотрібно розробити програмне забезпечення для автоматичного виявлення, захоплення та супроводження об'єкта за допомогою відеокамери та поворотного механізму.Вихідні дані: Відеокамера з оптикою. Поворотний пристрій по двох осях (азимут/кут місця). Сервоприводи з керуванням через… AI та машинне навчання, Python ∙ 15 хвилин тому ∙ 3 ставки |
ТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬГОЛОВНА ЦІЛЬ Створити стабільний преміальний продукт, який: генерує максимально якісні персональні пісні; не вигадує факти про клієнта; працює стабільно під навантаженням; легко масштабується; дозволяє аналізувати та… Python, Розробка ботів ∙ 1 година 20 хвилин тому ∙ 12 ставок |
Спеціаліст з Excel / автоматизації процесів (Excel + бажано програмування)Шукаємо спеціаліста з ПРОСУНУТИМИ знаннями Excel для оптимізації існуючого файлу та автоматизації процесів. Буде великою перевагою, якщо ви також маєте навички програмування / VBA / Power Query / Power Automate або досвід створення складної логіки в Excel. Завдання проекту Є… Python, Бази даних та SQL ∙ 4 години 19 хвилин тому ∙ 22 ставки |
Автоматизація процесів через API та PythonНижче описав поточний процес і те, до якого результату хотілося б прийти. Також прикладаю файли реального процесу, щоб краще зрозуміти, як він виглядає в реальності Поточний процес Зараз весь процес виконується вручну: завантаження/вивантаження файлів, перенесення даних… AI та машинне навчання, Python ∙ 5 годин 20 хвилин тому ∙ 29 ставок |
Потрібно створити бот в тг для оплати підписки.
2000 UAH
Потрібно створити бот в телеграмі де користувач зможе оформити підписку на доступ до веб камер котрі знгаходяться у дворі. Організувати в боті оплату двух видів підписок (на місяць і на один день). Бот повинен автоматично перевірити оплату і після видавати посилання-доступу Python, Розробка ботів ∙ 18 годин 7 хвилин тому ∙ 71 ставка |