Парсинг даних з Coinmarketcap | Python | Старший Спеціаліст

Бюджет: 500 EUR Термін: 1 день

Привіт, з якою періодичністю потрібно парсити дані?

1. Так, можу надати приклади
2. Маю досвід обходу Cloudflare, але потрібно додатково вивчити окремий ресурс, тому що сайти можуть мати різні налаштування/правила захисту
3. Так, але API Google Sheets має ліміти, якщо ми говоримо про велику кількість даних, то варто розглянути БД

Можемо обговорити подальші деталі в особистих повідомленнях. Буду рада співпраці.

Бюджет: 500 EUR Термін: 5 днів

Привіт!
З радістю попрацюю над вашим проектом.
Створю бота, наповню потрібним функціоналом. Працюю до повного затвердження.
Напишіть мені в особисті повідомлення, обговоримо деталі.

Бюджет: 500 EUR Термін: 7 днів

Привіт, Віталіно.
З задоволенням візьмуся за ваш проект. У мене великий досвід у створенні парсерів на python+selenium. На python пишу більше 4 років, парсингом даних займаюся близько 3 років.

1) У мене на постійному обслуговуванні знаходяться 2 моїх багатопроцесорних парсери.
Перший парсер існує вже 3 роки, він збирає дані з 18 B2B порталів.
Багатопроцесорність реалізована через менеджер процесів, що дає високу стабільність і швидкість роботи парсера.
Я пропоную вам використовувати саме багатопроцесорний парсер, а не багатопотоковий.

2) Selenium імітує реального користувача, поставити галочку для нього не проблема. Більш складні захисти, наприклад, reCAPTCHA від Google, обходяться через сторонні сервіси, такі задачі теж доводилося вирішувати.

3) З API Google sheets не працював, це звичайний REST API, не бачу труднощів у його використанні. Є досвід роботи з pandas для очищення і сортування даних і створення звітів у форматі xlsx, з використанням усіх переваг електронних таблиць - кольорове виділення, формат даних тощо.

4) Можу підключити пул проксі до парсера.

5) Парсер може працювати на віддаленому сервері і сам процес парсингу не з швидких. Зручним рішенням, особливо для команди або групи, буде використовувати сповіщення в телеграм-канал про роботу парсера. Розгорнути

Бюджет: 499 EUR Термін: 7 днів

Привіт, Віталіно!

Я - досвідчений Fullstack розробник з великим досвідом парсингу даних на Python. Я вирішу вашу задачу, оптимізуючи старий код і впровадивши багатопоточність для підвищення швидкості збору даних. Обійду захист на Coinsniper.net за допомогою рішень для обходу Cloudflare. Також маю досвід роботи з API Google Sheets для зручного експорту. Гарантую якість і швидкість виконання!

Чекаю вашої відповіді!

Бюджет: 500 EUR Термін: 7 днів

Привіт, готовий реалізувати цей проект!
Буду радий співпраці!

Бюджет: 500 EUR Термін: 7 днів

Доброго дня, вже є досвід роботи з CoinMarketCap та Coingecko.
Пишіть в лс, обговоримо, що потрібно вам буде вивантажити в таблицю.
Досвід роботи з таблицями Google є.

Бюджет: 500 EUR Термін: 7 днів

Добрий день!

Мене зацікавив ваш проект по парсингу даних з різних ресурсів. Дозвольте коротко представити мою пропозицію:

Досвід і компетенції:

Багатопотоковий парсинг: Маю значний досвід розробки багатопотокових і асинхронних парсерів на Python з використанням asyncio, aiohttp і threading, що забезпечує високу швидкість і ефективність збору даних.

Обхід захистів: Успішно працював з обходом різних захисних механізмів, включаючи Cloudflare "Verify yourself as a human". Використовую такі інструменти як Selenium, Playwright і спеціалізовані бібліотеки (cloudscraper) для забезпечення стабільного доступу до захищених ресурсів.

Інтеграція з Google Sheets API: Багаторазово реалізовував інтеграцію з Google Sheets через gspread і офіційне API, забезпечуючи автоматизовану вивантаження і оновлення даних у таблицях.

Підхід до проекту:

Аналіз існуючого коду: Ознайомлюсь з поточною кодовою базою для розуміння структури і особливостей.
Розробка і оптимізація: Створю/допрацюю парсери для 20 ресурсів, забезпечуючи стійкість і ефективність.
Інтеграція і автоматизація: Налаштую автоматичну вивантаження даних у Google Sheets і базу даних за заданим розкладом.
Підтримка і моніторинг: Забезпечу моніторинг процесів парсингу і швидке реагування на можливі збої або зміни на сайтах.
Буду радий обговорити деталі вашого проекту і запропонувати оптимальне рішення. Зв'яжіться зі мною для подальшого обговорення! Розгорнути

Бюджет: 500 EUR Термін: 12 днів

Доброго дня!
Готовий взятися за проект. Є досвід парсингу даних з різних ресурсів на Python, включаючи роботу з багатопоточністю. Можу налаштувати парсинг даних з вказаного вами списку сайтів, обійти захист (наприклад, Cloudflare), а також інтегрувати вивантаження в Google Sheets та БД.
Так, працював з багатопоточністю для прискорення парсингу.
Обхід захисту Cloudflare — є досвід вирішення таких задач з використанням антикапчі або проксі-серверів.
Працював з Google Sheets API, інтегрував вивантаження даних у таблиці.
Готовий розпочати одразу.

Бюджет: 500 EUR Термін: 7 днів

Добрий день. Готовий виконати.
Маю великий досвід створення парсерів.
Пишу на Python, займаю 3-є місце на платформі.

Реалізую парсер для роботи з даними в багатопотоці. Зможу обійти захист на потрібному сайті. Підключу необхідні інтеграції. Зроблю зручний інтерфейс і оптимізую.

Моє портфоліо: Freelancehunt
Пишіть, обговоримо деталі і я приступлю до роботи.

Бюджет: 1000 EUR Термін: 1 день

Добрий вечір, маю великий досвід у парсингу, сніфінгу та реверс-інжинірингу, пишіть — зробимо вітер :)

Бюджет: 500 EUR Термін: 1 день

Добрий вечір

Пишіть, готовий обговорити деталі

Відповідаю:
1. так, працював з багатопоточністю, і в парсингу, і в іншому
2. так, зможу обійти
3. Так, працював з API Google Таблиць

Пишіть
Готовий до роботи Розгорнути

Бюджет: 1000 EUR Термін: 30 днів

Маю величезний досвід скрепінгу та масу завершених проектів з використанням запитів (requests, aiohttp) та автоматизації за допомогою браузера (playwright, pyppeteer, selenium), обходу різних видів захисту (akamai, cloudflare) та капч (reCAPTCHA, image captcha, geetest icon captcha, geetest v3/v4 slide captcha, hCAPTCHA, tiktok captcha, funcaptcha, worldfirstcaptcha, cloudflare captcha), виконання логіна та збору даних під авторизацією (використовуючи куки, токени та сесії)

Бюджет: 500 EUR Термін: 10 днів

Доброго дня. Маю великий досвід в різноманітному парсінгу, взаємодії з різноманітними API, google sheet, в тому числі.
Цікаво більш детально дізнатись про ТЗ.
Буду радий співпраці.

Бюджет: 500 EUR Термін: 20 днів

Доброго дня!

Готовий взятися за виконання вашого замовлення. Маю досвід роботи з багатопотоковим парсингом даних, обходом захистів (включаючи Cloudflare) та інтеграцією з Google Sheets API. Можу забезпечити стабільну вивантаження даних з вказаних ресурсів у Google Sheets та базу даних.

Готовий обговорити деталі та розпочати роботу.

Бюджет: 500 EUR Термін: 13 днів

Добрий вечір.
1. З парсингом у багатопоточному режимі працював.
2. Захист обходив, але не скрізь. На сайті Coinsniper.net потрібно вивчити та протестувати.
3. З API Google sheets знайомий, але не працював.