Парсинг сайтов

Привет! 😊

Готов приступить к выполнению Вашего задания!
Для парсинга указанных сайтов я планирую:

Методика: Использование Python с библиотеками ScraperAPI, BeautifulSoup, Requests, а в случае динамических страниц – Selenium или Scrapy.
Сначала анализирую структуру каждого сайта, создаю индивидуальные скрипты для сбора нужных данных, далее осуществляю валидацию и сохранение информации в формате Excel с удобной фильтрацией (по областям, объему и т.д.).

Сроки: Ориентировочно 1-2 дня на каждый сайт, в целом проект может занять около 7-10 рабочих дней – в зависимости от сложности ресурсов.
…
Стоимость: Стоимость проекта рассчитывается индивидуально

Точную сумму согласуем после детального анализа задания.
Готов обсудить детали и ответить на все вопросы. Жду возможности сотрудничества! 🚀🤝

С уважением,
Андрей!

Показать оригинал

Перевести

Привет!

Для выполнения парсинга сайтов я предлагаю следующий подход:

Как будет происходить парсинг:

Анализ сайта — сначала осуществляется обзор структуры сайта для определения необходимых данных (HTML структуры, API запросы и т. д.).
Выбор инструментов — для парсинга использую aiohttp, Scrapy или BeautifulSoup, в зависимости от сложности сайта и требований к скорости обработки.
Разработка скрипта — создание скрипта для парсинга, который будет собирать нужные данные (например, клиентов, название, должность, номер телефона и т. д.).
… Форматирование и сохранение — сохранение результатов в необходимом формате (например, Excel, CSV, JSON).
Фильтрация и сортировка — если нужно, добавлю функции фильтрации по определенным критериям (области, размер земли и т. д.).
Тестирование — проверка корректности работы парсера, чтобы не возникало ошибок при сборе данных.

Время на выполнение:

Оценка времени: Парсинг зависит от сложности сайта и объема данных. Если сайт не имеет сложной структуры и API, на разработку парсера нужно около 1-2 дней для небольшого проекта. Для более сложных сайтов (например, с динамическим контентом) время может увеличиться до 3-5 дней.
После запуска парсинг может занять от нескольких минут до нескольких часов, в зависимости от объема данных на сайте.

Цена:

Стоимость парсинга варьируется в зависимости от сложности задания и объема данных. Вот приблизительная оценка:
Простой парсинг (статические сайты, несколько страниц): 1000грн.
Сложный парсинг (динамические сайты, большие объемы данных): 1000грн - 2000грн.
Могу предложить более точную оценку после детального обсуждения спецификаций.

Готов к сотрудничеству и обсуждению деталей проекта. Я гарантирую качество и своевременное выполнение работ!

Спасибо!

Показать оригинал

Перевести

Здравствуйте!

Меня заинтересовал ваш проект, у меня большой опыт работы в автоматизации/эмуляции действий пользователя (JavaScript, Selenium, Playwright), асинхронном/многопоточном парсинге (Requests, WebSockets, HTTPX, BS4), обработке информации (Openpyxl, JSON, MySQL, MongoDB) и разработке Telegram-ботов различной сложности (Telethon, Pyrogram, Aiogram).

Свяжитесь со мной для обсуждения деталей и сроков выполнения этого проекта!

Показать оригинал

Перевести

😄 Привет,

Безусловно, после просмотра вашего описания вакансии я вижу, что ваш проект в основном связан с веб-скрапингом, очисткой данных и их экспортом. Как опытный разработчик в этой сфере, я уверен в своей способности выполнить это задание без проблем.

Я использовал Python и библиотеку BeautifulSoup для парсинга HTML. Она отлично подходит для навигации, поиска и модификации дерева разбора. Для автоматизации выполнения скриптов я применял встроенный модуль Python sched для планирования задач, аналогично cron-задачам.

Кроме того, для отправки HTTP-запросов и получения ответов я использовал модуль requests, а для обхода защиты Cloudflare и подобных сервисов работал с cfscrape.

Что касается сайтов, которые рендерят контент с помощью JavaScript, я использовал Selenium WebDriver вместе с PhantomJS, что позволяло мне имитировать поведение пользователя в браузере и получать динамический контент, а для обхода защиты Cloudflare и подобных сервисов работал с undetected_chromedriver.
…
Сроки: Ориентировочно 1-2 дня на каждый сайт

Стоимость: 700 за сайт

🕒 Я открыт как к частичной, так и к полной занятости, а также гибок в отношении часовых поясов. Я уверен, что смогу обеспечить качественное выполнение вашего проекта, и гарантирую, что вы не будете разочарованы нашим сотрудничеством.

Буду рад дальнейшему обсуждению. Спасибо, что рассмотрели мое предложение!

Показать оригинал

Перевести

Добрый день,

Готов взяться за парсинг указанных сайтов. Использую Selenium или Puppeteer для получения нужных данных. Время и стоимость проекта будут зависеть от сложности структуры сайтов и объема информации для парсинга.

Моя ставка 16$ в час.

Спасибо.

Показать оригинал

Перевести

Добрый день!
У меня есть опыт в создании парсеров.
Какие именно данные нужно парсить? Время и стоимость зависят от объема работы, количества необходимых данных, детали готова обсудить в личных сообщениях.

Показать оригинал

Перевести

Добрый день!
Предлагаю парсинг с помощью скриптов на Java+Selenium. Заходим на необходимые страницы, берем необходимую информацию, сохраняем в базу данных или в гугл-таблицу. Из базы потом также можем формировать, например, xls-файл.

Что касается сроков выполнения - они зависят от того, что именно вы хотите взять с этих сайтов. Написание скрипта может занять 30-40 минут, а его отработка - несколько часов.

По ценам - тут больше факторов. Я оцениваю только работу над скриптом. Время самого по себе парсинга (работы созданного скрипта) практически не учитывается, так как почти никогда не требует вмешательства.
Также влияет, какой вариант вам нужен - одноразовый сбор информации или регулярный. Для одноразового все проще и дешевле (за 1000 грн. можно спарсить и несколько сайтов, опять же, в зависимости от того, что вы хотите собрать). Если вам нужен регулярный парсинг, для этого могу предложить программу, которую вы сможете запускать в нужное время со своего компьютера. Тут уже цена будет выше, так как это более долгая разработка, которая требует еще и создания интерфейса, а также тестирования самой программы в различных условиях. Дальнейшая поддержка само собой предоставляется)

Надеюсь, все достаточно детально описал, но если есть вопросы, можем их обсудить в личных сообщениях (а заодно и детали вашей задачи). На данный момент ставка условная, о конкретных сроках и суммах можно будет договориться, учитывая все написанное выше.
…
Обращайтесь, буду рад сотрудничеству!

Показать оригинал

Перевести

Добрый день. Сделаю такого бота. Пишите, Буду рад сотрудничать!

Всем привет. Готов взяться за парсинг сайтов. Жду возможности объяснить детали и начать работу. Спасибо.

Показать оригинал

Перевести

Добрый день!
Напишите в лс для обсуждения деталей. Какие данные Вам нужны с этих сайтов?
Имею опыт разработки парсеров различного рода, используя технологии Python, Selenium, requests, bs4, playwright.
Окончательная цена и сроки после того, как обсудим проект и определим четкое задание.

Показать оригинал

Перевести