Парсинг выдачи гугла и найденных страниц сайтов (Программное обеспечение)
Требуется серверное ПО по парсингу выдачи гугла и/или бинг.
С защитой от бана
Интерфейс API:
отправка запроса
получения найденных урл сайтов и содержимое их страниц
Поисковый запрос это поиск информации по товару (название товара и/или EAN)
Оплата договорная.
-
**Привет!**
Это интересная задача, и я готов предложить оптимальное решение для парсинга Google/Bing и обработки найденных результатов.
### Мое предложение:
1. **Разработка серверного ПО для парсинга:**
- Парсинг результатов поисковых систем (Google, Bing).
- Механизмы защиты от бана (использование прокси, изменение User-Agent, ограничение частоты запросов).
- **API для взаимодействия:**
… - **Запрос:** отправляется поисковый запрос, например, товар или EAN код.
- **Ответ:** получение результатов поиска (URL сайтов) и содержимого их страниц.
2. **Технические детали:**
- **Защита от бана:** Использование ротации прокси, ограничение запросов и другие методы для безопасного парсинга.
- **API:** RESTful API для взаимодействия, удобная документация для дальнейшего использования.
- **Обработка содержимого страниц:** Можно также парсить конкретную информацию со страниц, если это необходимо (например, цены, описание товара и т.д.).
3. **Срок выполнения:**
- Примерно 10-14 дней на разработку, тестирование и запуск системы.
4. **Стоимость:**
- Поскольку оплата договорная, я готов обсудить детали и согласовать цену после уточнения всех требований.
Готов обсудить подробности и предоставить более точные оценки после получения дополнительной информации!
-
259 Добрый день!
Я внимательно изучил ваше объявление и уверен, что смогу разработать серверное ПО для парсинга поисковой выдачи Google и/или Bing с надежной защитой от блокировок. В моей работе я уже реализовывал проекты, где приходилось обходить ограничения (использование ротации прокси, изменение user-agent, динамические задержки и т.п.), что позволит обеспечить стабильную работу парсера.
Что входит в разработку:
API-интерфейс: Возможность отправки запроса (по названию товара и/или EAN) и получения списка найденных URL с их содержимым.
Парсинг выдачи: Обработка результатов поисковых систем с учетом корректного извлечения информации.
Защита от бана: Реализация механизмов для обхода блокировок и предотвращения массовых запросов с одного IP-адреса.
… Буду рад обсудить все нюансы и приступить к реализации проекта. Спасибо за внимание, жду вашего ответа!
-
210 Готов написать на Python, Java
При необходимости реализуем API за доп плату
-
3367 84 0 Готов взять на себя.
Но нужно уточнить детали заказа, пишите!
Реализую скриптом на python.
Актуальные фриланс-проекты в категории Веб-программирование
Автоматизация отправлений КП в сообщения на LinkedIn, WhatsApp, Reddit
10 000 UAH
Необходима автоматизация отправки сообщений со ссылкой на КП в LinkedIn, WhatsApp, Reddit, пишите, как это будет реализовано, сроки и стоимость AI и машинное обучение, Веб-программирование ∙ 39 минут назад ∙ 17 ставок |
Ускорение работы сайта (оптимизация кода)
2000 UAH
1. Нужно сделать анализ сайта и оптимизировать код для быстрого загрузки сайта. 2. Сделать анализ сайта на ошибки и исправить их. Веб-программирование ∙ 5 часов 46 минут назад ∙ 52 ставки |
Переезд с Хостинга на ДругойДоброго дня Планую перенести сайт з хостингу україна на hosting.works. Та також потрібно налаштувати правило, що якщо трафік з якогось ip більше, наприклад, ніж 100 запитів в день, то потрібно блокувати. CMS, Веб-программирование ∙ 9 часов 19 минут назад ∙ 71 ставка |
Создание вебсайта для агентства по трудоустройству
50 000 UAH
Мы — агентство по трудоустройству, и мы ищем опытного веб-разработчика для создания современного и удобного сайта. Хотим, чтобы кандидаты самостоятельно предложили свою цену за услугу. Поэтому мы ищем специалиста, который имеет опыт в индивидуальной разработке. Бюджет и сроки… Веб-программирование ∙ 10 часов 9 минут назад ∙ 109 ставок |
Game Developer Pixi.Js
15 723 UAH
Ищем разработчика Pixi.js для создания серии из 12 мини-игр. Проекты простые по реализации и при уверенной работе разработка одной игры занимает не более недели. Необходимо реализовать фронтенд и игровую математику, без разработки бэкенда. Игры будут похожи по структуре, но с… Javascript и Typescript, Веб-программирование ∙ 11 часов 8 минут назад ∙ 37 ставок |