Парсер вебстраниц с обходом капчи и рекапчи
Задача: Для телеграммбота написать парсер веб страниц определенных сайтов. С телеграмм бота поступает
запрос, этот запрос необходимо ввести в поле для поиска на сайте, спарсить полученую информацию по
ключевым словам, создать новую вебстраничку на своем сайте, заполнить ее полученой информацией и
отправить в чат телеграмм боту ссылку на эту страничку на сайте. На сайтах, с которых будет парситься
информация всегда присутствует ReCaptcha v3 и разные Captcha (парсинг будет происходить на 3-4
сайтах).
Необходимый функционал:
1) Прохождение каптчи и рекаптчи ( время на обработку не более 5 10 сек)
2) Многопоточность. Запросов может быть по 10-20 в секунду.
3) Реализовать базу данных пользователей бота для проверки оплачен ли доступ к боту. Если доступ не
оплачен предложить разовое использование или приобретение подписки.
4) Реализовать архив подготовленных данных и в случае повторения запроса любым пользователем
предложить посмотреть подготовленные данные, сформированные ранее.
Пишите примерную стоимость выполнения работы и сроки!
-
314 7 1 1 Здравствуйте, есть опыт в написании многопоточных парсеров на php (обрабатывается сразу несколько страниц). Обойти капчу можно только через платные сервисы. Пишите.
Пример парсера: http://test.parkes.org.ua/parser/. Есть интерфейс. Парсер обходит все товары донора, загружает их в базу данных престашоп (можно и в Excel файл). Пишет отчет по каждому товару в файл.
Отзывы обо мне (ссылку не разрешают поставить): fl ru
Опыт программирования (js, php) 5+ лет.
Skype: lidomedbio
-
15003 218 0 Добрый день!
Готов помочь.
Опыт в веб разработке 10 лет.
Давайте все обсудим.
skype: rootdorosh
telegram: @vasyl_dorosh
email: vasyldorosh[a]gmail.com
-
Каптчу от гугла не пройти за 5-10 секунд. Есть сервисы которые позволяют разгадывать их, но это займет время.
-
Current freelance projects in the category Web Programming
Make my website
16 USD
A configured application for my site is ready, and products need to be uploaded from the WooCommerce system. No further settings are required, just interested in the cost and timeline. Web Programming ∙ 16 hours 17 minutes back ∙ 20 proposals |
Commercial on-premise video communication platform "ViM"It is required to develop an on-premise video conferencing system with a basic calculation for 100 simultaneous connections (10 isolated rooms of 10 people each). The platform should have a built-in architecture for future horizontal scaling up to 1000 users by adding new media… Javascript and Typescript, Web Programming ∙ 18 hours 39 minutes back ∙ 22 proposals |
I need to create a website from a PDF, is it possible?The design is already fully drawn but we only have it in PDF, as the Figma file was lost... There may be discrepancies with it. This is acceptable. Do we need to redraw it in Figma? Or is it possible to layout and put it on a CMS, and if so, which one? There will be a lot of… HTML & CSS, Web Programming ∙ 20 hours 20 minutes back ∙ 98 proposals |
Development of a system for automating job postings in Facebook groups for a recruitment agencyI am looking for a specialist to create and maintain a job posting system in Facebook groups.About the company:We are a recruitment agency in Israel and we specialize in personnel selection for enterprises, factories, warehouses, manufacturing companies, and other employers… Web Programming, Bot Development ∙ 1 day 8 hours back ∙ 39 proposals |
Layout designer for multi-page advertorial website (Health Media) — vibe coding, clean code
150 USD
We need to create a multi-page website in the style of health media, based on healthinsider.news. Not just a landing page — a full-fledged pseudo-editorial site (advertorial), designed to attract traffic from Meta Ads. IMPORTANT: the task is to be done through vibe coding… HTML & CSS, Web Programming ∙ 1 day 11 hours back ∙ 58 proposals |