Парсер цен с hotline на php
Есть парсер на PHP, который собирает цены с хотлайна.
Процесс такой загружаем файл с urls которые надо распарсить на 5000 уролов, все работает только до 200 урлов.
Далее я так понимаю хотлайн блокирует запросы.
Что можно сделать? Кто может решить данную проблему?
-
308 1 0 Уточняющие фильтры делать и будет все гут. Обращайтесь сделаю
-

Скорее всего хотлайн блокирует запросы. Нужно ответы сервера посмотреть. Если это так, то просто использовать прокси. Можно арендовать мобильные и 1 хватит. Хотлайн их блосит не сможет. А если не сайт блокирует, то может стоит ограничение в самом скрипт или на Вашем сервере есть ограничение на время работы php скриптов
-
Спасибо.
Скрипт работает и не падает обрабатывает урлы дальше но как я понимаю то в ответ приходит страница с капчей.
А где эти прокси покупаются и как их использовать?
Это в скрипт их надо вмонтировать?
-
Current freelance projects in the category Data Parsing
Scrape the database and add it to the Telegram chatScrape the database from List.ua and add by numbers to the Telegram chat. The chat is about repairs and interior design. Data Parsing, Customer Support ∙ 9 hours 18 minutes back ∙ 19 proposals |
It is necessary to develop a Telegram bot for monitoring cars from auctions in the USA (Copart, IAAI)A Telegram bot is needed for automatic searching and monitoring of "BUY IT NOW" cars at auctions in the USA (Copart, IAAI). The bot should operate automatically and send notifications about new cars that meet the specified filters.Main functionalityFilter settings: 1. Car… Data Parsing, Bot Development ∙ 16 hours 51 minutes back ∙ 66 proposals |
Parsing products, preparation for import to WPScrape the full catalog of these websites: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ All products need to be combined into one general table for import into WP.… Web Programming, Data Parsing ∙ 3 days 9 hours back ∙ 57 proposals |
A specialist in Telegram promotion is required.
28 USD
Tasks: invite real users from the username database to new chats and send messages to the target database. Only quality traffic and work with a live audience are of interest — performers using bots, fake engagement, or low-quality methods are requested NOT TO DISTURB. Work… Data Parsing, Social Media Marketing (SMM) ∙ 8 days 9 hours back ∙ 9 proposals |
Consultation on parsing Instagram account subscribersHello. It is necessary to conduct a preliminary assessment of the feasibility of the following task. I have a list of Instagram accounts. The goal is to obtain contact information (primarily email addresses) of users who follow these accounts. Previously, I encountered companies… Data Parsing ∙ 12 days 4 hours back ∙ 13 proposals |