Парсер цен с hotline на php
Есть парсер на PHP, который собирает цены с хотлайна.
Процесс такой загружаем файл с urls которые надо распарсить на 5000 уролов, все работает только до 200 урлов.
Далее я так понимаю хотлайн блокирует запросы.
Что можно сделать? Кто может решить данную проблему?
-
30 днів30 000 UAH
308 1 0 30 днів30 000 UAH
Уточняющие фильтры делать и будет все гут. Обращайтесь сделаю
-
Скорее всего хотлайн блокирует запросы. Нужно ответы сервера посмотреть. Если это так, то просто использовать прокси. Можно арендовать мобильные и 1 хватит. Хотлайн их блосит не сможет. А если не сайт блокирует, то может стоит ограничение в самом скрипт или на Вашем сервере есть ограничение на время работы php скриптов
-
Спасибо.
Скрипт работает и не падает обрабатывает урлы дальше но как я понимаю то в ответ приходит страница с капчей.
А где эти прокси покупаются и как их использовать?
Это в скрипт их надо вмонтировать?
-
Вобщето как показывает практика , бесплатные прокся лучше купленых, реже перестают работать. Использовать их можно через curl. Применить парсер бесплатных проксей и каждый раз когда приходит ответ не тот , который нам надо, подставлять новый прокси.
-
Актуальні фриланс-проєкти в категорії PHP
Модуль для OpenCart: масове створення товарів з папок з зображеннямиРозробка модуля масового створення товарів для OpenCart (ocStore 3.x)Необхідно розробити адміністративний модуль для OpenCart / ocStore 3.x, який автоматично створює товари з заздалегідь підготовленої структури папок з зображеннями.Основний функціонал:масове створення товарів з… CMS, PHP ∙ 16 годин 19 хвилин тому ∙ 28 ставок |
Розробник на проект CMS-сайт на Drupal 7 + PHP/MySQL.Шукаємо розробника для допомоги з налаштуванням CMS-сайту на Drupal 7 + PHP/MySQL. Задача:1. Зробити карточки товару на весь асортимент товару (наразі на сайті не на всіх товарах є карточки товару з описом та характеристиками).2. Додати вірні характеристики на всі товари.3.… CMS, PHP ∙ 2 дні 20 годин тому ∙ 39 ставок |
Шукаємо спеціаліста Bitrix24 / інтегратора CRM для налаштування автоматизаціїНаша компанія працює з CRM Bitrix24. Нам потрібен спеціаліст, який зможе налаштувати автоматичне додавання номера телефону в ліди/замовлення в двох форматах. Автоматизація повинна бути коректно налаштована для двох країн: Республіка Молдова та Румунія. Завдання: При створенні… PHP, Веб-програмування ∙ 3 дні 18 годин тому ∙ 24 ставки |
Оптимізація сайту
Оптимізація сайту jdgreta.co.uk на Shopify. Сео аудит додано до проекту. Основні завдання - - Виправити всі мета дані - Виконати ТЗ для програміста (оскільки в цьому проекті поєднані завдання для програміста та СЕО, якщо ви не компанія - можете скористатися допомогою) -… HTML та CSS верстання, PHP ∙ 4 дні 15 годин тому ∙ 33 ставки |
Спеціаліст по HoroshopПотрібен спеціаліст який зможе правильно налаштувати товарний Feed. Проблема: Зараз понад 13 000 товарів вивантажуються з однаковим значенням типу (напр. «все для манікюру та педикюру»). Через це в Google Ads неможливо розділити товари на сегменти й задати різні рекламні… PHP, Супровід сайтів ∙ 5 днів 17 годин тому ∙ 21 ставка |
Хмельницький