Configure parser authorization in PHP for a cloudflare site
Can you help me fix it?
Here is my message here.
https://opencartforum.com/topic/184403-nastroyka-modulya-simplepars-dlya-parsinga-sayta-na-cloudflare-parsing-v-csv/
The parser is like this if https://parsing.org.ua/
Donor to face.
-
2 days11 USD
23 2 days11 USD
I'll try to set through the proxy server if you don't get it.
-
Это лучше к разработчику парсера обратиться.
А вообще по опыту работы с cloudlare у вас самое вероятное
1. Бан по IP
2. Бан т.к. Cloudflare видит, что это не браузер.
С Cloudflare много заморочек. В некоторых случаях решается парсингом через реальный браузер + прокси. Прокси под Cloudflare тоже нужно еще подобрать + они также быстро попадают в бан, т.к. нейросетка обучаеться + обновляеться постоянно база прокси.
-
если у вас есть договоренность о парсинге с владельцем сайта, то надо настроить исключение для парсера
такая возможность есть у cloudflare
иначе - никак
-
с друго сервера авторизуется а с моего нет, может кто то что то знает
-
Предлагаю добавить в парсер список свежих прокси, которые будут обновляться, и проверить его работу
-
я готов попробовать! Что для этого нужно ?
-
а там как пойдет
-
Давайте попробуем, это самый быстрй вариант? Как это сделать?
-
У меня пока профиль не настроен, не могу оставлять отклик на заказ.
Для начала вам нужен аккаунт, например на ProxyMesh, там 30 дней бесплатный триал. В настройках OpenCart нужно найти "Cloudflare API endpoint URL " и заменить его на тот который вам дадут ProxyMesh, после этого должно работать. -
попробую, спасибо за совет. А вы не в курсе как настраивать content dowloader ? он у меня есть и в крайнем случае я буду искать человека который бы его донастроил. Он перестал с этого донора цену парсить, слетела настройка какая то, немогу найти
-
Я смог бы посмотреть)
-
Понял, сейчас я проведу експеримент:
Переустановлю этот модуль на другой хостинг, если и там не заработает тогда к вам обращатся буду за донастойкой контент доунлоудера -
Current freelance projects in the category Data Parsing
Collection of links to sources with rental housing listings
Collection of links to sources with rental housing advertisements It is necessary to compile a database of links to groups, channels, forums, and platforms where rental housing advertisements are published in major cities of Europe and the USA. Goal: to find sources where… Data Parsing, Lead Generation & Sales ∙ 9 hours 49 minutes back ∙ 17 proposals |
Set up the module "Automatic Price List Processing. v.9.5".The store on OcStore 2.3 has the module "Automatic Price List Processing. v.9.5" installed. Everything is set up by the module author, but there are currently some configuration issues that I cannot figure out and understand the logic of the module's operation. For example,… Online Stores & E-commerce, Data Parsing ∙ 1 day 5 hours back ∙ 21 proposals |
Pricing of auto parts from suppliers for auto parts websites based on Prom.Technical task Project Configuration of filling and synchronization of two Prom.ua stores with suppliers of auto parts. Task It is necessary to implement the loading and updating of products from auto parts suppliers for two online stores on Prom.ua. ⸻ 1. Connecting… Data Parsing ∙ 1 day 17 hours back ∙ 44 proposals |
Database parsing
45 USD
Channel requirements: 1. Content language: Russian or Ukrainian (mixed RU/UA content is allowed) 2. Number of subscribers: At least 500 subscribers 3. Activity: The last post published no later than 32 hours ago 4. Comments: Comments must be open under the posts (through a group… Databases & SQL, Data Parsing ∙ 1 day 18 hours back ∙ 32 proposals |
It is necessary to develop a Telegram bot for monitoring cars from auctions in the USA (Copart, IAAI)A Telegram bot is needed for automatic searching and monitoring of "BUY IT NOW" cars at auctions in the USA (Copart, IAAI). The bot should operate automatically and send notifications about new cars that meet the specified filters.Main functionalityFilter settings: 1. Car… Data Parsing, Bot Development ∙ 2 days 20 hours back ∙ 93 proposals |
Kharkiv