php-скрипт, получающий страницу сайта piluli.ru

echo file_get_contents("http://www.piluli.ru");

Арсен Арсен 23 февраля 2019

а Вы попробуйте и удивитесь )

ну а что вы еще хотели? 

Специально от таких как вы и придумали подобную защиту))

Арсен Арсен 24 февраля 2019

Правильно придумали. И для таких как я есть freelancehunt, где есть другие лучше чем я и могут это обойти ))

Та можно... Только стимул - так себе.

Арсен Арсен 24 февраля 2019

Возможно.
Если не найдется "простого решения", буду стимул подымать.

Ладно, начну думать.

Попробовал с локального сервера. Все отлично :)

да? ну вот что возвращает сервер https://pastebin.com/RFY3xg1N

Selenium в помощь :)

Это обязательно должен быть пхп скрипт? Питон не пойдет?

А какая разница??

Там грузится js, который проверяет реальность браузера, затем - php, замаскированный под gif-файл размером 1х1 и лишь затем AJAX загружает контент.

Вернее самый первый js проверяет текущий url, и если его нет или он не совпадает с доменом, происходит редирект на эти "пилюли".

Арсен Арсен 24 февраля 2019

Обязательно, пока я не смирился с тем, что это невозможно.Есть уже рабочий php код, часть которого перестала работать после этого их нововведения, надо просто ее заменить, чтобы реанимировать.

Арсен Арсен 24 февраля 2019

Этот сервис https://tools.pingdom.com/#5a46c56d33c00000 получает страницу пилюль верно, видно по тому, как он ее разбирает.

Также, верно ее получают и еще парочку, в том числе и гугловский https://search.google.com/structured-data/testing-tool/u/0/?hl=ru

Хых! Гугл эмулирует виртуальный браузер "краулер", который и выполняет js.

Арсен Арсен 24 февраля 2019

Согласен. Задача не самая простая. Недавно был вариант еще словить, куда идут запросы с их моб. приложения и слать прямо туда.

Они не отдадут. Они каждый раз генерируют рандомную строку-ключ.

Но я уже нащупал решение. Щас напишу код, проверю... Часа два to wait. Ok?

Арсен Арсен 24 февраля 2019

Погодите. Мне один исполнитель пишет, что сделал. Если нет, отпишу Вам.

Так и я уже сделал.

Арсен Арсен 24 февраля 2019

Верь, но другой исполнитель написал раньше, я сейчас гляну. Но чуется мне, что все, как обычно.

Один кадр просто прислал "Сделано!" и выслал код с curl и передачей заголовков. Даже не удосужился глянуть, что тянет его код бред, а не html.

http://y.spydocs.net/gpil.php

Проверь.

Для примера: piluli.ru/product494985/product_info.html

А! я его трошки не доделал. Щас скрипт будет url читать. Пару минут.

Готово

Арсен Арсен 24 февраля 2019

Вижу, работает. Но вынужден дождаться кода другого исполнителя, т.к. чутка раньше зарезервировал для него сейф.

Само собой.

имитация браузера на сервере ?

Все гораздо хуже.

Арсен Арсен 24 февраля 2019

Обратитесь с телегу @archie01

Не пользуюсь.

Меня не будет час. Дела по работе. А писать можно в "личку".

Арсен Арсен 24 февраля 2019

yes

Я, типа, здесь.

И, это самое, если Победившая ставка не справилась, не нужно ставить ей минус. Программист проявил чудеса настойчивости, достойные всяческих похвал.

Арсен Арсен 24 февраля 2019

Конечно. Минус никто не ставит. Более того, если исполнитель справится в срок, я оплачу работу. Я просто очень расстроен, что человек пишет "все готово, давайте бабло", закидываю сейф, оказывается, ничего не готово и все не работает и надо больше денег. Поэтому, плюса тоже не будет.

Та бывает.