Фриланс-проекты

Фриланс-проекты

Парсер новостей

PHP, Веб-программирование, Парсинг данных — неверно указаны категории?

Задача: Написать скрипт-парсер для отслеживания обновлений контента на определенных сайтах с дальнейшей его автоматической публикацией.

Алгоритм работы (как вижу я):

С определенным интервалом сайт (раздел сайта либо список страниц) сканируется на наличие обновлений.
Найденный новый контент публикуется на нашем сайте указав дату публикацию раньше, чем на оригинале (например рандомно в пределах -1 час)
Доработка: В дальнейшем скрипт нужно доработать, сделав возможность перед публикацией контента на сайте добавлять его в панель вебмастера Яндекс, в раздел Оригинальные тексты.

Нюансы

Часть сайтов имеет защиту от копирования, все возможные Ddos защиты и блокировку ботов.

По этому (как вижу я):

Нужно иметь список proxy, который будет переключаться в случае блокировки ip
Иметь возможность использовать рандомные интервалы проверки (например в пределах 10 минут рандомно), для обхода защиты от краулеров
Имитировать обычное посещение пользователем (может яндекc бота или типа того)

Сайты, которые уже сейчас нужно запускать в работу:

напишу после выбора исполнителя

Дальнейшее развитие

Планируется создавать клоны и дублировать контент других сайтов, поэтому есть необходимость создания унифицированной платформы (cms) для клонов и работа в связке с парсером.

Доработка: Должна быть реализована возможность самостоятельной настройки парсера без участия программиста.

Ставки 7 Обсуждения 4

Vasya Pentelukin

0 0

Проекты -
Оценка -
Рейтинг 81

Бюджет: 20000 UAH Срок: 2 дня

Реально сделаю за 2 дня(пока есть время, пока не взял другой проект)!
Построю все на современнейших технологиях!
Абсолютно все равно какая на сайтах защита от парсинга.
Сделаю максимально легкую настройку без участия программиста.

Леонид Маевский

1 0

Проекты -
Оценка -
Рейтинг 231

Бюджет: 20000 UAH Срок: 10 дней

О вас расширенное ТЗ , от меня качественная работа, опыт более 7 лет

Євген Нечипорук

1 0

Проекты -
Оценка -
Рейтинг 218

Бюджет: 25000 UAH Срок: 10 дней

готов реализовать, цена зависит от количества сайтов (подход к каждому из них нужен индивидуальный, т.е. один парсер - один сайт), и что вы хотите настраивать?

В списке не показаны ставки, скрытые заказчиком или фрилансером c профилем Plus, а также ставки, нарушающие правила

Давид М. 11 марта 2018

Красти контент - погано

Михаил Васильченко 11 марта 2018

Какие именно сайты необходимо парсить?

Михаил Васильченко 11 марта 2018

Какие именно сайты необходимо парсить

Yurii Harmash 12 марта 2018

Я в ауте. Просьба создать интернет-помойку открытым текстом. По-началу показалось, что это троллинг биржи

Добавить комментарий

Vova Prik
Киев, Украина

Проектов 5
Оценка -
Рейтинг 73

Парсер новостей

Vasya Pentelukin

Леонид Маевский

Євген Нечипорук

Ставки пока отсутствуют

Актуальные фриланс-проекты в категории PHP

Срочный проект — Senior WordPress/WooCommerce/Stripe разработчик для завершения настройки НДС и

Разработчик WordPress: Обновление API Greenhouse Harvest с версии 2 на версию 3

Легкое приложение

Плагин Mondial Relay WooCommerce

Нужен Специалист (Google Ads) для бухгалтерской компании (оплата за лиды / результаты)