Написать парсер для сайта OLX

Техническое задание

“ Парсер OLX ”

1. Парсер должен сканировать все объявления на сайте OLX по выборочным фразам, словам (поисковое слово) с выбранными определенными параметрами:

• Параметр ГОРОД

1. определенный город
2. определенная область
3. определенные города
4. определенные области
5. вся украина

• Рубрика / Раздел сайта OLX
• Подрубрика раздела сайта OLX
• Период должен выбираться по таким параметрам:

1. за месяц
2. за неделю
3. за день
4. за час
5. за определенный день и определенный промежуток времени ( 12.12.18 с 8:00-10:00 например)
6. ежедневный ( определенные часы для просмотра объявлений по выбранным параметрам. Например ежеденевно  в 10:00 проверять все объявлния этого дня с 7:00-10:00, в 14:00 проверять все объявления с 10:00-14:00 этого дня и т.д.)

2. Автоопределение парсером входящих данных:

• Определение найденных объявлений ТОП:

1. маркировка цветом (выбирается пользователем, например цвет№1) ТОП объявлений
2. маркировка цветом (выбирается пользователем, например цвет№2) ТОП объявлений из раннее загруженного файла в парсер с заголовками существующих объявлений на OLX

• Определение обычных объявлений:

1. маркировка цветом (выбирается пользователем, например цвет№3) обычных объявлений
2. маркировка цветом (выбирается пользователем, например цвет№4) обычных объявлений из раннее загруженного файла с заголовками уже существующих объявлений на OLX

• Дополнительные параметры маркировки цветом:

1. При просмотре пользователями объявлений до N просмотров (выбирается пользователем, например цвет№5) 
2. При просмотре пользователями объявлений более N просмотров (выбирается пользователем, например цвет№6)

3. Планировщик работы: 

• Запуск парсера должен устанавливаться пользователем как на постоянной основе так и с изменениями определенных параметров. Если на постоянной основе, то с автозапуском по времени. Возможные варианты ( каждый час, раз в несколько часов или несколько раз на день в определенное время):

4. Вывод информации:

• Информация должна выводиться в EXCEL документ в следующем формате:

1. Поисковое слово
2. Дата  выставления объявления
3. Время выставления объявления
4. Область 
5. Город 
6. Район
7. Частное / Бизнес,
8. Имя владельца объявления
9. Если опубликовано с мобильного, то должна быть запись
10. Дата создания аккаунта
11. Заголовок
12. Текст
13. Номер телефона
14. Количество фотографий
15. Количество просмотров объявления
16. Количество просмотров номера объявления  (дополнительный параметр)***
17. Ссылка на объявление

Маркировка и параметры выводимой информации должна быть такая, как описано выше. Вывод информации должен быть настраеваемый, например нужно вывести только: город, заголовок и количество просмотров.

   *** Для просмотра номеров в объявления нужно прописать вход в аккаунт по логину и паролю, если это не получается сделать без обхода входа в аккаунт. Подробное ТЗ входа в аккаунт опишу перед началом работы с выбранным исполнителем. Этот пункт оговаривается отдельно.