Написать парсер для сайта OLX
62 USDТехническое задание
“ Парсер OLX ”
1. Парсер должен сканировать все объявления на сайте OLX по выборочным фразам, словам (поисковое слово) с выбранными определенными параметрами:
- Параметр ГОРОД
- определенный город
- определенная область
- определенные города
- определенные области
- вся украина
- Рубрика / Раздел сайта OLX
- Подрубрика раздела сайта OLX
- Период должен выбираться по таким параметрам:
- за месяц
- за неделю
- за день
- за час
- за определенный день и определенный промежуток времени ( 12.12.18 с 8:00-10:00 например)
- ежедневный ( определенные часы для просмотра объявлений по выбранным параметрам. Например ежеденевно в 10:00 проверять все объявлния этого дня с 7:00-10:00, в 14:00 проверять все объявления с 10:00-14:00 этого дня и т.д.)
2. Автоопределение парсером входящих данных:
- Определение найденных объявлений ТОП:
- маркировка цветом (выбирается пользователем, например цвет№1) ТОП объявлений
- маркировка цветом (выбирается пользователем, например цвет№2) ТОП объявлений из раннее загруженного файла в парсер с заголовками существующих объявлений на OLX
- Определение обычных объявлений:
- маркировка цветом (выбирается пользователем, например цвет№3) обычных объявлений
- маркировка цветом (выбирается пользователем, например цвет№4) обычных объявлений из раннее загруженного файла с заголовками уже существующих объявлений на OLX
- Дополнительные параметры маркировки цветом:
- При просмотре пользователями объявлений до N просмотров (выбирается пользователем, например цвет№5)
- При просмотре пользователями объявлений более N просмотров (выбирается пользователем, например цвет№6)
3. Планировщик работы:
- Запуск парсера должен устанавливаться пользователем как на постоянной основе так и с изменениями определенных параметров. Если на постоянной основе, то с автозапуском по времени. Возможные варианты ( каждый час, раз в несколько часов или несколько раз на день в определенное время):
4. Вывод информации:
- Информация должна выводиться в EXCEL документ в следующем формате:
- Поисковое слово
- Дата выставления объявления
- Время выставления объявления
- Область
- Город
- Район
- Частное / Бизнес,
- Имя владельца объявления
- Если опубликовано с мобильного, то должна быть запись
- Дата создания аккаунта
- Заголовок
- Текст
- Номер телефона
- Количество фотографий
- Количество просмотров объявления
- Количество просмотров номера объявления (дополнительный параметр)***
- Ссылка на объявление
Маркировка и параметры выводимой информации должна быть такая, как описано выше. Вывод информации должен быть настраеваемый, например нужно вывести только: город, заголовок и количество просмотров.
*** Для просмотра номеров в объявления нужно прописать вход в аккаунт по логину и паролю, если это не получается сделать без обхода входа в аккаунт. Подробное ТЗ входа в аккаунт опишу перед началом работы с выбранным исполнителем. Этот пункт оговаривается отдельно.
Client's review of cooperation with Pavel Kusch
Написать парсер для сайта OLXОтлично выполнено поставленное задание. Было много добавленно в процессе работы изменений в ТЗ и сбора необходимых данных, что усложнило написание самого парсера, но Павел все сделал на высшем уровне! Программой довольны - она намного лучше наших ожиданий. Будем рады сотрудничать в дальнейшем.
-
Winning proposal3 days62 USD
46 Winning proposal3 days62 USD
Есть готовый парсер на Python.
Готов сотрудничать в дальнейшем.
-
14 days267 USD
62 1 0 14 days267 USD
Пишу парсеры на node.js, движок Headless Chrome.
Парсинг динамических сайтов с логином.
* Планировщик нужен встроенный в парсер, или отдельно будете запускать по крону, например?
* Какая операционная система?
* Нужен ли графический интерфейс, или командная строка и файлы конфигурации только?
-
10 days111 USD
113 9 0 10 days111 USD
Здравствуйте.
Есть готовые решения под ОЛХ
Переделаю, допишу под Ваши задачи.
skype: e2379135
-
20 days134 USD
1825 52 0 20 days134 USD
Уже есть готовый ОЛХ парсер (смотрите в портфолио). По поводу просмотра номеров - не обезательно нужно заходить в аккаунт. Доработок много - поэтому такая цена.
Могу еще предложить сделать многопоточность с прокси.
skype: hdls19
-
Простите , а вы осознаете , что бюджет этого проекта стартует от 10 к $?
-
Действительно, слишком уж фундаментальный проект и оплаты требует соответствующей.
Если ТЗ будет значительно упрощено, недорого сделаю скрипт iMacros
-
Current freelance projects in the category Data Parsing
Parsing the YouControl website (Yukontrol)
27 USD
It is necessary to scrape companies from certain categories on the Yukontrol website, including 1) name 2) EDRPOU 3) manager 4) phone All this data is open. Data Parsing ∙ 15 hours 50 seconds back ∙ 26 proposals |
Create a dashboard in https://airtable.com/ for the performance of advertising creatives from Facebook ads.Full specification https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Databases & SQL, Data Parsing ∙ 4 days 17 hours back ∙ 19 proposals |
Creation of an Excel file for uploading products to the websites of other partners.I am interested in creating an Excel table with all parameters. Here is the website - https://heiztechnik.com.ua/ And the positions I am interested in to be transferred: Manual boilers: 1) TIS UNI 15-95 kW (10) pcs 2)TIS HARD 150-500 kW (7) pcs Pellet boilers: 1)TIS PELLET… Data Parsing ∙ 4 days 22 hours back ∙ 36 proposals |
A developer is required for parsing the catalog and automating data import.Detailed technical specifications in the attached document Please indicate the estimated cost and timeline in your response Do you have experience working with parsing large catalogs What possible difficulties or limitations do you see in this task Databases & SQL, Data Parsing ∙ 5 days back ∙ 41 proposals |
Find a product feed (Google Merchant XML) for a website on OpenCart
16 USD
It is necessary to find a direct link to the active product feed (XML) of a competitor for Google Merchant Center Platform (CMS): OpenCart / ocStore Find the original feedRequirements for the result: Working link to the XML file Python, Data Parsing ∙ 5 days 6 hours back ∙ 27 proposals |