Написать парсер для сайта OLX
229 PLNТехническое задание
“ Парсер OLX ”
1. Парсер должен сканировать все объявления на сайте OLX по выборочным фразам, словам (поисковое слово) с выбранными определенными параметрами:
- Параметр ГОРОД
- определенный город
- определенная область
- определенные города
- определенные области
- вся украина
- Рубрика / Раздел сайта OLX
- Подрубрика раздела сайта OLX
- Период должен выбираться по таким параметрам:
- за месяц
- за неделю
- за день
- за час
- за определенный день и определенный промежуток времени ( 12.12.18 с 8:00-10:00 например)
- ежедневный ( определенные часы для просмотра объявлений по выбранным параметрам. Например ежеденевно в 10:00 проверять все объявлния этого дня с 7:00-10:00, в 14:00 проверять все объявления с 10:00-14:00 этого дня и т.д.)
2. Автоопределение парсером входящих данных:
- Определение найденных объявлений ТОП:
- маркировка цветом (выбирается пользователем, например цвет№1) ТОП объявлений
- маркировка цветом (выбирается пользователем, например цвет№2) ТОП объявлений из раннее загруженного файла в парсер с заголовками существующих объявлений на OLX
- Определение обычных объявлений:
- маркировка цветом (выбирается пользователем, например цвет№3) обычных объявлений
- маркировка цветом (выбирается пользователем, например цвет№4) обычных объявлений из раннее загруженного файла с заголовками уже существующих объявлений на OLX
- Дополнительные параметры маркировки цветом:
- При просмотре пользователями объявлений до N просмотров (выбирается пользователем, например цвет№5)
- При просмотре пользователями объявлений более N просмотров (выбирается пользователем, например цвет№6)
3. Планировщик работы:
- Запуск парсера должен устанавливаться пользователем как на постоянной основе так и с изменениями определенных параметров. Если на постоянной основе, то с автозапуском по времени. Возможные варианты ( каждый час, раз в несколько часов или несколько раз на день в определенное время):
4. Вывод информации:
- Информация должна выводиться в EXCEL документ в следующем формате:
- Поисковое слово
- Дата выставления объявления
- Время выставления объявления
- Область
- Город
- Район
- Частное / Бизнес,
- Имя владельца объявления
- Если опубликовано с мобильного, то должна быть запись
- Дата создания аккаунта
- Заголовок
- Текст
- Номер телефона
- Количество фотографий
- Количество просмотров объявления
- Количество просмотров номера объявления (дополнительный параметр)***
- Ссылка на объявление
Маркировка и параметры выводимой информации должна быть такая, как описано выше. Вывод информации должен быть настраеваемый, например нужно вывести только: город, заголовок и количество просмотров.
*** Для просмотра номеров в объявления нужно прописать вход в аккаунт по логину и паролю, если это не получается сделать без обхода входа в аккаунт. Подробное ТЗ входа в аккаунт опишу перед началом работы с выбранным исполнителем. Этот пункт оговаривается отдельно.
Opinia zleceniodawcy o współpracy z Pavel Kusch
Написать парсер для сайта OLXОтлично выполнено поставленное задание. Было много добавленно в процессе работы изменений в ТЗ и сбора необходимых данных, что усложнило написание самого парсера, но Павел все сделал на высшем уровне! Программой довольны - она намного лучше наших ожиданий. Будем рады сотрудничать в дальнейшем.
-
Oferta, która wygrała3 dni229 PLN
46 Oferta, która wygrała3 dni229 PLN
Есть готовый парсер на Python.
Готов сотрудничать в дальнейшем.
-
14 dni980 PLN
62 1 0 14 dni980 PLN
Пишу парсеры на node.js, движок Headless Chrome.
Парсинг динамических сайтов с логином.
* Планировщик нужен встроенный в парсер, или отдельно будете запускать по крону, например?
* Какая операционная система?
* Нужен ли графический интерфейс, или командная строка и файлы конфигурации только?
-
10 dni408 PLN
113 9 0 10 dni408 PLN
Здравствуйте.
Есть готовые решения под ОЛХ
Переделаю, допишу под Ваши задачи.
skype: e2379135
-
20 dni490 PLN
1825 52 0 20 dni490 PLN
Уже есть готовый ОЛХ парсер (смотрите в портфолио). По поводу просмотра номеров - не обезательно нужно заходить в аккаунт. Доработок много - поэтому такая цена.
Могу еще предложить сделать многопоточность с прокси.
skype: hdls19
-
Простите , а вы осознаете , что бюджет этого проекта стартует от 10 к $?
-
Действительно, слишком уж фундаментальный проект и оплаты требует соответствующей.
Если ТЗ будет значительно упрощено, недорого сделаю скрипт iMacros
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Baza stron na woocommercePotrzebna jest baza ukraińskich stron internetowych sklepów internetowych na woocommerce z kontaktami, które są podane na stronach. Tylko działające strony (wskaźnik: aktualizacja katalogu/treści, działająca domena) Format tabeli - adres strony, numer telefonu, e-mail. Parsowanie danych ∙ 1 dzień 6 godzin temu ∙ 19 ofert |
Stworzyć dashboard w https://airtable.com/ dotyczący efektywności reklamowych kreacji z facebook adsPełnoprawne TZ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Bazy danych i SQL, Parsowanie danych ∙ 2 dni 20 godzin temu ∙ 17 ofert |
Stworzenie pliku Exel do załadowania towarów na strony innych partnerów.Interesuje mnie, aby stworzyć tabelę Excel ze wszystkimi parametrami. Oto strona - https://heiztechnik.com.ua/ A pozycje, które mnie interesują, powinny być przeniesione: Kotły ręczne: 1) TIS UNI 15-95 kW (10) szt 2)TIS HARD 150-500 kW (7) szt Kotły na pelety: 1)TIS PELLET… Parsowanie danych ∙ 3 dni 1 godzina temu ∙ 34 oferty |
Wymagany programista do parsowania katalogu i automatyzacji importu danychSzczegółowe TZ w załączonym dokumencie proszę w odpowiedzi podać orientacyjną cenę i terminy realizacji czy masz doświadczenie w parsowaniu dużych katalogów jakie możliwe trudności lub ograniczenia widzisz w tym zadaniu Bazy danych i SQL, Parsowanie danych ∙ 3 dni 3 godziny temu ∙ 39 ofert |
Znaleźć feed produktowy (Google Merchant XML) dla strony na OpenCart
57 PLN
Konieczne jest znalezienie bezpośredniego linku do działającego pliku z danymi produktowymi (XML) konkurenta dla Google Merchant Center Platforma (CMS): OpenCart / ocStore Znajdź oryginalny plik z danymiWymagania dotyczące wyniku: Roboczy link do pliku XML Python, Parsowanie danych ∙ 3 dni 9 godzin temu ∙ 23 oferty |