OLX Scraper

#scrapy #olx #python3 #parser #scraper #spider

Parser wymaga zainstalowanego Scrapy (co to jest i z czym je jeść - google.com).
Pokażemy link do kategorii, można z dowolnym filtrem, najważniejsze jest, aby podać link, na którym będą reklamy, a następnie odbywa się szybki, wielopoziomowy parsing. Jeśli niepokoi się, że jakiekolwiek 120 towarów parselo prawie minutę, to wszystko z powodu parsingu numeru, tam swoje zamrażarki, ale mimo to bierze numer i nie blokuje (zacząłem ten parser może raz 30 bez proxy, nie zablokowane do tej pory)
Czym jest ten parzer:
- Nazwa ogłoszenia
- imię sprzedawcy
Opis towaru/usługi
ID towaru/usługi
- lokalizacja
- numer telefonu
- cena
- czas publikacji
- Źródło
- Kol-w przeglądarkach