Zrealizowałem skrypt do automatycznego zbierania produktów z katalogu Prom.ua przez GraphQL API.
Co zostało zrobione:
zbieranie produktów przez API (szybciej i stabilniej niż HTML-parsing)
zrealizowana paginacja (offset) do zbierania dużych ilości
przetwarzanie danych i usuwanie duplikatów
ochrona przed blokadami (opóźnienia, nagłówki)
automatyczne wyeksportowanie do Excel / CSV
Wynik:
zebrano 100+ produktów przy jednym uruchomieniu
stworzony uporządkowany plik Excel (nazwa, cena, sprzedawca)
Technologie:
Python, requests, pandas, GraphQL API
Może być dostosowane do innych kategorii i stron.
#parsing #python #scraping #api #excel #dane
Co zostało zrobione:
zbieranie produktów przez API (szybciej i stabilniej niż HTML-parsing)
zrealizowana paginacja (offset) do zbierania dużych ilości
przetwarzanie danych i usuwanie duplikatów
ochrona przed blokadami (opóźnienia, nagłówki)
automatyczne wyeksportowanie do Excel / CSV
Wynik:
zebrano 100+ produktów przy jednym uruchomieniu
stworzony uporządkowany plik Excel (nazwa, cena, sprzedawca)
Technologie:
Python, requests, pandas, GraphQL API
Może być dostosowane do innych kategorii i stron.
#parsing #python #scraping #api #excel #dane