Budżet: 19800 UAH Termin: 7 dni
Proponuję dopracować wasz parser do stabilnej pracy z Google, rozwiązując problem captcha i błędów 403, a także optymalizując wykorzystanie Selenium i asynchronicznego kodu.
Co zostanie zrobione:
Rozwiązanie problemu z captcha:
Ustawienie poprawnego zapisywania sesji (ciasteczka, nagłówki, user-agent).
Dodanie automatycznego odświeżania ciasteczek przez Selenium po rozwiązaniu captcha.
Integracja Selenium:
Wykorzystanie Selenium do wstępnej inicjalizacji sesji.
Przekazywanie ciasteczek i danych sesyjnych do aiohttp do dalszego asynchronicznego parsowania.
Obchodzenie ograniczeń Google:
Dodanie rotacji IP przez proxy.
Dynamiczna zmiana user-agent na poziomie zapytań.
Ustawienie losowych przerw między zapytaniami.
Testowanie i optymalizacja:
Sprawdzenie stabilności parsera przy dużej liczbie zapytań.
Testowanie szybkości działania i obchodzenia ograniczeń.
Etapy wykonania:
Podłączenie do waszego środowiska przez AnyDesk w celu analizy kodu.
Wprowadzenie zmian w logice zapisywania sesji i obsługi captcha.
Integracja Selenium do interakcji z Google.
Testowanie i dostosowanie działania parsera w rzeczywistych warunkach.
Rezultat:
Parser, który omija captcha i błędy 403 Google.
Optymalizowana szybkość i niezawodność działania.
Gotowy do skalowania i dalszego wsparcia.
Gotowy do rozpoczęcia pracy i uwzględnienia wszystkich waszych wymagań. Napisz, aby omówić szczegóły!
