TZ: parser sprzedawców/towarów z filtrami i multizadaniowością
163 PLN
Potrzebny specjalista od web-scrapingu i ochrony przed botami.
Strona aktywnie blokuje proxy i scraperów (stałe CAPTCHA / przekierowanie na strony ochrony przed botami).
Należy zrealizować stabilne wielowątkowe parsowanie z obejściem DataDome / Cloudflare, aby strona nie zwracała błędów (403 / 429 / captcha-loop).
Podstawowe wymagania
1) Wielowątkowość / asynchroniczność
stabilna praca 40+ równoległych wątków (do omówienia)
kontrola częstotliwości zapytań, kolejki, backoff
bez degradacji wydajności
2) Proxy
wspieranie HTTP / SOCKS
automatyczna rotacja przy CAPTCHA, banie, błędach
możliwość oddzielnego proxy dla każdego wątku
uwzględnienie reputacji IP
3) Obejście ochrony przed botami
emulacja prawdziwej przeglądarki (Playwright / Selenium headless lub analog)
realistyczne nagłówki, user-agent, cookies, opóźnienia
uzyskanie i utrzymanie ważnej sesji
automatyczne rozwiązywanie CAPTCHA (2Captcha / CapSolver lub analog)
4) Odporność
obsługa blokad i przekierowań
auto-odzyskiwanie sesji
logowanie błędów i przyczyn blokad
Technologie
Język: Python (preferowany)
Wynik
działający kod / moduł
instrukcja uruchomienia i zalecenia dotyczące limitów / proxy
potwierdzenie stabilnej pracy pod ochroną
szczegóły w wiadomościach prywatnych
-
хоть бы сайт указали...
-
Скажіть сайт, тоді поговоримо
-
Напишіть посилання на сайт
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Konsultacja dotycząca parsowania subskrybentów kont InstagramWitam. Konieczne jest przeprowadzenie wstępnej oceny możliwości realizacji następującego zadania. Posiadam listę kont na Instagramie. Celem jest uzyskanie danych kontaktowych (w pierwszej kolejności adresów e-mail) użytkowników, którzy obserwują te konta. Wcześniej spotkałem… Parsowanie danych ∙ 1 dzień 19 godzin temu ∙ 12 ofert |
Potrzebny specjalista do wyszukiwania kontaktów decydentów w UkrainieKonieczne jest zebranie bazy (lub gotowej bazy) kontaktów osób podejmujących decyzje (LPR) w firmach Ukrainy. Wyszukiwanie i zbieranie informacji, Parsowanie danych ∙ 1 dzień 23 godziny temu ∙ 16 ofert |
Trzeba zeskrobać dane z LinkedIn
Potrzebujemy wyciągnąć dane z LinkedIn według naszej listy. Dla każdego wpisu należy znaleźć i zebrać dostępne dane, jeśli takie są na profilu LinkedIn, w tym zdjęcie profilowe w serwisie społecznościowym LinkedIn, adres e-mail, linki do mediów społecznościowych, stronę… Parsowanie danych ∙ 2 dni 5 godzin temu ∙ 27 ofert |
Parsowanie i klasyfikacja danych
Szukamy dewelopera do realizacji systemu zbierania i strukturyzacji danych z otwartych źródeł. Posiadamy bazę właścicieli małych firm w USA, która zawiera imię i nazwisko, nazwę firmy, adres oraz stan. Należy zbudować proces wzbogacania tych rekordów dodatkowymi informacjami z… Programowanie stron internetowych, Parsowanie danych ∙ 2 dni 6 godzin temu ∙ 41 ofert |
Svitlahata
61 PLN
Potrzebne jest zaimportowanie 1819 produktów z pliku XML/YML Prom.ua do OpenCart 3. Jest gotowy plik XML, który zawiera nazwy produktów, opisy, ceny, zdjęcia, cechy, producentów i kategorie. Wymagane: zaimportować wszystkie produkty do OpenCart 3; utworzyć i powiązać… Content Management Systems, Parsowanie danych ∙ 3 dni 9 godzin temu ∙ 34 oferty |
Charków