Usługa skrobania oparta na API, zoptymalizowana
Witaj,
Poszukuję **usprawnionej, opartej na API usługi skrobania** dla sahibinden.com—specjalnie dostosowanej do filtrowanego URL, który dostarczę. Usługa ta musi być wydajna, odporna na zabezpieczenia Cloudflare i zwracać czyste odpowiedzi JSON.
**Zakres pracy:**
- Użyj dostarczonego filtrowanego URL (np. nieruchomości lub pojazdy) jako punktu wejścia.
- Zeskrob oba:
• **Strona z ogłoszeniem**: tytuł, URL, podsumowanie.
• **Strona szczegółowa**: informacje o użytkowniku, cena, data ogłoszenia, URL obrazów i tag kategorii (jak "nieruchomość", "pojazd" lub "inne").
- Zwróć dobrze zorganizowane **wyjście JSON**.
**Kluczowe wymagania techniczne:**
- Udostępnione jako **usługa API HTTP**—klient wysyła żądanie HTTP z URL i otrzymuje JSON.
- Musi być odporna na środki antybotowe Cloudflare, szczególnie obsługując błędy 429 Zbyt Wiele Żądań w sposób elegancki.
- **Opcjonalne wsparcie proxy** (usługa może, ale nie musi, korzystać z proxy w zależności od konfiguracji).
- Musi zawierać strategię awaryjną lub łagodzenia captcha (np. API rozwiązujące CAPTCHA lub łagodna obsługa błędów).
- Solidne zarządzanie sesjami (ciasteczka, nagłówki itp.), ograniczanie liczby żądań, wykładnicze opóźnienie, logika ponawiania i logowanie.
**Wyniki:**
1. **MVP Dowód Koncepcji**: Działający przykład dla dostarczonego URL (kod + krótki film demonstracyjny).
2. **Usługa gotowa do produkcji**: Aplikacja w kontenerze Docker, README opisujące użycie API, format żądania/odpowiedzi, parametry i przykłady.
3. **Utrzymanie**: Gwarancja drobnych aktualizacji (np. zmiany struktury HTML) w ciągu pierwszych 30 dni po dostarczeniu.
**Harmonogram:** Proszę zaproponować swój harmonogram (np. 1 tydzień na MVP, dodatkowy tydzień na finalizację).
**Pożądane umiejętności i doświadczenie:**
- Skrobanie stron internetowych i automatyzacja przy użyciu **Playwright** lub **Puppeteer**.
- Praktyczne doświadczenie z **obejściem Cloudflare i strategiami antybotowymi**.
- Konfiguracja proxy i logika awaryjna.
- Opcjonalnie: metody rozwiązywania CAPTCHA.
- Rozwój usług API, z jasną dokumentacją.
**Aby aplikować:**
- Podziel się wcześniejszymi przykładami PoC lub projektów (najlepiej z wyjściami JSON).
- Podaj krótkie wyjaśnienie techniczne swojego podejścia.
- Dołącz przykład użycia API i zwróconą strukturę JSON.
Nie mogę się doczekać współpracy z przemyślanym, zwracającym uwagę na szczegóły deweloperem!
-
2 dni946 PLN
267 2 dni946 PLNCześć! Zbuduję zoptymalizowaną usługę skrobania HTTP dla sahibinden.com dostosowaną do Twojego filtrowanego URL. Będzie odporna na Cloudflare i zwróci czysty JSON.
-
1 dzień3783 PLN
96620 1276 1 10 1 dzień3783 PLNCześć.Mam doświadczenie z Puppeteer.Jestem gotowy do współpracy
-
14 dni1892 PLN
3305 70 1 14 dni1892 PLNCześć,
Jestem gotowy, aby omówić Twój projekt. Mam duże doświadczenie w pracy z Puppeteer, a także doświadczenie w tworzeniu interfejsów API do zarządzania aplikacjami, planowania zadań i pobierania wyników wykonania.
Szacowany czas realizacji: 1 tydzień na prototyp i dodatkowy tydzień na finalizację.
-
14 dni1324 PLN
5149 210 0 14 dni1324 PLNCześć,
Jestem gotowy, aby omówić Twój projekt. Mam duże doświadczenie w pracy z Puppeteer, a także doświadczenie w tworzeniu interfejsów API do zarządzania aplikacjami, planowania zadań i pobierania wyników wykonania.
Szacowany czas realizacji: 1 tydzień na prototyp i dodatkowy tydzień na finalizację.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Sparsować bazę i dodać do czatu w TGWydobyć bazę z List ua i dodać według numerów do czatu na Telegramie. Czat na temat remontu i designu wnętrz. Parsowanie danych, Praca z klientami ∙ 13 godzin 26 minut temu ∙ 19 ofert |
Należy opracować bota Telegram do monitorowania samochodów z aukcji w USA (Copart, IAAI)Należy stworzyć bota Telegram do automatycznego wyszukiwania i monitorowania samochodów "BUY IT NOW" na aukcjach w USA (Copart, IAAI). Bot powinien działać w trybie automatycznym i wysyłać powiadomienia o nowych samochodach, które odpowiadają zadanym filtrom.Podstawowa… Parsowanie danych, Tworzenie chatbota ∙ 20 godzin 59 minut temu ∙ 70 ofert |
Parsowanie produktów, przygotowanie do importu na WPWydobyć pełny katalog tych stron: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ Wszystkie produkty muszą być połączone w jedną wspólną tabelę do importu do WP. Każdy… Programowanie stron internetowych, Parsowanie danych ∙ 3 dni 13 godzin temu ∙ 57 ofert |
Wymagany specjalista ds. promocji w Telegramie.
107 PLN
Zadania: zapraszanie rzeczywistych użytkowników z bazy nazw użytkowników do nowych czatów oraz wysyłanie wiadomości do docelowej bazy. Interesuje nas tylko jakościowy ruch i praca z żywą publicznością — wykonawców korzystających z botów, sztucznego zwiększania lub niskiej… Parsowanie danych, Promocja w sieciach społecznościowych (SMM) ∙ 8 dni 13 godzin temu ∙ 9 ofert |
Konsultacja dotycząca parsowania subskrybentów kont InstagramWitam. Konieczne jest przeprowadzenie wstępnej oceny możliwości realizacji następującego zadania. Posiadam listę kont na Instagramie. Celem jest uzyskanie danych kontaktowych (w pierwszej kolejności adresów e-mail) użytkowników, którzy obserwują te konta. Wcześniej spotkałem… Parsowanie danych ∙ 12 dni 8 godzin temu ∙ 13 ofert |