Budżet: 75 PLN Termin: 1 dzień
zwracajcie się
Temat: Optymalizacja skrapingu OLX.pl + Otodom.pl dla płatnego bota Telegram (minimalny ruch/proxy + analiza “jak działają darmowe boty”)
Szukam freelancera, który pomoże z optymalizacją skrapingu OLX.pl i Otodom.pl dla bota Telegram monitorującego ogłoszenia nieruchomości w Polsce.
Płatna usługa monitorowania ogłoszeń nieruchomości według kryteriów użytkownika.
Cena: 1 zł/dzień (~30 zł/miesiąc) za 1 aktywne monitorowanie (zestaw filtrów).
Źródła: OLX.pl + Otodom.pl (główne polskie platformy nieruchomości).
Logika wysyłki:
co 15 minut — sprawdzenie (cykl)
w cyklu szukamy do 5 nowych ogłoszeń
wysyłamy nie wszystko naraz, a co 3–5 minut 1 ogłoszenie, aby rozłożyć obciążenie (w ciągu godziny wychodzi ~4 cykle)
Jest VPS + Docker, jest skrypter/bot.
Baza: Supabase, część logiki w Supabase Functions.
Boty Telegram już istnieją: osobno do ustawień, osobno do powiadomień, osobno do wsparcia.
Nie ładujemy zdjęć (nie pobieramy obrazków), bierzemy tylko:
tekst/opis
linki
filtry
linki do wszystkich obrazków (URL), bez pobierania pliku
Jeśli kilku użytkowników ma identyczne filtry, robimy 1 unikalne wyszukiwanie dla wszystkich, bez duplikowania zapytań.
Nawet po optymalizacjach dotyczących zdjęć i “łączenia identycznych wyszukiwań”, koszty proxy są wysokie, ponieważ:
strona z listą (wynik wyszukiwania) może ważyć ~400–500 KB za zapytanie
szczegółowa strona ogłoszenia (aby uzyskać pełny opis/parametry, jeśli nie ma ich w liście) również może ważyć ~500 KB
jeśli w cyklu bierzemy do 5 ogłoszeń — całkowity ruch może wynosić ~3 MB / 15 minut
to daje około ~288 MB/dobę, ~8.6 GB/miesiąc na 1 unikalne wyszukiwanie
przy założonej cenie proxy 1 GB = 10 zł wychodzi, że jedno aktywne wyszukiwanie może kosztować więcej niż subskrypcja klienta (30 zł/miesiąc), szczególnie jeśli wyszukiwań jest dużo (16 miast i więcej)
Jest jeden aspekt, który chcę rozwiązać:
Jestem subskrybowany na kilka darmowych botów/kanalów Telegram, które już od miesięcy działają w OLX/nieruchomościach.
Wysyłają setki wiadomości dziennie z nowymi ogłoszeniami.
Nie mają:
subskrypcji/płatnych funkcji
reklamy
oczywistej monetyzacji
Jednak ich koszty infrastruktury/proxy muszą być — ale jakoś to robią i nie zamykają się.
Dlatego trzeba zrozumieć, jak uzyskać “nielimitowany ruch” bez banów lub inny sposób pozyskiwania danych
Budżet: 75 PLN Termin: 1 dzień
zwracajcie się
Budżet: 75 PLN Termin: 1 dzień
Dzień dobry. Wydaje mi się, że po prostu walczysz w niewłaściwym miejscu. Pracuję z OLX od kilku lat, mogę bezpłatnie doradzić.
Czekamy na współpracę z Tobą!Budżet: 200 PLN Termin: 1 dzień
Cześć!
Opracowuję boty do Telegramu w NodeJS. Jestem gotów się tym zająć. Piszcie, omówimy.
Budżet: 500 PLN Termin: 2 dni
Cześć,
Miałem doświadczenie we współpracy z popularną agencją w Warszawie Grand, jeśli wiesz. Ale tam zbieraliśmy dane w połączeniu z innymi platformami (mls i inne, nie do końca pamiętam nazwy), jest też serwis, z którego można dodatkowo zbierać informacje, nawet możliwe, że bez proxy. Napisz do mnie na priv, chętnie pomogę w tym, czym mogę i doradzę.
Będę zadowolony ze współpracy!
Budżet: 75 PLN Termin: 1 dzień
Witam!
Mam duże doświadczenie w pisaniu parserów/botów telegramowych.
Pracuję z pythonem i VPS od 5 lat.
Pomogę Ci szybko i jakościowo rozwiązać Twoje pytanie.
Zgłoś się!
Budżet: 1700 PLN Termin: 15 dni
Optymalizacja skrapingu OLX.pl i Otodom.pl dla bota Telegram wymaga kompleksowego podejścia do obniżenia kosztów proxy oraz zapewnienia stabilnego dostępu do danych. W Twoim przypadku kluczowym czynnikiem jest zmniejszenie liczby zapytań do stron z ogłoszeniami oraz szczegółowych ofert, a także wykorzystanie efektywnych metod pozyskiwania danych. W szczególności można skupić się na analizie darmowych botów, aby odkryć, jak uniknęły banów lub zminimalizowały ruch. Na przykład, możliwe jest wykorzystanie headless przeglądarek z inteligentnym zarządzaniem sesjami, integracja z API platform (jeśli dostępne) lub optymalizacja logiki wyszukiwania w celu zminimalizowania duplikacji zapytań.
Moje doświadczenie w rozwijaniu mikrousług, optymalizacji infrastruktury oraz pracy z botami Telegram pozwala na proponowanie rozwiązań, które zmniejszą obciążenie proxy. Na przykład, można wdrożyć system zarządzania proxy z automatycznym wyborem optymalnych tras, a także wykorzystać caching dla powtarzających się zapytań. Ponadto, aby zmniejszyć ruch, można wdrożyć bardziej efektywną logikę przetwarzania stron — na przykład, wykorzystanie parsowania tylko potrzebnych danych (tekstu, linków) bez ładowania pełnej strony.
Kluczowym etapem będzie analiza darmowych botów, aby odkryć techniczne wzorce, które pozwalają na pozyskiwanie danych bez wysokich kosztów. Może to obejmować wykorzystanie prywatnych API, inteligentne zarządzanie sesjami lub optymalizację częstotliwości zapytań. Ważne jest również uwzględnienie możliwości integracji z innymi źródłami lub wykorzystania alternatywnych metod pozyskiwania danych, aby uniknąć ograniczeń platform. Podejście powinno być elastyczne, dostosowane do Twojego harmonogramu i budżetu, z uwzględnieniem skalowania w przypadku wzrostu liczby użytkowników.
Budżet: 500 PLN Termin: 3 dni
Cześć! Zbadałem twój projekt i jestem gotów do pracy. Jestem pewien, że mogę spełnić wszystkie twoje oczekiwania.
Budżet: 3000 PLN Termin: 3 dni
🤝 Jakościowe rozwiązanie twojego zadania — dokładnie na czas
Cześć! Przeczytałem opis twojego projektu i jestem gotów do realizacji.
Gwarantuję głębokie zaangażowanie w projekt i opracowanie wszystkich szczegółów.
Ściśle przestrzegam terminów. Praca będzie gotowa na czas lub wcześniej.
Zawsze jestem w kontakcie i dostarczam raporty na kluczowych etapach.
Czekam na twoją opinię!
Budżet: 300 PLN Termin: 3 dni
Witam. Mam doświadczenie z parserami OLX i podobnych stron. Mogę zoptymalizować ładowanie samej strony, to znaczy ładować tylko potrzebne pola, lub, jeśli to możliwe, przez wewnętrzne API stron.
Budżet: 5000 PLN Termin: 5 dni
Cześć! Mam znaczące doświadczenie w optymalizacji parserów dla dużych projektów. Pracowałem z OLX i Otodom, rozumiem specyfikę ich ochrony i limitów.
📌 Co oferuję:
• Analiza obecnego kodu i wykrywanie "wąskich gardeł" w zużyciu ruchu.
• Wdrożenie efektywnych strategii wykorzystania proxy i rotacji User-Agents.
• Optymalizacja zapytań w celu minimalizacji przesyłania zbędnych danych.
• Ustawienie asynchronicznego parsowania w celu zwiększenia prędkości.
• Integracja z botem Telegram z minimalnym opóźnieniem.
Gwarantuję wysoką jakość optymalizacji, która obniży Twoje koszty na infrastrukturę i proxy.
Budżet: 350 PLN Termin: 5 dni
pracowałem z parsowaniem odotem i olx.
piszcie, wszystko opowiem.
macie początkowo wbudowaną błędną architekturę
Budżet: 6000 PLN Termin: 5 dni
Cześć,
Mogę pomóc Ci w analizie, przeprojektowaniu i znacznym obniżeniu kosztów ruchu i proxy związanych z skrobaniem OLX.pl i Otodom.pl dla Twojej usługi monitorowania na Telegramie, jednocześnie utrzymując ją stabilną i odporną na blokady. Mam praktyczne doświadczenie w skrobaniu o wysokiej częstotliwości, optymalizacji ruchu i omijaniu botów, szczególnie w przypadku rynków i ogłoszeń. Twoja obecna architektura, z VPS + Docker, Supabase, scalonymi wyszukiwaniami i brakiem pobierania obrazów, jest solidna, więc głównym wyzwaniem jest strategia pozyskiwania danych i efektywność kosztowa.
Zacząłbym od analizy wstecznej, jak działają darmowe boty OLX/nieruchomości w dłuższej perspektywie bez widocznej monetyzacji. W praktyce zazwyczaj polega to na unikaniu pełnych załadunków stron, korzystaniu z lekkich punktów końcowych lub wewnętrznych API, agresywnym buforowaniu, sprawdzaniu różnic zamiast ponownego ładowania całych stron wyników, warunkowym pobieraniu stron szczegółowych tylko wtedy, gdy jest to konieczne, odciskaniu palców żądań, które naśladują prawdziwych użytkowników, oraz inteligentnym harmonogramowaniu zamiast stałych interwałów.
Następnie skupiłbym się na cięciu ruchu na cykl, a nie tylko na redukcji użycia proxy. Obejmuje to zmniejszenie rozmiaru ładunku na żądanie, eliminację niepotrzebnych treści HTML/JS, wykrywanie nowych ogłoszeń bez ładowania pełnych stron wyników oraz minimalizowanie pobrań stron szczegółowych poprzez bezpośrednie wydobywanie większej ilości danych z ogłoszeń.
Na koniec mogę pomóc ocenić alternatywne ścieżki dostępu do danych, takie jak ukryte lub wewnętrzne punkty końcowe używane przez front-endy OLX/Otodom, strategie proxy o niskim koszcie lub hybrydowe oraz buforowanie połączone z selektywnym pobieraniem.
Efektem końcowym byłoby jasne wyjaśnienie, jak darmowe boty działają przez miesiące, konkretny plan na znaczną redukcję miesięcznego ruchu, praktyczne zalecenia dotyczące utrzymania bota w stabilności na dużą skalę w wielu miastach oraz wykonalne zmiany w Twojej istniejącej konfiguracji Docker/Supabase. Nie obiecuję „magicznego nieograniczonego ruchu”, ale mogę pomóc Ci zbliżyć się do tego bez blokad, jednocześnie czyniąc model subskrypcyjny ekonomicznie opłacalnym.
Chętnie omówię szczegóły i rozpocznę od audytu Twojej obecnej logiki skrobaka.
Z poważaniem,
Tobias
Budżet: 1000 PLN Termin: 3 dni
Dzień dobry!
Profesjonalnie tworzę boty Telegram i skrypty w Pythonie. Mam doświadczenie z API, proxy, Docker/Supabase. Jestem gotów przeanalizować działanie "darmowych" botów i zoptymalizować skrobanie OLX/Otodom w celu minimalizacji ruchu.
Napisz do mnie w wiadomości prywatnej, ustalimy szczegóły.
Trzeba stworzyć parser do zbierania cen konkurencji, katalog ponad 40 tysięcy produktów. Dostęp do cen jest możliwy tylko po zalogowaniu
Trzeba zdalnie skonfigurować parser (przez Anydesk lub TeamViewer), coś się zepsuło i nie działa poprawnie. Głównie wymiana startowych linków i konfiguracja parsera. Strona https://dveri-pol.com/
Potrzebne jest stworzenie nowoczesnego sklepu internetowego z zabawkami na WordPress (WooCommerce). Główne wymagania: - Responsywny design dla komputerów, tabletów i smartfonów. - Katalog produktów z kategoriami, filtrami i wyszukiwarką. - Strony produktów z opisem, zdjęciami, specyfikacjami i ceną. - Koszyk i składanie zamówienia. - Integracja popularnych metod płatności i dostawy. - Konto osobiste klienta. - Wygodny panel zarządzania do dodawania i edytowania produktów. - Podstawowa optymalizacja SEO i wysoka prędkość ładowania strony. - Ustawienia zabezpieczeń, kopii zapasowej i SSL. Preferowane jest użycie nowoczesnego, lekkiego motywu lub stworzenie indywidualnego designu. Po zakończeniu pracy należy dostarczyć krótką instrukcję obsługi strony.
Potrzebne jest zebranie danych dotyczących kupujących i sprzedających dzieła sztuki. Interesują nas bazy danych stron Ebay oraz specjalistycznych światowych stron poświęconych sztuce.
Trzeba zeskrobać bazę fryzjerów z PKD 96.02. Proszę o ofertę cenową. Czekam na propozycje!!!!!!!!