Parsowanie danych

Budżet: 7777 UAH Termin: 7 dni

Dzień dobry.

Realizuję rozwój parserów opartych na Pythonie z naciskiem na omijanie systemów ochrony oraz pracę w trybie wielowątkowym. Ponieważ kluczowa trudność projektu polega na omijaniu Cloudflare i autoryzacji, architektura skryptów będzie zbudowana wokół narzędzi, które w pełni imitują zachowanie prawdziwego użytkownika.

Rozwiązania desktopowe i C# nie są używane — oprogramowanie będzie opracowane jako skrypty konsolowe, gotowe do uruchomienia na serwerze (VPS/VDS) według harmonogramu (Cron).

Rozwiązanie techniczne
Omijanie Cloudflare i autoryzacja:

Dla stron z podstawową ochroną i sesyjną autoryzacją użyję biblioteki CloudScraper lub curl_cffi, które potrafią podmieniać odciski TLS/JA3 przeglądarki.

Dla trudnych donorów z „ciężką” ochroną Cloudflare (Turnstile, wstrzyknięcia JS) podłączę automatyzację przez Playwright lub Selenium w trybie serwisowym (headless), wspólnie z biblioteką Undetected Chromedriver.

Zrealizuję logikę przechowywania i aktualizacji sesyjnych ciasteczek (cookies), aby skrypt wykonywał autoryzację tylko w razie potrzeby, a nie przy każdym zapytaniu do produktu.

Obowiązkowo podłączę rotację elitarnych rezydenckich lub mobilnych proxy przez pulę pobrań, aby zapobiec zablokowaniu IP.

Parsowanie i przechowywanie w MySQL:

Napiszę jasne selektory (BeautifulSoup/lxml) do zbierania charakterystyk, cen, artykułów i opisów produktów.

Zintegruję konektor do waszej bazy danych przez ORM SQLAlchemy lub PyMySQL. Dane przed importem będą przechodziły walidację i normalizację, aby w pełni odpowiadały strukturze i typom pól waszej aktualnej bazy danych.

Zrealizuję sprawdzanie duplikatów (według artykułu lub ID donora), aby aktualizować istniejące produkty (np. aktualizować cenę) i dodawać tylko nowe.

Ładowanie zdjęć na serwer:

Pobieranie obrazów będzie odbywać się asynchronicznie (aiohttp lub httpx) dla maksymalnej prędkości.

Skrypt automatycznie zmieni nazwy plików według waszego standardu (np. podstawiając artykuł produktu) i zapisze je w wskazanych folderach na serwerze, a względne ścieżki do zdjęć zapisze w odpowiednich komórkach MySQL.

Co jest potrzebne do startu i oceny:
Proszę przesłać techniczne zadanie w wiadomościach prywatnych.

Proszę podać przykład 1–2 najtrudniejszych stron-donorów, abym mógł ocenić typ ochrony Cloudflare i logikę autoryzacji.

Ile mniej więcej produktów oczekuje się do parsowania z jednego źródła?

Jestem gotów omówić szczegóły, po zapoznaniu się z TŻ sformułuję dokładne terminy i budżet dla każdego donora. Rozwiń

Budżet: 18000 UAH Termin: 5 dni

W kwestii kosztów - 7777 UAH, najprawdopodobniej nie pokryje 10+ donorów z autoryzacją, ochroną i przesyłaniem zdjęć do MySQL. Proponowałbym nie marnować budżetu na zgadywanie, a zacząć od pierwszego etapu - audyt specyfikacji, sprawdzenie 1 donora, schemat importu do waszej bazy i działający prototyp. Orientacyjny koszt takiego etapu - 18000 UAH i 5 dni roboczych.

Zobacz, tu jest niuans - CLOUDFRAME lub Cloudflare trzeba sprawdzać dla każdego donora osobno. Nie ma uniwersalnego uczciwego przełącznika, i nie będę obiecywał magii dla ładnej stawki =/ Pracujemy tylko z tymi źródłami, gdzie macie prawo do autoryzowanego dostępu i zbierania danych.

> W realizacji widzę to jako serwerowy parser bez programów desktopowych i bez C#
> autoryzacja dla każdego donora
> normalizacja produktów pod waszą istniejącą bazę MySQL
> przesyłanie zdjęć na serwer
> kolejka zadań, logowanie błędów, powtórzenia, kontrola zmian cen i stanów
> po pierwszym donorze - dokładna ocena pozostałych 10+ źródeł

Aby ocenić cały zakres, potrzebne są 2 pytania.
> możecie przesłać specyfikację i 1 przykład donora
> macie już opis struktury MySQL lub dostępny schemat tabel do przeglądu

Podobne typy zadań przypadki Ingello
> https://business.ingello.com/prime-eva - dane produktowe, detal, systemowa praca z katalogiem
> https://business.ingello.com/eva - e-commerce i skomplikowane zadania integracyjne
> https://business.ingello.com/forma-crm - logika biznesowa, baza danych, procesy i kontrola operacji

Strona główna dla FLH - https://systems-fl.ingello.com/ua Rozwiń

Budżet: 7777 UAH Termin: 1 dzień

Iwanie, mogę zrealizować parsery dla zabezpieczonych donorów z autoryzacją i Cloudflare, dostosować je do waszej bazy MySQL i przesyłania zdjęć na serwer. Pracuję z automatyzacją przeglądarki oraz skomplikowanymi źródłami e-commerce, więc będę w stanie uwzględnić różny poziom ochrony i zorganizować dane zgodnie z wymaganiami. Jeśli prześlesz przykład donora, szybko ocenię podejście i ryzyka.

Budżet: 7777 UAH Termin: 1 dzień

Aby ocenić, należy przejrzeć strony. Orientacyjny koszt od 3000 za 1 stronę.

Budżet: 7777 UAH Termin: 14 dni

Dzień dobry! Parsowanie z witryn z autoryzacją i omijaniem Cloudflare — zajmuję się tym na Pythonie, dane zapisuję w MySQL, a zdjęcia przechowuję na serwerze. 10+ donorów z różnymi zabezpieczeniami normalnie rozbiorę, metodę dobieram pod każdy osobno. Prześlijcie specyfikację i przykład jednego donora — sprawdzę poziom zabezpieczeń i powiem dokładniej o terminach. Podstawową partię orientacyjnie zrobię w półtora do dwóch tygodni.

Budżet: 7777 UAH Termin: 14 dni

Iwanie, obejście anty-bota na stronach z autoryzacją to nie zadanie na poziomie "napiszę skrypt na requests". Tutaj jest inna natura. Trzeba utrzymać żywą sesję: logować się, przechowywać ciasteczka, podmieniać realistyczny odcisk przeglądarki, a gdy donor zadaje wyzwanie JS lub coś w stylu Cloudflare Turnstile - uruchomić headless-przeglądarkę i przejść weryfikację już tam. Goły klient HTTP odrzuci taką stronę przy pierwszym żądaniu.

Drugie, co widać z opisu. 10+ donorów o różnym stopniu trudności to nie jeden uniwersalny parser. Jeden parser dla wszystkich tutaj łamie się ciągle: każdy donor ma swoją strukturę, swoją autoryzację, swój poziom ochrony. Działająca schemat to rdzeń plus adapter dla każdego donora osobno. Kolejka donor - adapter - normalizacja - zapis w MySQL i zdjęcie na serwer. Rdzeń utrzymuje sesje, proxy, retry; adapter wie tylko, jak wydobyć dane z konkretnej strony. Dodanie nowego donora później to napisanie jednego adaptera, a nie przepisywanie wszystkiego.

Kilka pytań co do sedna, żeby nie zgadywać. Jaki tam jest naprawdę poziom ochrony - prosty JS-redirect czy pełnoprawny Turnstile / hCaptcha? Autoryzacja na każdym donorze to login-hasło czy jest API-token? Zdjęcia ściągane są po bezpośrednim URL, czy też są zamknięte za sesją?

Zrobiłbym tak. Najpierw jeden donor pilotażowy - biorę średni pod względem trudności, doprowadzam pełny łańcuch do zapisu w waszej bazie, pokazuję jakość danych. Wy patrzycie, czy struktura pasuje do istniejącej Bazy Danych bez bólu - a wtedy rozkładamy na resztę dziewięciu z tym samym szkieletem.

Stos - Python, żadnego desktopu i C#, tutaj się zgadzamy.

Portfolio do oceny poziomu inżynieryjnego: siteforsites.com i accessibilityscanner.top - tam widać pracę z sesjami, kolejkami i uptime'em usług, a nie jednorazowe skrypty. Mój ranking jest na razie skromny, więc interes jest bezpośredni - zrobić to czysto i wejść do was w stałe opinie, a nie zgarnąć zaliczkę i zniknąć.

Prześlijcie TŻ i przykład jednego donora w korespondencję - zobaczę rzeczywistą ochronę i powiem konkretnie, od czego zacząć pilotaż. Rozwiń

Budżet: 7777 UAH Termin: 7 dni

Cześć, pracowałem nad parserem dla agregatora cen — omijałem zabezpieczenia CLOUDFLARE i zbierałem dane z 15+ stron z autoryzacją, parsując 50 000+ produktów ze zdjęciami bezpośrednio do MySQL.

Powiedzcie, czy źródła mają zabezpieczenia typu reCAPTCHA, czy wystarczy omijanie CLOUDFLARE + autoryzacja przez sesje? I czy potrzebne jest regularne aktualizowanie danych (na przykład codzienne uruchamianie parsera)?

Proponuję się skontaktować, chętnie doradzę technicznie i wspólnie opracujemy plan rozwoju + opowiem o moim zespole!

Budżet: 7777 UAH Termin: 5 dni

Iwanie, jeśli potrzebujesz parsera, który stabilnie działa z autoryzacją, różnymi poziomami ochrony i adaptacją do twojej bazy MySQL, mogę to wziąć w pracy. Mam doświadczenie z Laravel/Vue oraz integracjami w istniejące systemy, więc będę w stanie nie tylko zebrać produkty i zdjęcia, ale także dostosować strukturę danych do strony. Mogę zacząć od analizy TŻ oraz jednego dawcy, aby szybko ocenić złożoność i zaproponować niezawodne rozwiązanie.

Budżet: 7777 UAH Termin: 7 dni

Witam.
Mam duże doświadczenie w pisaniu takich parserów/skrypterów.
Pracuję jakościowo i w terminie.
Piszcie, chętnie porozmawiam na temat Waszego zadania.

Budżet: 7777 UAH Termin: 16 dni

Cześć! Tworzę parsery w Pythonie (Scrapy + Playwright): omijanie Cloudflare, praca z autoryzacją i zarządzanie sesjami przez rezydenckie proxy, zapis do gotowej MySQL i przesyłanie zdjęć na serwer z deduplikacją.

Twoje zadanie jest realistyczne, ale objętość i złożoność mocno zależą od konkretnych donorów — omijanie Cloudflare może być zarówno trywialne, jak i kosztowne. Proszę, prześlij mi specyfikację oraz 2–3 przykłady donorów (najlepiej najbardziej zabezpieczonych) — sprawdzę poziom ochrony i podam dokładną ocenę czasową.

Co do budżetu: 8 000 UAH to normalny punkt odniesienia dla części objętości, ale ostateczny zakres podam po zapoznaniu się z donorami, ponieważ jeden trudny donor z Cloudflare pod względem nakładów pracy jest równy kilku łatwym. Proponuję podejście etapowe: najpierw szkielet + 2–3 donorów, a potem reszta. W ten sposób zobaczysz wyniki przed pełną płatnością.

Budżet: 10000 UAH Termin: 7 dni

Dzień dobry, czy możesz przesłać listę stron? Cena będzie formułowana na podstawie stron. Można obejść blokady, generując ciasteczka i nagłówki w przeglądarce, a następnie je wykorzystując. Mam doświadczenie w parsowaniu, pracowałem w firmie Webpersers.

Budżet: 7777 UAH Termin: 18 dni

Witaj!

Zwróć uwagę na realizację twojego projektu na stacku PHP/Laravel zamiast Python. Często dla parserów z przyzwyczajenia wybiera się Python, ale jeśli twoja działająca baza danych MySQL oraz sam serwis działają na PHP (lub popularnych CMS), integracja zewnętrznego skryptu Python stworzy zbędne obciążenie dla infrastruktury i znacznie utrudni utrzymanie.

Dlaczego Laravel to idealne i znacznie praktyczniejsze rozwiązanie dla twojego zadania:

1. Natywna integracja z MySQL: Żadne "kule" przy synchronizacji danych. Laravel Eloquent pozwala bezpiecznie, szybko i bez pośredników dostosować rozparsowane dane do struktury twojej bazy danych.
2. Przetwarzanie w tle i kolejki (Queues): Masz 10+ donorów. Jeśli jedna strona tymczasowo "padnie" lub zablokuje zapytanie, kolejka Laravel po prostu ustawi zadanie do ponownego wykonania po pewnym czasie, nie zatrzymując parsowania innych 9 donorów. To działa stabilnie, autonomicznie i nie obciąża pamięci serwera.
3. Ominięcie Cloudflare: Sam w sobie Python nie omija Cloudflare lepiej niż PHP. Ominięcie w pełni zależy od emulacji prawdziwej przeglądarki (wiarygodne TLS-fingerprints, rotacja resident proxy, praca z bezgłowym Chrome przez Puppeteer/Playwright). Realizujemy to na poziomie zapytań serwerowych lub za pomocą lekkich aplikacji Node.js, które są doskonale zarządzane bezpośrednio z Laravel.
4. Ładowanie zdjęć na serwer: Laravel ma potężny wbudowany system pracy z plikami (Flysystem), co pozwoli optymalizować, unikalizować i rozkładać zdjęcia po folderach twojego serwera "na bieżąco".

Jestem gotów zapoznać się z technicznym zadaniem i przykładami stron-donorów, aby szczegółowo omówić algorytmy omijania zabezpieczeń oraz strukturę importu. Napisz do mnie, prześlę przykłady podobnych rozwiązań. Rozwiń

Budżet: 7777 UAH Termin: 1 dzień

Witam! Regularnie zajmuję się parsowaniem, z omijaniem cloudflare i autoryzacją. Proszę o listę stron do zapoznania się, rejestracja na stronach nie jest skomplikowana, wystarczy tylko email? Czy potrzebny jest telefon, edrpou i inne dane osobowe? Piszcie na prywatne. Termin i cena na razie są orientacyjne.

Budżet: 7777 UAH Termin: 2 dni

Cześć! Robię takie parsery, od razu pod kątem Cloudflare i autoryzacji.

Pod ochroną i strony z logowaniem prowadzę parser przez aktywną sesję: raz się autoryzuję, trzymam ciastka, a potem już działam pod nimi. Na trudnym Cloudflare z wyzwaniem JS czy Turnstile podnoszę przez headless-przeglądarkę, przechodzę weryfikację, a przy 403 lub utracie sesji automatycznie się ponownie autoryzuję, aby zbieranie nie zatrzymywało się w nocy. Tempo ludzkie, aby konta nie leciały w bana.

Gdy donorów 10+ i ochrona w każdym inna, robię wspólne jądro (sesja, autoryzacja, retry, dedup) plus osobny adapter pod każdą stronę. Wtedy dodanie nowego donora to nowy adapter, a nie przepisywanie wszystkiego.

Dane wkładam bezpośrednio do waszej MySQL, dopasowuję pola do istniejącej struktury, zdjęcia ściągam na serwer. Prześlijcie specyfikację i przykład donora, a powiem dokładnie, jaki tam jest poziom ochrony i jak go zdobyć. Będę wdzięczny za współpracę.

Budżet: 7777 UAH Termin: 10 dni

Cześć, Iwanie!

Zainteresował mnie Twój projekt. Zadanie w pełni odpowiada mojemu profilowi: mam duże doświadczenie w web scraping na Pythonie (żadnego C# ani rozwiązań desktopowych) oraz w konfiguracji skryptów serwerowych.

Ponieważ wskazany budżet jest orientacyjny, jestem gotów zaproponować elastyczne i przejrzyste warunki współpracy po zapoznaniu się z zadaniem technicznym. Na podstawie Twojego opisu proponuję następujące rozwiązania techniczne:

Obchodzenie Cloudflare: Dla stron o wysokim poziomie ochrony będziemy używać połączenia Playwright / Undetected Chromedriver wraz z wysokiej jakości rotacyjnymi proxy oraz emulacją zachowania prawdziwego użytkownika (konfiguracja odcisków TLS i nagłówków). To zminimalizuje ryzyko blokad.

Scraping z autoryzacją: Zrealizuję mechanizm zapisywania i automatycznego odnawiania sesji (cookies/tokens). Jeśli podczas scrapingu sesja się zamknie — skrypt automatycznie wykona ponowne logowanie bez zatrzymywania procesu.

Modularna architektura (10+ donorów): Nie będziemy pisać jednego gigantycznego chaotycznego kodu. Stworzymy jedną podstawową klasę-parser (odpowiedzialną za pracę z bazą danych, pobieranie zdjęć na serwer, pracę z proxy) oraz osobne lekkie moduły dla każdego donora. To pozwoli łatwo utrzymywać parsery, jeśli któryś z serwisów zmieni swój design.

Integracja z MySQL: Napiszę mapowanie danych pod strukturę Twojej aktualnej bazy, aby sparsowane informacje były wprowadzane bez błędów i duplikatów. Zdjęcia będą ładowane bezpośrednio na Twój serwer z optymalizacją rozmiaru, a do bazy będą zapisywane poprawne ścieżki do nich.

Jak proponuję zorganizować pracę i wycenę:
Ponieważ donorzy mają różną złożoność i ochronę, najwygodniejszą opcją będzie podzielenie projektu na kilka etapów (sprintów) z płatnością etapową. Na przykład, oceniać i oddawać w pulach po 2-3 donorów. To jest bezpieczne dla Ciebie i wygodne dla mnie.

Będę wdzięczny, jeśli prześlesz mi TŻ oraz przykład przynajmniej jednego trudnego donora w prywatnych wiadomościach. Po tym będę mógł podać dokładne terminy i ostateczną cenę za cały projekt lub za każdego pojedynczego donora.

Z poważaniem, Ołeksandr Rozwiń

Budżet: 8000 UAH Termin: 4 dni

Witam! Zadanie w pełni odpowiada mojemu profilowi. Specjalizuję się w pisaniu serwerowych parserów (bez C# i desktopu) z omijaniem Cloudflare oraz autoryzacją na donorach. Proszę o przesłanie specyfikacji oraz linków do stron do szczegółowej analizy. Po zapoznaniu się będę mógł podać dokładne terminy i budżet.

Budżet: 7777 UAH Termin: 1 dzień

Іван, witam!
Piszę serwery parserów w Pythonie. Dla stron z autoryzacją utrzymuję sesję przez zapisane ciasteczka, dla Cloudflare w zależności od poziomu ochrony - podmiana odcisku TLS żądania lub pełny headless-przeglądarka, jeśli jest weryfikacja JS lub captcha.

Pod każdego darczyńcę osobny mały moduł z własną logiką logowania i parsowania kart. Wszystkie moduły łączą się z jednym wspólnym mechanizmem (kolejki żądań, ponowne próby przy awarii, ładowanie zdjęć). Tak zmiana w układzie lub ochronie na jednej stronie nie zatrzymuje parsowania innych 9.

Najpierw wezmę do pracy najtrudniejszego z darczyńców, aby od razu zrozumieć rzeczywisty zakres pracy, a nie oceniać cały projekt na podstawie najłatwiejszego przykładu.
Gotowe dane zapisuję w waszej bazie MySQL z polami pod istniejącą strukturę tabel, ponowne uruchomienie aktualizuje istniejące produkty, a nie tworzy kopie. Jeśli gdzieś będą potrzebne proxy lub usługa antycaptcha, powiem koszt z wyprzedzeniem.

Proszę, prześlij specyfikację i przykład jednego darczyńcy (najtrudniejszego).

Budżet: 18000 UAH Termin: 5 dni

mamy praktycznie gotowe rozwiązanie do serwerowego parsowania produktów z importem do MySQL, możemy szybko dostosować pod waszych donorów i omówić etap startowy tutaj na giełdzie, jestem w kontakcie ))

co do budżetu - 7777 UAH dla 10+ donorów z autoryzacją i różnymi zabezpieczeniami, z odczuciem, nie pokryje niezawodny moduł nawet dla części zadania.
proponowałbym wejść pierwszym etapem - 18000 UAH i 5 dni.
za ten etap bierzemy TŻ, jeden donor, struktura waszej bazy, import produktów i zdjęć na serwer, logowanie błędów, podstawowa kolejka aktualizacji i mapowanie pól.
dalej już normalnie liczymy wszystkich 10+ donorów bez fantazji na kawowej fusie.

ważny niuans - pracujemy tylko tam, gdzie macie legalne prawo do pozyskiwania danych i korzystania z autoryzowanego dostępu.
szary obejście zabezpieczeń nie obiecuję, ale możemy zrobić stabilne serwerowe zbieranie przez dozwolone scenariusze, limity, kontrola sesji, powtórzenia, ładowanie zdjęć i czystą adaptację pod istniejące MySQL.

potrzebne 2 doprecyzowania.
- ile pól w produkcie trzeba przenosić - cena, stan, cechy, wariacje, kategorie, opis, zdjęcie
- aktualizacja ma być raz dziennie, według harmonogramu, czy prawie w czasie rzeczywistym

relewantne przykłady.
- https://business.ingello.com/prime-eva - e-commerce i systemowa praca z danymi towarowymi i operacyjnymi
- https://business.ingello.com/eva - detal, automatyzacja procesów i danych
- https://business.ingello.com/forma-crm - skomplikowane wewnętrzne systemy, baza, logika, księgowość

nasz profil dla FLH - https://systems-fl.ingello.com/ua

w tym zadaniu głównie chodzi nie tylko o zebranie stron, ale o to, aby import działał stabilnie po zmianach u donorów )) Rozwiń

Budżet: 7500 UAH Termin: 4 dni

Witam.
Dla takiego projektu najpierw ważne jest sprawdzenie jednego konkretnego dostawcy. Strony mogą różnić się autoryzacją, formatem kart produktów, dostępem do zdjęć oraz sposobem pozyskiwania danych, dlatego jednolita ocena dla wszystkich 10+ źródeł będzie niedokładna.
Pracuję z źródłami, dla których masz autoryzowany dostęp i dozwolony format pozyskiwania danych: API, eksport cen lub uzgodniona automatyzacja panelu webowego. Jeśli strona blokuje automatyzację lub wymaga CAPTCHA, warto osobno uzgodnić oficjalny kanał danych.
Proponuję zacząć od jednego dostawcy:
analiza dostępu i struktury produktów;
adapter do twojej bazy MySQL;
ładowanie zdjęć na serwer;
normalizacja pól i ochrona przed duplikatami;
logowanie błędów i wyników importu.
Po pilotażu będzie widać jakość danych w twojej bazie, a także będzie można dokładnie ocenić każdego następnego dostawcę bez ryzyka dla całego projektu.
Wstępna ocena 2 500–3 000 UAH za dostawcę.
Przed rozpoczęciem pracy potrzebne są: specyfikacja, przykład dostawcy, testowy autoryzowany dostęp i struktura bazy MySQL. Rozwiń

Budżet: 7776 UAH Termin: 12 dni

możecie dostarczyć listę stron i specyfikację techniczną?
_________________________
_________________________

Budżet: 7777 UAH Termin: 4 dni

Trzeba oglądać i oceniać każdą stronę-donora osobno. Bardzo przybliżona cena 2000 UAH za jedną stronę. (i terminy 2-4 dni) Używam python, uv, github, docker.

Budżet: 7777 UAH Termin: 3 dni

Witaj! Parsowanie to moja główna specjalizacja: zbierałem dane z witryn z autoryzacją i ochroną przed botami, pracuję w Pythonie (Playwright + requests), więc format „dane do twojego MySQL + zdjęcia na serwer” to standardowy dla mnie proces.

Proponuję etapowy format: biorę 1–2 źródła jako pilotaż — oceniacie jakość danych i szybkość, następnie przechodzimy do reszty według priorytetu. Adaptację pól do waszej struktury bazy danych robię według waszego TŻ 1:1.

W cenę wliczam miesiąc wsparcia: jeśli źródło zaktualizuje ochronę — naprawię bez dodatkowych opłat.

Proszę, prześlijcie TŻ i przykład źródła — po przeglądzie potwierdzę terminy dla pilota (orientacyjnie 2–3 dni na pierwsze źródło).

Budżet: 7777 UAH Termin: 1 dzień

Witaj, Iwanie! Tutaj najważniejsze jest nie napisać parsera, a utrzymać go przy życiu - na stronach z autoryzacją i Cloudflare zwykłe zapytanie umiera od razu, potrzebna jest żywa sesja przeglądarki z rotacją proxy i oddzielny adapter dla każdego darczyńcy, aby jedna strona nie zrujnowała całego systemu. Zacząłbym pilota nie od prostego, a od najbardziej zabezpieczonego darczyńcy - to on pokazuje sufit projektu: jeśli go utrzymamy - pozostałe dziewięć pójdzie tym samym schematem. W ten sposób od razu widzisz jakość danych w swojej bazie i nie płacisz za kota w worku. Prześlij specyfikację i przykład jednego darczyńcy - zobaczę rzeczywisty poziom ochrony oraz podaj konkretne terminy i cenę w etapach.

Budżet: 7777 UAH Termin: 10 dni

Jestem gotów szybko i jakościowo zrealizować Twoje zamówienie. Mam doświadczenie w pracy z podobnymi projektami, zawsze przestrzegam terminów i wymagań technicznych. Będę zadowolony ze współpracy!

Budżet: 10000 UAH Termin: 5 dni

Dzień dobry.
W pracy, stale wykonuję podobne zadania.
Jeśli to interesujące, możemy współpracować na stałe. A nie jednorazowo.
Będzie to korzystne dla obu stron.
Jeśli jednorazowo, to jeden projekt od 1000 do 5000 zł. W zależności od strony.
Miłego dnia.

Budżet: 7777 UAH Termin: 1 dzień

Dzień dobry. Mam ogromne doświadczenie w parsowaniu zabezpieczonych przez Cloudflare stron internetowych. Do tego zadania mam gotowy moduł omijania zabezpieczeń. Ostateczna cena zależy tylko od stron. Chętnie omówię szczegóły w wiadomościach prywatnych!

Budżet: 7500 UAH Termin: 5 dni

Witam, Ivan! Doskonale rozumiem Twoje zadanie. Parsowanie stron z autoryzacją i ochroną Cloudflare to zawsze gra na dłuższą metę: zwykłe zapytania przez requests lub skrypty „na kolanie” będą tutaj blokowane na pierwszym kroku. Jestem gotów opracować dla Ciebie niezawodne rozwiązanie serwerowe w Pythonie 3.12, w pełni dostosowane do Twojej bazy danych MySQL.

Nie rozważam opcji desktopowych ani C#, piszę wyłącznie czysty kod serwerowy. Aby system działał stabilnie i nie psuł się przy zmianie układu jednej ze stron, proponuję architekturę modułową:

1. Ominięcie Cloudflare i aktywne sesje: Do parsowania skonfiguruję Playwright z modyfikacjami Stealth. Skrypt będzie emulować zachowanie prawdziwego człowieka, przechodzić kontrole TLS-fingerprint, skutecznie obsługiwać wyzwania JS od Cloudflare, logować się i niezawodnie utrzymywać ciasteczka autoryzacji w ramach sesji.
2. Jądro architektoniczne i adaptery: Nie będziemy pisać 10 różnych ciężkich parserów. Stworzę jedno zarządzające jądro (które odpowiada za rotację proxy, sesje, logowanie i przesyłanie zdjęć na serwer) i napiszę osobne lekkie wtyczki-adaptery dla każdego źródła. Jeśli jeden z 10+ stron zmieni design, będziesz musiał poprawić tylko jeden izolowany plik, a cały reszta systemu będzie działać.
3. Integracja z Twoją MySQL: Skonfiguruję dokładną normalizację danych. Skrypt będzie przekształcał sparsowane karty produktów ściśle do struktury istniejących tabel w Twojej bazie danych, wykluczając duplikaty według unikalnych artykułów.

Podany budżet i termin 5 dni zakładam na stworzenie ogólnego jądra serwerowego, integrację z Twoją MySQL i pełną debugowanie pierwszych 2-3 źródeł jako etap pilotażowy. Zobaczysz jakość danych w swojej bazie, a po tym będziemy mogli kolejno podłączyć pozostałe strony.

Proszę, daj znać, na jakim hostingu/serwerze planujesz uruchomić system i jaki jest szacunkowy całkowity wolumen produktów, który planujesz zbierać z jednej strony w jednym sesji? Rozwiń

Budżet: 7777 UAH Termin: 1 dzień

Dzień dobry.
Mam już gotowy parser na node js, który omija cloudflare.
Jeśli masz pytania, możesz napisać do mnie w wiadomości prywatnej.

Budżet: 8000 UAH Termin: 1 dzień

Witam. Jestem gotów opracować niezawodny i skalowalny system parsowania, który skutecznie obejdzie skomplikowane zabezpieczenia takie jak Cloudflare i będzie działał z autoryzowanymi sesjami na ponad dziesięciu różnorodnych źródłach, stosując rozproszoną architekturę z asynchronicznymi frameworkami i narzędziami automatyzacji przeglądarek. Szczególną uwagę poświęcę stabilności działania, minimalizacji ryzyka blokady poprzez przemyślaną rotację IP i User-Agent, a także dokładności adaptacji zebranych produktów i zdjęć do istniejącej bazy danych MySQL. Mam znaczące doświadczenie w realizacji podobnych projektów dla dużych zasobów e-commerce, co pozwala mi wykorzystać sprawdzone rozwiązania do przyspieszenia rozwoju i zapewnienia wysokiej jakości. Wszystkie szczegóły realizacji, ostateczny budżet i terminy proponuję omówić w wiadomościach prywatnych.

Budżet: 7777 UAH Termin: 1 dzień

Dzień dobry, jestem gotów wykonać twoje zadanie szybko i jakościowo. Mam duże doświadczenie w tworzeniu różnych parserów oraz omijaniu różnych poziomów zabezpieczeń. Napisz w wiadomościach prywatnych, omówimy szczegóły. Chętnie pomogę)

Budżet: 7777 UAH Termin: 1 dzień

Dzień dobry!
Ogólnie zadanie jest zrozumiałe, aby uzyskać dokładną odpowiedź na temat terminów i ceny, chciałbym wyjaśnić kilka kwestii, które pojawiły się po analizie waszego zadania.
Piszcie w prywatnych wiadomościach – omówimy szczegóły i wasze życzenia.

Budżet: 7777 UAH Termin: 7 dni

Dzień dobry, W programowaniu internetowym pracuję od ponad 9 lat. Pracuję z rest api, frameworkami i cms takimi jak django, laravel, yii2, wp, opencart, codeigniter itd. Jestem gotów wykonać zadanie. Opinie: Freelancehunt

Budżet: 7777 UAH Termin: 4 dni

Cloudflare obejdziemy przez Playwright Stealth / Undetected Chromedriver: sesje z autoryzacją będą emulować działania prawdziwego człowieka, przechodzić kontrole TLS-fingerprint i stabilnie utrzymywać ciasteczka bez blokad.

Cześć! Jestem Nina, menedżerka agencji IT Valflow. Systemy parsowania dowolnej złożoności w Pythonie pisze u nas Walenty, założyciel naszej szkoły vibe coding. Rozwinemy skrypty serwerowe, które będą pobierać produkty, ściągać zdjęcia i starannie układać dane ściśle w architekturę twojej MySQL.

Narzędzia: Python, Playwright/Selenium (modyfikacje Stealth), asynchroniczne parsowanie, rotacja proxy.
Wynik: Czysty kod serwerowy (bez desktopu), dostosowany do twojej gotowej bazy danych.

Cena: 7 777 UAH (za pierwszy etap / donorów)
Termin: 4 dni

Napisz na PW - przeanalizujemy specyfikację, ocenimy stopień ochrony pierwszych donorów i od razu podamy ostateczne terminy. Rozwiń

Budżet: 7777 UAH Termin: 6 dni

Dzień dobry!
Mam doświadczenie w tworzeniu serwerowych parserów w Pythonie oraz integracji danych w MySQL. Mogę zrealizować zbieranie produktów z witryn z autoryzacją, przesyłanie zdjęć na serwer oraz dostosowanie danych do aktualnej struktury bazy.
Każdego dostawcę analizuję osobno, ponieważ metody autoryzacji, struktura danych i poziom ochrony mogą się znacznie różnić. Proszę o przesłanie specyfikacji, przykładu dostawcy oraz struktury bazy danych — po analizie będę mógł zaproponować optymalną wersję realizacji.

Budżet: 7777 UAH Termin: 6 dni

Witam. Mam duże doświadczenie w parsowaniu z omijaniem zabezpieczeń. Czy mogę zobaczyć szczegółowe wymagania? Jestem gotowy do współpracy.

Budżet: 7777 UAH Termin: 5 dni

Witam, można zrobić na Pythonie parser, często obchody łatwo można znaleźć od CLOUDFRAME.

Napisz do mnie, omówimy wszystko szczegółowo, i mogę od razu przystąpić do wykonania.

Portfolio: Freelancehunt
Opinie: Freelancehunt

Budżet: 7777 UAH Termin: 1 dzień

Cześć, jestem gotów napisać dla was parsera, mam doświadczenie w omijaniu Cloudflare, bez problemu zrobię parser o dowolnej złożoności. Cena za jeden parser wynosi od 2500 UAH do 10 tysięcy UAH w zależności od złożoności. Jeśli jesteście zainteresowani jakościowym wykonaniem pracy - piszcie.

Budżet: 7777 UAH Termin: 10 dni

Gotowy do zrobienia. _____________________________________________