Budżet: 500 USD Termin: 7 dni
Witam! Zrobię parser cen dla katalogu 40 000+ produktów z autoryzacją, powtórnymi próbami i eksportem w potrzebnym formacie. Przewiduję ograniczenia częstotliwości i kontrolę pominiętych pozycji. Termin — 7 dni, koszt — 350 USD. Portfolio: https://god-devils.netlify.app/ Proszę powiedzieć, czy wynik potrzebny jest w CSV, Excelu, czy od razu w waszym systemie?
Budżet: 1200 USD Termin: 10 dni
Zobacz, budżet 500 USD na wstępny prototyp jest możliwy, ale stabilny parser z autoryzacją, katalogiem 40 000 produktów, historią cen i raportami oceniłbym na od 1200 USD i 10 dni roboczych. Po sprawdzeniu struktury Omarket.kz można zawęzić ocenę.
Robiliśmy podobne zadania związane z handlem internetowym i danymi produktowymi.
> https://business.ingello.com/eva - systemowa praca z katalogiem i danymi produktów
> https://business.ingello.com/prime-eva - automatyzacja procesów wokół asortymentu i operacji
> https://systems-fl.ingello.com - landing page Ingello dla FLH
W realizacji nie chciałbym robić po prostu jednorazowego skryptu. Potrzebna jest autoryzacja, kolejka zbierania, dopasowywanie produktów po artykule lub linku, dziennik błędów, przechowywanie historii i eksport w odpowiednim formacie. W przeciwnym razie parser formalnie istnieje, a korzyści są małe - stary dobry przypadek, kiedy skąpy płaci dwa razy =)
Będą potrzebne dostęp do konta, przykład waszego katalogu i format wyniku - tabela, baza, CRM lub panel administracyjny.
> Ceny należy zbierać jednorazowo lub regularnie według harmonogramu
> Wasze 40 000 produktów już ma linki lub kody do dopasowania z Omarket.kz
Budżet: 500 USD Termin: 7 dni
Ajdana, zrobię parser dla Omarket.kz z uwzględnieniem autoryzacji i dużego katalogu z ponad 40 tysiącami produktów. Skonfiguruję zbieranie cen konkurencji, przetwarzanie aktualizacji i stabilną pracę bez zbędnego obciążenia strony. Już robiłem parsery dla chronionych sekcji i dużych katalogów, dlatego od razu zaproponuję niezawodny schemat i podpowiem, jak najlepiej przechowywać i aktualizować dane. Jestem gotów omówić szczegóły i format eksportu.
Budżet: 500 USD Termin: 4 dni
Dzień dobry. Przeanalizowałem dziesiątki podobnych marketplace'ów, zarówno ukraińskich, jak i z innych krajów. Chciałbym uzyskać bardziej szczegółowe informacje dotyczące struktury końcowego wyniku, częstotliwości parsowania itd.
Czekamy na współpracę z Tobą!
Budżet: 500 USD Termin: 6 dni
Cześć, Aydana! Na początku sprawdzę, skąd strona pobiera ceny po zalogowaniu — jeśli są wewnętrzne zapytania XHR/JSON, połączę się bezpośrednio przez requests+cookie — to szybsze i bardziej stabilne niż omijanie przez przeglądarkę. Jeśli takiego sposobu nie ma — Playwright z zachowaniem sesji. Na 40 tys. produktów zakładam: zachowanie postępu i wznowienie z miejsca przerwania (nie przebudowa od zera), throttling z losowymi przerwami, deduplikacja po ID produktu. Powiadomienie w Telegramie, jeśli sesja wygasła lub układ strony się zmienił. Eksport — CSV/Excel lub od razu do bazy. Uściślę: jednorazowe zbieranie czy potrzebny regularny monitoring według harmonogramu? I po jakim polu porównywać produkty z waszym katalogiem — artykuł/SKU/nazwa?
Budżet: 500 USD Termin: 6 dni
Cześć! Zbieram ceny z katalogów, gdzie dostęp jest tylko po zalogowaniu — utrzymuję sesję przez cookie i przeglądam stronami, aby konto nie zostało zablokowane. Przy 40 tysiącach produktów planuję wznowienie od punktu przerwania i ostrożne przerwy między zapytaniami, aby zbieranie nie zatrzymało się w połowie. Format eksportu dowolny — CSV, Excel lub od razu do bazy. Jedno pytanie: czy to jednorazowe zbieranie, czy potrzebny jest regularny monitoring według harmonogramu?
Budżet: 500 USD Termin: 4 dni
Witam, Ajdana! Świetne zadanie. Parsowanie zamkniętych katalogów z autoryzacją i dużymi wolumenami danych (ponad 40k pozycji) to nasza stała praktyka.
Jestem Nina, menedżer zespołu IT Valflow. Architektura i rozwój parsera zajmie się Walentyn - starszy programista Python z głębokim doświadczeniem w automatyzacji i parsowaniu skomplikowanych platform (Scrapy, Playwright, BeautifulSoup, aiohttp).
Jak dokładnie zrealizujemy Twój parser:
1. Autoryzacja i bezpieczeństwo:
* Skonfigurujemy poprawny algorytm logowania z automatycznym przetwarzaniem i zapisywaniem sesji (ciasteczka/tokeny).
* Podłączymy rotację nagłówków i proxy, aby zapobiec blokadom konta ze strony platformy.
2. Szybkość i skalowalność (ponad 40 000 produktów):
* Zrealizujemy asynchroniczne wielowątkowe zbieranie (Scrapy / Asyncio + Aiohttp), aby katalog był zbierany szybko i bez zakłóceń.
* Wdrożymy automatyczne zapisywanie postępu: jeśli proces zostanie przerwany, wznowi zbieranie z tego samego miejsca.
3. Format eksportu i wygoda:
* Zbierzemy strukturę cen konkurencji i wyeksportujemy w wygodnym formacie do wyboru (Excel / CSV / JSON lub zapis do Twojej bazy danych/Google Arkuszy).
* Przekażemy prostą instrukcję uruchomienia lub przygotujemy skrypt w formie wygodnego interfejsu/bota do regularnego uruchamiania.
Czas realizacji: 3-5 dni.
Koszt: 500 USD.
Jesteśmy gotowi do pracy od razu po omówieniu szczegółów eksportu!
Budżet: 499 USD Termin: 6 dni
Cześć! Parsowanie 40k produktów z autoryzacją — zadanie interesujące, zrobimy to rzetelnie.
Od razu szczerze o profilu: dopiero zarejestrowałem się na giełdzie, ponieważ wcześniej całą automatyzację i parsery pisaliśmy wyłącznie pod potrzeby własnego biznesu. Przetestowaliśmy mnóstwo opcji, napotkaliśmy wszystkie pułapki z blokadami i utratą sesji — i stworzyliśmy dla siebie idealne narzędzie odporne na awarie. Dokładnie takie samo niezawodne podejście można zastosować w Twoim projekcie.
Co zrobimy:
Skonfigurujemy stabilną autoryzację i obejście zabezpieczeń.
Zrealizujemy zapis postępu z możliwością wznowienia z miejsca przerwania (bez zbierania od zera).
Skonfigurujemy eksport w wygodnym formacie (Excel/CSV lub bezpośrednio do bazy).
Warunki:
Termin: 6 dni.
Koszt: 400 USD.
Jestem gotów omówić szczegóły w wiadomości prywatnej i przystąpić do pracy!
Budżet: 500 USD Termin: 5 dni
Dzień dobry. Mam duże doświadczenie w parsowaniu, szczególnie w handlu internetowym. Zrobię to jakościowo i szybko. Proszę pisać, proponuję omówić kwestie dotyczące kont i limitów samej platformy. To wymaga analizy i zaoszczędzi czas.
Budżet: 480 USD Termin: 3 dni
Cześć, Ajdana.
Zadanie jest dokładnie w moim profilu. Od około 10 lat zajmuję się automatyzacją przeglądarek, analizuję wewnętrzne zapytania HTTP/API, pracuję z autoryzacją, sesjami, proxy i ograniczeniami stron. Dla marketplace'ów robiłem analizy sprzedaży FunPay oraz sprawdzanie stanów towarów z zabezpieczeniem przed limitami.
Najpierw sprawdzę autoryzowaną strefę OMarket i ustalę, skąd strona pobiera ceny. Jeśli są tam stabilne zapytania JSON/XHR, zbieranie danych będzie odbywać się bezpośrednio przez nie, a przeglądarka będzie potrzebna tylko do logowania i aktualizacji sesji. Jeśli takiej opcji nie ma, zrealizuję zbieranie danych przez Playwright. Nie będę z góry dodawać proxy i stealth, dopóki weryfikacja nie pokaże, że są naprawdę potrzebne.
W ciągu pierwszej doby po uzyskaniu dostępu pokażę działający prototyp na 100-300 produktach. Po uzgodnieniu pól i sposobu dopasowania uruchomię pełny katalog:
- zapisywanie postępu i kontynuacja po przerwaniu;
- ponowne próby, ograniczenie częstotliwości zapytań i oddzielny raport o błędach;
- wykluczenie duplikatów i rejestracja nieznalezionych towarów;
- cena, sprzedawca, link i czas sprawdzenia w CSV, Excel lub bazie;
- ponowne uruchomienie w celu aktualizacji cen bez pełnego zbierania danych;
- loginy i dane sesji są przechowywane osobno i nie trafiają do logów.
Do rozpoczęcia potrzebne są testowe konto, 5-10 przykładów produktów oraz przykład pożądanego wyniku. Proszę również o wyjaśnienie, czy potrzebne jest jednorazowe zbieranie danych, czy regularne monitorowanie cen.
Budżet: 500 USD Termin: 2 dni
Witam!
Zapoznałem się z twoim zadaniem dotyczącym stworzenia parsera dla Omarket.kz. Mam duże doświadczenie w tworzeniu parserów i crawlerów dla marketplace'ów i platform e-commerce, w tym z omijaniem skomplikowanych zabezpieczeń.
Budżet: 500 USD Termin: 10 dni
Witam. Dla katalogu z ponad 40 000 produktami wykonam autoryzowane zbieranie cen z zachowaniem sesji, obsługą paginacji i ochroną przed nadpisywaniem. Wynik można eksportować do CSV/Excel lub zapisywać w bazie, a powtarzające się uruchomienia będą aktualizować ceny i rejestrować zmiany. Dodam logowanie, ponowne próby i zrozumiałe raporty dotyczące produktów, które nie mogły zostać przetworzone. Przed rozpoczęciem należy ustalić sposób porównywania produktów z konkurencją i sprawdzić, czy występuje CAPTCHA lub ograniczenia częstotliwości zapytań.
Budżet: 500 USD Termin: 19 dni
Dzień dobry. Piszę programy do automatyzacji. Mogę zrobić w formie programu desktopowego na Windows w Pythonie.
Budżet: 500 USD Termin: 5 dni
Cześć!
Jestem gotów podjąć się za $500, orientacyjny termin — 5-7 dni po rozpoczęciu (uwzględnia opracowanie autoryzowanego parsera, przetwarzanie katalogu ~40 tys. produktów, testowanie).
Mam bezpośrednie doświadczenie w podobnych zadaniach: opracowywałem parser Playwright z omijaniem ochrony antybotowej oraz zachowaniem sesji/autoryzacji między uruchomieniami (oddzielny proces w tle utrzymuje sesję, moduł wykonawczy natychmiast wykorzystuje aktualne ciasteczka) — czyli dokładnie ten rodzaj zadań z autoryzowanym dostępem do cen. Mam również doświadczenie w przetwarzaniu katalogów o podobnej skali (19K+ rekordów) z niezawodnym przechowywaniem i obsługą błędów bez awarii całego pipeline'u.
Kilka pytań przed rozpoczęciem:
Czy to jednorazowe zbieranie cen, czy potrzebny jest okresowy monitoring (codziennie/tygodniowo)?
Czy na stronie jest widoczna ochrona antybotowa (Cloudflare, captcha)?
W jakim formacie potrzebny jest wynik — CSV, baza danych, czy coś innego?
Budżet: 480 USD Termin: 5 dni
Cześć, Aydana! Dokładnie przeanalizowałem Twoje zadanie dotyczące parsowania marketplace'u Omarket.kz. Zbieranie katalogu z ponad 40 000 produktów z autoryzacją to poważna sprawa, gdzie zwykłe skrypty „na kolanie” zawiodą przy pierwszej tysiącach z powodu utraty sesji lub blokad. Jestem gotów opracować dla Ciebie stabilny, odporny na błędy parser w Pythonie 3.12.
Nie proponuję ciężkich i drogich w utrzymaniu mikrousług (Redis/Docker), ale stworzę czyste, szybkie i zrozumiałe rozwiązanie „pod klucz” z ominięciem technicznych pułapek tej platformy:
1. Stabilna autoryzacja i odświeżanie sesji:
Na Omarket ciasteczka i tokeny szybko wygasają, wylogowując skrypt w trakcie paginacji. Skonfiguruję Playwright Headless z modyfikacjami Stealth. Skrypt zaloguje się jako prawdziwy użytkownik, zachowa sesję, a w cyklu zbierania zostanie wdrożony automatyczny przechwyt błędu 401 — jeśli sesja wygaśnie, parser sam na bieżąco zaktualizuje token autoryzacji i będzie kontynuował pracę bez przerwy i błędów.
2. System zapisywania postępu (Punkt zatrzymania):
Przeszukiwanie 40 tysięcy pozycji za jednym razem nie jest bezpieczne. Parser będzie używał lekkiej bazy danych SQLite do zapisywania stanu. Jeśli stracisz internet lub zgaśnie światło — przy ponownym uruchomieniu skrypt nie zacznie zbierać wszystkiego od nowa, ale natychmiast wznowi pracę dokładnie od ID produktu lub strony katalogu, gdzie nastąpiło przerwanie.
3. Ochrona przed banami (Throttling i proxy):
Aby konto nie zostało zablokowane za podejrzaną aktywność, skonfiguruję „inteligentne” losowe przerwy między zapytaniami (throttling) i podłączę rotację serwerów proxy. Strona będzie postrzegać zapytania jako naturalne działania człowieka.
4. Eksport danych i alerty:
Końcowy wynik porównania cen konkurentów skrypt zbierze w schludnym pliku Excel (XLSX) lub CSV. Dodatkowo zintegrować powiadomienia w Telegramie — jeśli w trakcie zbierania skończą się proxy lub na stronie globalnie zmieni się układ, bot natychmiast wyśle Ci raport o błędzie.
Cały rozwój odbywa się w czystym Pythonie, kod będzie zaopatrzony w szczegółowe komentarze. Po zakończeniu pracy pomogę Ci wszystko skonfigurować, uruchomić i przekażę prostą instrukcję. Loginy, hasła i dane sesji nie będą trafiały do logów (wyłącznie przez .env).
Proszę, daj znać, według jakiego pola Twój katalog powinien być porównywany z konkurencją na stronie (artykuł, SKU czy nazwa produktu), i czy zbieranie cen jest potrzebne jednorazowo, czy jako regularny monitoring według harmonogramu?
Budżet: 500 USD Termin: 5 dni
Cześć! Zadanie jest jasne. Parsowanie 40k+ produktów z autoryzacją — klasyczna historia, gdzie najważniejsze: nie złapać bana na konto, przejść przez antyfraud i zebrać wszystko szybko. Napiszę niezawodny asynchroniczny parser w Pythonie, który będzie regularnie logować się na twoje konto i pobierać aktualne ceny.
Budżet: 480 USD Termin: 2 dni
z 40 tysiącami produktów na omarkecie głównym problemem jest autoryzacja. tam sesja wygasa po pewnym czasie i jeśli po prostu przeszukiwać katalog zapytaniami, konto wylogowuje się w trakcie parsowania. już tworzyłem parsery pod takie platformy. lepiej związać automatyczne odnawianie tokena bezpośrednio w pętli i używać rotujących proxy, aby nie łapać captcha.
w kodzie przetwarzanie robię mniej więcej tak:
headers = {'Authorization': f'Bearer {auth_token}'}
res = session.get(catalog_url, headers=headers, params=params)
if res.status_code == 401:
auth_token = get_fresh_token(credentials)
res = session.get(catalog_url, headers=headers, params=params)
pod względem technicznym zrobię to tak. moduł autoryzacji z odświeżaniem tokenów i rotacją proxy. zbieranie katalogu z 40 tysiącami produktów i cenami konkurentów. zapis bazy w csv lub eksport do bazy danych.
napisz, jeśli masz pytania.
Budżet: 500 USD Termin: 8 dni
Dzień dobry, mam duże doświadczenie w parsowaniu. Pracowałem w firmie zajmującej się parsowaniem i pisaliśmy parsery na takie platformy jak Amazon, Ebay, Kaufland i inne. Codziennie zbieraliśmy miliony produktów na różnych domenach. Napisz do mnie prywatnie, omówimy, jak to można zrealizować i jak chcesz, aby to działało. Będę zadowolony z możliwości współpracy z tobą.
Budżet: 500 USD Termin: 5 dni
Dzień dobry. Jestem gotów opracować parser z autoryzacją do zbierania cen z katalogu ponad 40 000 produktów. Skonfiguruję dopasowanie według SKU, obsługę sesji, powtarzające się zapytania oraz eksport wyników w odpowiednim formacie.
Budżet: 500 USD Termin: 7 dni
Dzień dobry.
Mam duże doświadczenie w pisaniu parserów o różnym poziomie skomplikowania. W tym również z autoryzacją do uzyskiwania danych.
Chciałbym się dowiedzieć, jakie dokładnie dane o produktach należy pozyskiwać, jak często należy aktualizować informacje, w jakim formacie dostarczać wyniki.
Budżet: 500 USD Termin: 4 dni
Dzień dobry
wcześniej robiłem parser tej strony, eksport dla tej strony
robiłem również parsery kaspi, eksporty dla kaspi, praca z API kaspi i innych KZ MP, mam bardzo duże doświadczenie w zakresie parsowania do synchronizacji cen.
Napisz, omówimy.
Budżet: 500 USD Termin: 1 dzień
Dzień dobry.
Mam gotowy parser na node js, który wszystko zrobi.
Jeśli masz pytania, możesz napisać do mnie w wiadomości prywatnej.
Budżet: 500 USD Termin: 5 dni
Cześć! Mogę opracować parser dla strony Omarket.kz, który będzie zbierał ceny konkurencji. Mam doświadczenie w pracy z autoryzacją i parsowaniem dużych ilości danych. Jestem gotów omówić szczegóły.
Budżet: 500 USD Termin: 7 dni
Cześć, Aydana! Zbieram ceny z Omarket.kz przez autoryzowaną przeglądarkę i zapisuję w ustrukturyzowanej formie. Na tej stronie sesja z ciasteczkami szybko wygasa, a katalog z 40 tysiącami produktów wymaga omijania paginacji bez blokady. Dlatego uruchamiam Playwright z zapisaną sesją, aby logowanie było utrzymywane, a zapytania szły jak od żywego użytkownika. W jakim formacie potrzebne są dane: CSV, Excel czy Google Sheets?
Budżet: 500 USD Termin: 15 dni
Dzień dobry! Jestem gotów opracować system: parser dla Omarket.kz, który będzie przechodził autoryzację i zbierał aktualne ceny dla określonej liczby produktów oraz moduł do analizy cen konkurencji. Proszę pisać na priv, doprecyzujemy szczegóły dotyczące autoryzacji.
Budżet: 500 USD Termin: 5 dni
Dzień dobry, W programowaniu internetowym pracuję już od ponad 9 lat. Pracuję z rest api, frameworkami i cms takimi jak django, laravel, yii2, wp, opencart, codeigniter itd. Jestem gotów wykonać zadanie. Opinie: 
Freelancehunt
Budżet: 500 USD Termin: 3 dni
Dzień dobry. Zainteresował mnie Pański zlecenie. Posiadam ponad 10-letnie doświadczenie w web development. Zrobimy parser bardziej jakościowo i szybko. Proszę pisać na PW w celu omówienia szczegółów.
Budżet: 500 USD Termin: 12 dni
Cześć. Nazywam się Włodzimierz, jestem programistą Python i Node.js, a także założycielem agencji inżynieryjnej Vaysed. Dokładnie przeanalizowałem Twoje zadanie dotyczące opracowania parsera dla platformy omarket.kz. Rozumiem, że należy stworzyć skalowalne rozwiązanie do regularnego zbierania cen ponad 40 tysięcy produktów, biorąc pod uwagę konieczność obowiązkowej autoryzacji konta. Proponuję wykorzystanie asynchronicznej architektury mikroserwisowej opartej na Pythonie do realizacji tego projektu. Aby utrzymać stabilną sesję autoryzacji i szybko przechodzić przez katalog, użyjemy połączenia aiohttp i automatycznej rotacji serwerów proxy. Jeśli na stronie znajduje się ochrona przed zautomatyzowanymi zapytaniami podczas logowania, wdrożymy przeglądarkę headless za pomocą Playwright, aby symulować działania rzeczywistego użytkownika na etapie logowania. Kolejka linków do 40 tysięcy produktów będzie zarządzana przez Redis, co pozwoli na parsowanie katalogu w dziesiątkach asynchronicznych wątków i maksymalne skrócenie całkowitego czasu zbierania. Ostateczne dane będą bezpiecznie przechowywane w PostgreSQL do późniejszego eksportu. Mam potwierdzone doświadczenie w tworzeniu skomplikowanych systemów zbierania danych odpornych na awarie. W ramach mojego projektu Lumos zaprojektowałem i wdrożyłem niezawodną architekturę do ciągłego asynchronicznego parsowania zewnętrznych źródeł z późniejszym monitorowaniem zmian. Możesz zapoznać się z moim portfolio pod linkiem Freelancehunt Proponuję omówić szczegóły obejścia możliwej ochrony strony oraz pożądany format eksportu cen w wiadomościach prywatnych.
Budżet: 500 USD Termin: 2 dni
Dzień dobry.
Mam duże doświadczenie w zbieraniu informacji i parsowaniu. Możesz zapoznać się z moimi zrealizowanymi projektami związanymi z automatyzacją podobnych zadań:
https://freelancehunt.com/project/avtorozsilka-povidomlen/1348368.html
https://freelancehunt.com/project/napisat-skript/1304561.html
Zadanie jest proste i zrozumiałe, mogę wykonać ten projekt nawet za niższą cenę, niż oferujesz. Jestem dostępny online przez całą dobę, gotów wykonać zadanie szybko i jakościowo, zapraszam do kontaktu!
Budżet: 500 USD Termin: 6 dni
Cześć! Parsowanie to moja specjalizacja, w tym strony wymagające logowania. Stworzę parser katalogu Omarket.kz (ponad 40k produktów) z cenami konkurencji z poziomu logowania.
Jak to zbuduję: zaloguję się i utrzymam sesję (ciasteczka/token), przeglądając katalog strona po stronie z throttlingiem, aby nie dostać bana; dane — w wygodnym formacie (CSV/JSON/Baza danych, jak potrzebujesz). Zapewnię odporność: parsowanie wznawia się z miejsca przerwania, a nie od początku — przy 40k produktach to krytyczne.
Czas realizacji: 6 dni, koszt $500. Pracuję przez Safe, etapami.
Pytania: czy parsowanie jest potrzebne jednorazowo, czy regularnie (zgodnie z harmonogramem, do monitorowania cen)? I jakie pola są ważne — cena, dostępność, specyfikacje, zdjęcia? Od tego zależy struktura i objętość.
Budżet: 500 USD Termin: 7 dni
Dzień dobry. Mogę stworzyć ten parser. Mam już pewne doświadczenia. Proszę pisać, omówimy.
Budżet: 500 USD Termin: 3 dni
Dzień dobry. Mogę zrobić taki parser. Będę wdzięczny za współpracę - proszę o kontakt!
Budżet: 500 USD Termin: 10 dni
Jestem programistą NodeJS. Jestem gotów podjąć się tego zadania. Piszcie, omówimy.
Budżet: 500 USD Termin: 7 dni
Zadanie — zalogować się na omarket.kz i wyciągnąć ceny z całego katalogu 40k+ pozycji, nie otrzymując bana.
Zrobię to w Pythonie + Playwright: sesja przez prawdziwą przeglądarkę (obejście zabezpieczeń lepsze niż requests), autoryzacja zapisywana w cookies. Parsowanie uruchomię z throttlingiem i losowymi przerwami między zapytaniami — aby nie wywołać limitu szybkości przy dużej objętości. Wynik — w Excel/CSV z artykułem, nazwą, ceną, datą zbierania; deduplikacja po ID produktu przy powtórnych uruchomieniach. Dodam alert w Telegramie, jeśli sesja wygasła lub struktura strony się zmieniła.
Czy omarket.kz ma API, czy wszystko tylko przez strony HTML, i czy potrzebny jest parser jako jednorazowy zrzut, czy z regularnym aktualizowaniem według harmonogramu?
Budżet: 500 USD Termin: 10 dni
Ajdana, przy katalogu liczącym ponad 40 000 produktów najważniejsze jest nie tylko zalogowanie się i zebranie cen, ale także zapewnienie kontynuacji pracy po błędach, nie przeciążenie strony i nie rozpoczynanie całego zbierania od nowa w przypadku przerwania.
Najpierw sprawdzę, skąd strona pobiera ceny po zalogowaniu. Jeśli używane są wewnętrzne zapytania XHR/JSON, podłączę się do nich — to szybsze i stabilniejsze niż przeglądanie stron w przeglądarce. Jeśli takiego sposobu nie ma, zrealizuję zbieranie przez Playwright z zachowaniem zalogowanej sesji.
Parser będzie:
— porównywał produkty według artykułu, SKU lub innego uzgodnionego identyfikatora;
— zapisywał pośredni wynik i kontynuował pracę z miejsca zatrzymania;
— ograniczał częstotliwość zapytań, powtarzał tymczasowo nieudane próby i prowadził listę błędów;
— wykluczał duplikaty i osobno zaznaczał nieznalezione produkty;
— zapisywał cenę, sprzedawcę, link i czas sprawdzenia w CSV/Excel lub bazie danych;
— wspierał ponowne uruchomienie tylko w celu aktualizacji cen bez pełnego przetwarzania katalogu.
Przed pełnym przetwarzaniem sprawdzę rozwiązanie na próbnej próbce z 100–300 produktów. Przekażę kod źródłowy, konfigurację przez .env, instrukcję instalacji i uruchamiania. Loginy, hasła i dane sesji nie będą trafiały do logów.
Koszt — 650 USD, termin — 10 dni kalendarzowych przy standardowej autoryzacji i pracy z jedną stroną. Jeśli podczas weryfikacji pojawią się CAPTCHA, obowiązkowe proxy, częste blokady lub nietypowa ochrona, przed rozpoczęciem głównego rozwoju osobno uzgodnimy ostateczny sposób, termin i koszt.
Proszę o wyjaśnienie: według jakiego pola można porównać wasz katalog z produktami na stronie — artykułu, SKU, nazwy czy gotowych linków? I jak często należy aktualizować ceny?
Budżet: 500 USD Termin: 1 dzień
Dzień dobry!
Zapoznałem się z twoim zadaniem. Rozumiem zakres nadchodzących prac i możliwe opcje realizacji.
Aby dokładnie odpowiedzieć na pytania dotyczące terminów i ceny, chciałbym wyjaśnić kilka kwestii, które pojawiły się po analizie twojego opisu.
Budżet: 499 USD Termin: 3 dni
Dzień dobry Aydana, zrobię wszystko szybko i pięknie, aby wszystko długo się trzymało i nie przewróciło.
Budżet: 1200 USD Termin: 12 dni
mamy już praktycznie gotowe podobne rozwiązanie do monitorowania cen konkurencji, które można szybko dostosować do omarket.kz i uruchomić, możemy to omówić tutaj, jestem w kontakcie ))
https://business.ingello.com/prime-eva - podobne zadanie w zakresie detalicznej sprzedaży i danych produktowych, gdzie ważne są ceny, katalog i zarządzana automatyzacja
https://business.ingello.com/eva - bliskie pod względem logiki produktów, witryn, towarów i integracji
https://business.ingello.com/vorfahr - mocny przykład automatyzacji z AI, jeśli później zechcecie nie tylko zbierać ceny, ale także otrzymywać sugestie dotyczące przewartościowania
co do budżetu - 500 USD wystarczy na krótki pierwszy etap, w którym sprawdzimy autoryzowany dostęp, zbierzemy prototyp części katalogu i pokażemy eksport.
do pełnego zbierania danych o 40 000 produktach z kolejkami, powtórnymi próbami, logami, przechowywaniem historii i wygodnym eksportem, zakładałbym 1200 USD i 12 dni roboczych.
NA początku przeprowadzę rozpoznanie autoryzowanej strefy, określę stabilny sposób pozyskiwania danych, następnie zbiorę przetwornik kolejki, normalizację cen oraz tabelę lub panel wyników.
!!ważny moment!! pracujemy przez wasz legalny dostęp i bez łamania zabezpieczeń.
od was potrzebne są konto testowe, lista produktów lub kategorii, potrzebne pola i częstotliwość aktualizacji cen.
pytania - czy trzeba porównywać tylko bieżącą cenę, czy przechowywać historię zmian, i jaki wynik jest wygodniejszy - tabela, plik czy prosta panel administracyjny?
o nas - https://systems-fl.ingello.com
Budżet: 500 USD Termin: 10 dni
Piszę parsery z omijaniem zabezpieczeń i regularnym zbieraniem danych, z dalszym wsparciem.
Przeszedłem na stronę, gdzie ceny są widoczne, gdzie dokładnie należy sprawdzić ceny z konta?
Jak często potrzebne jest aktualizowanie cen (świeże dane)?
Piszcie, omówimy szczegóły i jestem gotów przystąpić do realizacji.
Budżet: 500 USD Termin: 7 dni
Dzień dobry.
Mam duże doświadczenie w tworzeniu parserów i automatyzacji zbierania danych. Bez problemu zrealizuję skrypt dla Omarket.kz, który będzie pomyślnie przechodził autoryzację i zbierał aktualne ceny dla wszystkich 40 tysięcy produktów. Zrobię to wszystko jakościowo i maksymalnie szybko. Mam doświadczenie w opracowywaniu systemu do analizy cen konkurencji, obejmującego 120 równoległych parserów.
Proszę powiedzieć, w jakim formacie potrzebujecie otrzymywać zebrane dane (Excel, CSV czy od razu załadować do waszej bazy)?
Porozmawiajmy o szczegółach i rozpocznijmy naszą współpracę, dobrze 🙂
Z poważaniem, Denis
Budżet: 480 USD Termin: 5 dni
Cześć, Ajdana! Zainteresował mnie Twój projekt, a także już pracowałem nad takim zadaniem. Zrobię dla Ciebie parser do zbierania cen konkurencji z autoryzacją. Najpierw trzeba będzie zobaczyć, jak odbywa się autoryzacja na stronie i powtórzyć ten proces w skrypcie. Następnie napiszę sam parser, który będzie przeszukiwał katalog i zbierał ceny, jednocześnie obsługując możliwe błędy czy blokady. Ustawię wszystko tak, aby można było łatwo uzyskiwać dane, nawet z 40 tysięcy produktów. Mam duże praktyczne doświadczenie w pracy z Pythonem, Scrapy i Beautiful Soup, więc z parsowaniem stron i obsługą autoryzacji nie będzie problemu.
Za tę pracę wezmę 480 dolarów i wykonam ją w ciągu 5-7 dni. Jako bonus mogę dodatkowo zrobić eksport danych w dogodnym dla Ciebie formacie, na przykład Google Sheets lub CSV.
Budżet: 500 USD Termin: 1 dzień
Witam. Aby zrealizować parser z autoryzacją na 40 tysięcy produktów, opracuję modułową, asynchroniczną architekturę, która zapewni wysoką szybkość zbierania danych oraz odporność na blokady. Moje wcześniejsze projekty obejmowały przetwarzanie znacznie większych wolumenów danych z wykorzystaniem zoptymalizowanych algorytmów oraz mechanizmów zarządzania sesjami. Zastosuję efektywne strategie omijania systemów ochrony, cachowania oraz rotacji proxy, gwarantując niezawodność zbierania cen konkurencji. Wszystkie szczegóły realizacji, ostateczny budżet oraz terminy proponuję omówić w wiadomościach prywatnych.
