Parsowanie danych przez mobilne API

Budżet: 27000 UAH Termin: 7 dni

Najlepiej zacząć od krótkiego audytu technicznego i prototypu na jednej platformie. Sprawdzamy, jakie dane można rzeczywiście uzyskać w sposób stabilny, jakie punkty API są używane, jak działa autoryzacja, jak aktualizowany jest token, gdzie są limity i ryzyka. Po tym tworzymy działający skrypt zbierania danych, obsługę błędów i dokumentację, aby rozwiązanie można było utrzymywać bez stałej zależności od nas.

Czas na pierwszy etap - około 7 dni roboczych. Budżet - od 40 000 UAH za audyt i prototyp na jednej platformie. Pełnoprawny system dla kilku źródeł, przechowywanie, harmonogram uruchomień i monitorowanie oceniłbym po sprawdzeniu API, ponieważ w takich zadaniach diabeł tkwi w nagłówkach, chociaż nie - czasami także w tokenach =/

!!Pracujemy tylko z legalnym zbieraniem danych!! - bez omijania zabezpieczeń, zamkniętych danych i schematów, które mogą szybko zrujnować projekt. Jeśli potrzebne jest stabilne rozwiązanie, lepiej zaplanować normalną architekturę, a nie jednorazowy skrypt, który zepsuje się przy pierwszej aktualizacji aplikacji.

Wyjaśnię 2 kwestie
> jakie platformy oprócz Rozetki są potrzebne na pierwszym etapie
> jakie dane należy zbierać - produkty, ceny, stany magazynowe, opinie, kategorie, sprzedawcy

Relewantne przypadki Ingello
> https://business.ingello.com/prime-eva - e-commerce i systemowa praca z danymi produktowymi
> https://business.ingello.com/vorfahr - automatyzacja i zbieranie danych w systemie produktowym
> https://systems-fl.ingello.com - profil Ingello Systems dla zadań związanych z automatyzacją i systemami korporacyjnymi Rozwiń

Budżet: 700 UAH Termin: 1 dzień

napisz, jakie aplikacje przeanalizuję i ocenię

Budżet: 9000 UAH Termin: 7 dni

Dzień dobry! Pracuję właśnie przez mobilne API — uruchamiam proxy (mitmproxy/Frida na Androidzie), zbieram rzeczywiste zapytania aplikacji, analizuję nagłówki i schemat tokena (jak jest wydawany i aktualizowany) i na tej podstawie piszę zbieracz bez kruchych parserów HTML bezpośrednio do API. Orientuję się w rozetka i podobnych e-commerce. Dokumentację z logiką zostawię, abyście mogli samodzielnie wspierać rozwiązanie. Ile mniej więcej produktów i kategorii trzeba zbierać w jednym przebiegu? Od tego zależy throttling i terminy.

Budżet: 2000 UAH Termin: 7 dni

Cześć, pracowałem nad parsowaniem API aplikacji Allo.ua w celu zbierania danych o produktach - otrzymywałem ponad 50 000 rekordów dziennie przez mobilne endpointy.

Ciekawe, czy będziemy musieli omijać ograniczenia dotyczące liczby zapytań w API Rozetka, czy macie jakieś szczególne wymagania dotyczące częstotliwości zapytań?

Proponuję się skontaktować, chętnie doradzę technicznie za darmo i wspólnie opracujemy plan rozwoju + opowiem o moim zespole!

Budżet: 7000 UAH Termin: 4 dni

Cześć! Zadanie jest całkowicie zrozumiałe. Mam doświadczenie w inżynierii odwrotnej oraz analizie ruchu aplikacji mobilnych Android dla platform e-commerce (w tym omijanie zabezpieczeń i praca z zamkniętymi API). Dla twojego zadania skonfiguruję proxy (Charles Proxy / HTTP Toolkit) na emulatorze, wyciągnę czyste punkty końcowe API Rozetki, zrozumiem tokeny autoryzacji i napiszę szybki skrypt w Pythonie. Na wyjściu otrzymasz czysty JSON/CSV oraz instrukcję do wsparcia. Jestem gotów omówić szczegóły i pokazać logikę podobnych przypadków!

Budżet: 1111 UAH Termin: 1 dzień

Oczywiście, że web scraping się nie nadaje. Tam jest ochrona przed botem. Różetka działa przez Cloudflare. Co do Różetki: jest bot, który działa tak, jak potrzebujesz. Wszystkie szczegóły w wiadomości prywatnej.

Budżet: 1000 UAH Termin: 1 dzień

Cześć! Zadanie jest znane: przechwycić ruch aplikacji Android przez proxy, rozebrać endpointy i logikę autoryzacji z aktualizacją tokena, a następnie stworzyć w Pythonie stabilny zbiór danych z rozetka i podobnych. Dokumentację z wyjaśnieniem logiki również przygotuję, abyście mogli samodzielnie wspierać rozwiązanie. Jestem gotów omówić szczegóły i pokazać przypadki w wiadomościach prywatnych.

Budżet: 2000 UAH Termin: 3 dni

Cześć, Max!

Zapoznałem się z opisem projektu. Zadanie dotyczące inżynierii odwrotnej mobilnego API dla e-commerce (Rozetka i podobne) w pełni odpowiada mojemu profilowi. Specjalizuję się w automatyzacji w Pythonie, analizie protokołów sieciowych oraz tworzeniu stabilnych parserów.

Jak zrealizuję projekt:

Przechwytywanie ruchu: Skonfiguruję serwer proxy (MITM) do analizy zabezpieczonego ruchu aplikacji na Androida, zidentyfikuję wszystkie kluczowe punkty końcowe API i niezbędne nagłówki (headers).
Analiza autoryzacji: Rozłożę na czynniki logikę generowania, życia i aktualizacji tokenów, aby zautomatyzować ten proces w skrypcie bez ryzyka deautoryzacji.
Rozwój skryptu: Napiszę czysty, zoptymalizowany asynchroniczny skrypt w Pythonie do szybkiego i dyskretnego zbierania danych.
Dokumentacja: Przygotuję szczegółową i zrozumiałą instrukcję dotyczącą logiki działania rozwiązania, abyś mógł łatwo samodzielnie je utrzymywać.

Moje odpowiednie przypadki:

Goszakup Tender Bot: Zaprojektowałem podzieloną architekturę z modułem w tle do stałego utrzymywania sesji, omijania wzorców anty-botowych i zachowywania stanu autoryzacji.
Avia Navigation Data Pipeline: Opracowałem asynchroniczny system zbierania i walidacji danych na FastAPI z izolowanym przetwarzaniem błędów w celu zapobiegania awariom.

Mam głębokie zrozumienie działania systemów Linux, procesów sieciowych i buforowania danych. Jestem gotów omówić szczegóły na czacie lub w wiadomościach technicznych i szybko przystąpić do pracy. Rozwiń

Budżet: 10000 UAH Termin: 5 dni

Witam! Zadanie jest całkowicie zrozumiałe. "Zwykłe" parsowanie kodu HTML tutaj nie działa, ponieważ wersja internetowa jest zablokowana przez WAF/Cloudflare, więc masz absolutnie rację - trzeba naśladować zapytania oficjalnej aplikacji mobilnej.

Pod maską mobilne API to standardowe zapytania HTTP/HTTPS (REST/JSON), a zadanie sprowadza się do prawidłowej emulacji urządzenia.

Mój stos i algorytm realizacji:
1. Analiza ruchu: Ustawienie zestawu (uruchomię Mitmproxy / Charles Proxy) do przechwytywania zapytań aplikacji Android.
2. Obejście zabezpieczeń: W razie potrzeby uruchomię Frida do dekompilacji/obejścia SSL Pinning (jeśli aplikacja sprawdza certyfikat bezpieczeństwa i blokuje proxy).
3. Inżynieria wsteczna: Wydzielenie docelowych punktów końcowych (katalog, karta produktu, ceny), analiza struktury nagłówków (headers, User-Agent, device_id) oraz logiki generowania/aktualizacji tokenów autoryzacyjnych.
4. Automatyzacja: Napisanie czystego, zoptymalizowanego skryptu w PHP (Laravel HTTP Client / cURL), który będzie cyklicznie zbierał dane omijając wszelkie blokady, udając prawdziwe urządzenie mobilne.
5. Przekazanie: Przygotuję zwięzłą dokumentację (jakie zapytanie dokąd leci, jakie tokeny aktualizować), abyś mógł łatwo utrzymywać skrypt.

Mam duże doświadczenie w integracjach API i inżynierii wstecznej zapytań.

Termin: 4-5 dni (z uwzględnieniem czasu na analizę możliwego SSL Pinning). Rozwiń

Budżet: 700 UAH Termin: 1 dzień

Robiłem to dla kilku projektów e-commerce: instalowałem mitmproxy lub Charles na urządzeniu z Androidem, przechwytywałem ruch aplikacji mobilnej i wyciągałem potrzebne endpointy z nagłówkami, tokenami i parametrami zapytań. Różnica w szczególności ma dość stabilne mobilne API, więc zadanie jest jasne. Pytanie: potrzebna jest jednorazowa analiza i dokumentacja API, czy od razu potrzebny jest działający parser, który będzie automatycznie wysyłał zapytania? Jestem gotów omówić zakres i terminy.

Budżet: 11111 UAH Termin: 1 dzień

Witam, zrobię to. Potrafię sniffować ruch z aplikacji mobilnych. Proszę przesłać pełne wymagania w wiadomości prywatnej, omówimy szczegóły.

Budżet: 700 UAH Termin: 1 dzień

Dzień dobry.

Zajmowałem się zbieraniem danych przez API oraz parsowaniem projektów e-commerce. Mogę zrozumieć strukturę zapytań aplikacji, zrealizować zbieranie potrzebnych danych i przygotować kod w zrozumiałej formie z wyjaśnieniami.

Aby ocenić, należy sprecyzować, z jakiego dokładnie serwisu zaczynamy i jakie dane należy uzyskać.

Po tym będę mógł podać terminy i koszt.

Budżet: 3500 UAH Termin: 3 dni

Cześć. Zrozumiałem zadanie: potrzebny jest nie zwykły parsing layoutu, a zbieranie danych przez wewnętrzne mobilne API aplikacji. To znaczy przechwycenie ruchu aplikacji Android, znalezienie rzeczywistych punktów końcowych i ich nagłówków, zrozumienie, jak aplikacja uzyskuje i aktualizuje token autoryzacji, a na tej podstawie napisanie skryptu, który pobiera dane bezpośrednio przez API, plus dokumentacja, abyś mógł samodzielnie wspierać rozwiązanie.

Widzę to w krokach tak. Najpierw ustawiam przechwytywanie ruchu aplikacji przez proxy (mitmproxy lub Charles) z podmianą certyfikatu, w razie potrzeby omijam certificate pinning, aby zobaczyć rzeczywiste zapytania. Następnie analizuję, jakie punkty końcowe wywołuje aplikacja, jakie nagłówki i podpisy są przesyłane, jak działa autoryzacja i aktualizacja tokena. Potem odtwarzam te zapytania w Pythonie już bez aplikacji, z poprawnymi nagłówkami i automatycznym aktualizowaniem tokena, i zbieram dane w potrzebnym formacie. Na koniec dokumentuję logikę zapytań i tokenów, abyś mógł sam naprawić, jeśli coś zmieni się po stronie sklepu.

Dlaczego właśnie przez mobilne API, a nie parsing stron, jest dla mnie jasne: wewnętrzne API zwraca czyste, zorganizowane dane, ma mniej zabezpieczeń i captcha niż w sieci, i działa stabilniej. Pracowałem z reverse engineering mobilnych i web API, przechwytywaniem ruchu i odtwarzaniem zapytań z tokenami w Pythonie.

Aby dokładniej ocenić: która aplikacja lub sklepy są priorytetowe, i jakie dokładnie dane są potrzebne (katalog, ceny, stany, karty produktów)? I czy zbieranie jest jednorazowe, czy regularne według harmonogramu?

Budżet: 5000 UAH Termin: 1 dzień

Dzień dobry. Jestem gotów wykonać ten projekt, mam duże doświadczenie w tworzeniu różnych aplikacji.

Budżet: 27000 UAH Termin: 7 dni

Rozwiązanie AI do takiego zbierania mamy już praktycznie gotowe, można szybko dostosować je do waszego źródła i omówić to w korespondencji na giełdzie, jestem w kontakcie ))
Co do terminów, zaproponowałbym pierwszy etap techniczny na 5-7 dni - przechwytywanie ruchu, mapa zapytań, sprawdzenie autoryzacji, prototyp zbierania danych przez mobilne API i krótka dokumentacja.
Zobaczcie, tu jest niuans - ważne, aby był legalny scenariusz dostępu i bez omijania zabezpieczeń, w przeciwnym razie rozwiązanie może być kruche i ryzykowne.
Z podobnego doświadczenia - pracowaliśmy z rynkami, integracjami, monitorowaniem danych, panelami użytkowników i automatyzacją procesów biznesowych.
Dokumentację zrobimy tak, abyście mogli samodzielnie wspierać rozwiązanie, plus można dodać kontrolę AI zmian API i powiadomienia, jeśli źródło zmieni odpowiedzi lub autoryzację.
Proszę o wyjaśnienie, które dokładnie aplikacje na Androida należy analizować i jakie pola dotyczące produktów są potrzebne w pierwszej wersji.
Jeszcze pytanie - czy macie testowe konto w aplikacji i przykład pożądanej eksportu.
https://business.ingello.com/prime-eva - podobne w zakresie e-commerce, skomplikowanych integracji i procesów produkcyjnych.
https://business.ingello.com/eva - najbliżej w zakresie monitorowania rynków i zbierania danych.
https://business.ingello.com/vorfahr - pośrednio bliskie w zakresie SaaS i automatyzacji AI.
Strona główna dla giełdy - https://systems-fl.ingello.com Rozwiń

Budżet: 1000 UAH Termin: 1 dzień

Cześć!

Mam duże doświadczenie w opracowywaniu rozwiązań do parsowania i przetwarzania danych (różne źródła, ochrona przed blokadami, automatyzacja). Jestem gotów wykonać postawione zadanie w najkrótszym czasie.

Proponuję omówić szczegóły w wiadomościach prywatnych.

Budżet: 9000 UAH Termin: 3 dni

Dzień dobry. Robiłem parsowanie zabezpieczonych aplikacji mobilnych Copart.com i getContact.com oraz wielu innych. Bardzo dobrze się na tym znam. Będę w stanie napisać potrzebne parsowanie. Proszę pisać, omówimy.

Budżet: 1000 UAH Termin: 1 dzień

Cześć, mam doświadczenie w przechwytywaniu ruchu mobilnego (nie tylko emulator + certyfikaty SSL + MITM Proxy), ale pełnoprawne, niestandardowe rozwiązanie do normalnego omijania narzędzi zabezpieczających. Zeskrobałem wiele platform za pomocą tej metody (Glovo, Bolt, Uber Eats. Wcześniej nawet Twitter.)

Mogę pomóc w rozwiązaniu problemu. Napisz na prywatną wiadomość, omówimy.

Budżet: 1000 UAH Termin: 3 dni

Dzień dobry! Mam znaczące doświadczenie w przechwytywaniu i analizie ruchu mobilnych API (Android), w szczególności platform e-commerce. Jestem gotów zrealizować automatyczne parsowanie danych z rozetka i podobnych zasobów, w tym dekodowanie autoryzacji oraz szczegółową dokumentację.

Przedstawię rzeczywiste przypadki pracy z API i proxy w wiadomości prywatnej. Zapraszam do kontaktu w celu omówienia szczegółów.

Budżet: 15000 UAH Termin: 7 dni

Cześć! Mam bardzo szerokie doświadczenie zarówno w tworzeniu skrypterów, jak i w samym skrapowaniu. 1. Stworzymy adekwatne TŻ prac 2. Zrealizuję skrypter, używając technicznego stosu według Twojego życzenia 3. Otrzymasz analizę, dane, które będą dokładnie opisane i uporządkowane Napisz, omówimy!

Budżet: 5000 UAH Termin: 5 dni

Jestem gotów do współpracy. Mam doświadczenie w zbieraniu danych z rozetka przez API. ______

Budżet: 15000 UAH Termin: 7 dni

Dzień dobry! Mamy doświadczenie w przechwytywaniu ruchu aplikacji mobilnych i analizie punktów końcowych do parsowania platform e-commerce. Realizujemy to poprzez konfigurację serwerów proxy, dekompilację APK i emulację nagłówków w celu obejścia zabezpieczeń. Jesteśmy gotowi szybko przystąpić do analizy zapytań i strukturyzacji danych.

Budżet: 1500 UAH Termin: 1 dzień

Cześć, jestem programistą Pythona, mam doświadczenie w tworzeniu parserów o różnym stopniu skomplikowania. Mogę szybko i jakościowo zrealizować Twój projekt. Napisz - omówimy szczegóły. Jestem gotów do pracy już dzisiaj. Mam duże doświadczenie w pracy z API.

Budżet: 1000 UAH Termin: 1 dzień

Witam. Moje podejście do tego projektu będzie oparte na dogłębnej analizie ruchu mobilnego za pomocą specjalistycznych narzędzi proxy w celu identyfikacji ukrytych punktów końcowych API oraz szczegółowego badania mechanizmów autoryzacji, w tym zarządzania tokenami. Opracuję skalowalne i odporne na awarie rozwiązanie z wykorzystaniem asynchronicznych zapytań, efektywnym przetwarzaniem błędów oraz integracją strategii unikania blokad, zapewniając stabilne zbieranie danych i wysoką wydajność. Posiadam znaczące doświadczenie w inżynierii odwrotnej mobilnych API dla platform e-commerce i dysponuję gotowymi modułami programowymi, które znacznie przyspieszą realizację i zapewnią niezawodność rozwiązania. Ostateczny wynik będzie towarzyszył jasnej dokumentacji technicznej dla łatwego dalszego wsparcia. Wszystkie szczegóły realizacji, ostateczny budżet i terminy proponuję omówić w wiadomościach prywatnych.

Budżet: 1000 UAH Termin: 1 dzień

Dzień dobry, jestem gotów wykonać twoje zadanie szybko i jakościowo. Mam duże doświadczenie w tworzeniu różnych parserów. Napisz w wiadomościach prywatnych, omówimy szczegóły. Chętnie pomogę)