Parsowanie cen dostawcy
Dzień dobry.
Potrzebny jest parser do parsowania cen dostawcy według podanych artykułów towarów.
Co dokładnie jest potrzebne:
Na stronie dostawcy dla konkretnego artykułu towaru dostępne są informacje o magazynach, w których ten towar jest dostępny. Magazyny mają różne lokalizacje, różne typy dostawy i różne ceny. Każdy magazyn ma swoją unikalną nazwę.
Dla podanych artykułów towarów (będzie ich około 10000 łącznie) poprzez wyszukiwanie na stronie dostawcy (możliwe przez API, aby uniknąć bana) należy znaleźć magazyn z najniższą ceną towaru oraz odpowiednimi parametrami tego magazynu (konkretny typ dostawy) z wyłączeniem nazw kilku magazynów (z którymi nie współpracujemy).
Tę najniższą cenę należy gromadzić w odpowiednim dniu parsowania w tabeli naprzeciwko artykułu towaru, dla którego było parsowanie. A ogólne dane gromadzić w tabeli Excel, lub mieć możliwość importowania z bazy danych do tabeli Excel w razie potrzeby i do analizy. Taki parsing powinien odbywać się codziennie automatycznie i o odpowiedniej ustalonej porze.
Na wyjściu należy uzyskać tabelę z artykułami towarów, a w kolumnach będą daty parsowania i odpowiednio ceny towarów naprzeciw każdego artykułu.
Nowe artykuły powinny być dodawane, a parsing cen dla nich odbywa się w następnej dacie parsowania. Jeśli artykuł już istnieje w bazie – nie jest dodawany (nie jest duplikowany).
Opinia zleceniodawcy o współpracy z Olena Ambris
Parsowanie cen dostawcyWszystko zrobione, jak trzeba. Nawet więcej, niż trzeba. Bardzo dziękuję.
Opinia freelancera o współpracy z Pavel Valentinovich
Parsowanie cen dostawcyWspaniały klient, z którym przyjemnie i łatwo się pracuje. Zawsze w kontakcie, szybko odpowiada na pytania i sprawnie rozwiązuje wszystkie kwestie robocze. Uzgodnienie projektu i płatność przebiegły bez opóźnień. Polecam i z radością będę współpracować ponownie.
-
Dzień dobry. Wykonywałem podobny projekt, jestem gotów zrealizować również Pański. Należy omówić szczegóły, aby dokładnie ocenić zamówienie.
Podobne wykonane zlecenie: Розробка системи оновлення товарів на пром юа
-
Dzień dobry.
Mogę zrealizować taki system parsowania „pod klucz” z automatycznym codziennym aktualizowaniem cen, filtrowaniem magazynów oraz gromadzeniem historii zmian.
Co zostanie zrealizowane:
— parsowanie według listy artykułów (10 000+)
— wyszukiwanie towaru przez stronę lub API (jeśli dostępne)
— wybór najniższej ceny tylko wśród dozwolonych magazynów
— filtrowanie według typu dostawy
… — wykluczenie niepożądanych magazynów
— automatyczne aktualizowanie codziennie według harmonogramu
— zachowanie historii cen według dat
— ochrona przed duplikowaniem artykułów
— eksport do Excel / CSV
— możliwość dalszego skalowania
Technicznie optymalnie:
• Python
• PostgreSQL / SQLite
• API lub automatyzacja przeglądarki (zależy od dostawcy)
• cron/scheduler do automatycznego uruchamiania
Na wyjściu:
Tabela w formie:
Artykuł | 11.05 | 12.05 | 13.05 ...
z historią minimalnych cen.
Orientacyjny koszt:
• jeśli jest normalne API 350–700$
• jeśli skomplikowany antybot / tylko przez przeglądarkę 800–1600$+
Terminy:
3–7 dni po uzyskaniu dostępu do strony i przykładów.
Do dokładnej wyceny potrzebne są:
— strona dostawcy
— przykład wyszukiwania towaru
— lista niepożądanych magazynów
— logika wyboru typu dostawy
— czy potrzebny jest interfejs/konto, czy wystarczy Excel + Baza Danych
Mogę zacząć od razu.
-
433 Cześć, już opracowywałem wysokowydajne parsery z równoległym przetwarzaniem, rotacją proxy oraz Selenium/Playwright dla dynamicznych stron internetowych.
W odniesieniu do Twojego zadania:
* terminy i koszt będą zależały od złożoności strony oraz dostępności otwartego API
* aby przyspieszyć parsowanie, warto zapisywać do bazy danych. Na życzenie mogę stworzyć narzędzie do eksportu z bazy danych do Excela lub automatycznie to robić i wysyłać gotowy plik na e-mail lub Telegram.
Pisz, omówimy wszystkie szczegóły zamówienia.
-
3124 87 0 Dzień dobry. Jestem gotowa omówić szczegóły projektu. Mam podobne doświadczenie. Proszę o kontakt.
-
1455 9 0 Witam! Mogę zrealizować Twój projekt – mam wieloletnie doświadczenie w tworzeniu parserów i feedów. Będę zadowolony z współpracy.
Również w przyszłości, w razie potrzeby, mogę stworzyć analityczny dashboard z zebranych produktów.
-
387 1 0 Witam, Pawle Walentynowiczu!
Mam doświadczenie w tworzeniu parserów dla skomplikowanych systemów logistycznych i handlowych. Twoje zadanie wymaga nie tylko zbierania danych, ale stworzenia stabilnej architektury do monitorowania 10 000+ pozycji dziennie.
Proponuję następujące rozwiązanie techniczne:
Stos: Python (biblioteki requests/aiohttp dla szybkości) + baza danych SQLite do przechowywania historii i unikania duplikatów.
Algorytm wyboru: Zrealizuję logikę filtrowania magazynów-wyjątków oraz automatyczne wyszukiwanie najniższej ceny wśród dostępnych zapasów.
…
Baza danych: System będzie automatycznie sprawdzał artykuły: nowe będą dodawane do bazy, istniejące — aktualizowane nowymi cenami.
Automatyzacja: Ustawię codzienne uruchamianie według harmonogramu (Task Scheduler/Cron). Będziesz otrzymywał arkusz Excel, w którym daty parsowania automatycznie stają się nowymi kolumnami do wygodnej analizy porównawczej.
Kilka pytań wyjaśniających:
Czy masz listę artykułów w pliku (Excel/CSV), czy trzeba je pobrać z innego źródła?
Czy strona dostawcy ma zabezpieczenia przed częstymi zapytaniami (Cloudflare itp.)? Może być konieczne użycie proxy do stabilnej pracy z 10k zapytaniami.
Jestem gotowa opracować niezawodne rozwiązanie, które będzie działać autonomicznie.
-
289 6 0 Dzień dobry, proszę napisać w wiadomościach prywatnych w celu wyjaśnienia strony dostawcy i kilku artykułów do testowania.
-
1836 55 0 Dzień dobry. Jestem gotowy zająć się tym parserem. Mógłbym zacząć już dzisiaj. Proszę pisać, dziękuję.
-
172 1 1 Dzień dobry. Jestem gotów wykonać ten projekt, mam duże doświadczenie w tworzeniu aplikacji.
-
650 2 0 Cześć!
Parsery z codziennym zbieraniem danych i raportami Excel — to nasza specjalność.
O projekcie:
Parsing — sprawdzę, czy dostawca ma API (szybciej + bez bana). Jeśli nie — Playwright dla stron JS lub httpx, jeśli statyka. 10 000 artykułów przetworzę z opóźnieniami, aby nie złapać bana.
Logika filtrowania — dla każdego artykułu znajduję wszystkie magazyny, wykluczam zabronione nazwy, filtruję według typu dostawy, biorę minimalną cenę.
…
Excel — tabela: wiersze = artykuły, kolumny = daty parsowania, na przecięciu — minimalna cena danego dnia. Nowe artykuły dodawane są bez duplikatów. Istnieje możliwość eksportu z bazy w dowolnym momencie.
Autostart — codzienny parsing o ustalonej porze przez harmonogram (APScheduler lub cron na VPS).
-
5545 105 2 proponuję parser z otwartym kodem na NodeJS. doświadczenie w pisaniu duże. wezmę pod uwagę wszystkie warunki
-
265 Dzień dobry, piszę w imieniu firmy Devoxen. Specjalizujemy się w podobnych zadaniach. Mamy duże doświadczenie w tworzeniu parserów, automatyzacji zbierania danych oraz budowie systemów monitorowania cen dla dużych ilości towarów. Będziemy w stanie zrealizować parser do zbierania cen według artykułów z logiką wyboru minimalnej ceny według konkretnych parametrów magazynu, wykluczeniem niepożądanych magazynów oraz automatycznym codziennym aktualizowaniem danych.
Możemy również zrealizować pracę przez API lub w maksymalnie bezpiecznym trybie parsowania, aby zminimalizować ryzyko blokad, zachować historię cen w bazie danych oraz automatyczny eksport/synchronizację z Excelem. Przewidzimy sprawdzenie duplikatów artykułów, automatyczne dodawanie nowych pozycji oraz gromadzenie danych historycznych według dat parsowania do dalszej analizy.
Możemy to zrobić bez zbędnych pytań i marnowania czasu. Dajemy również gwarancję i na życzenie wsparcie. Będziemy mogli zająć się Państwa projektem od razu po omówieniu specyfikacji.
Proponuję przejść do wiadomości prywatnych w celu bardziej szczegółowej rozmowy.
-
976 4 0 Dzień dobry
Nazywam się Dmytro
Mogę zrealizować automatyczny parser do zbierania cen po artykułach z codziennym aktualizowaniem i gromadzeniem historii cen.
Co będzie:
— wyszukiwanie towarów po artykułach
— wybór najniższej ceny z uwzględnieniem typu dostawy
— wykluczenie potrzebnych magazynów
— automatyczne codzienne parsowanie
— zachowanie historii cen po datach
… — tabela Excel / eksport do analizy
— ochrona przed duplikowaniem artykułów
Pracuję z dużymi wolumenami danych i parsowaniem, dlatego system będzie zaplanowany na 10000+ artykułów.
Co do terminów: 5–14 dni
Jestem gotów omówić szczegóły 👍
-
307 4 0 Wielka ilość danych: Należy efektywnie przetwarzać ponad 10 000 artykułów.
Praca z API lub HTML: Jeśli dostawca nie ma API, parsowanie HTML znacznie utrudnia pracę z powodu ryzyka blokady.
Skomplikowane zasady: Algorytm musi analizować kilka magazynów dla każdego towaru: porównywać ceny, filtrować według rodzaju dostawy i wykluczać określone magazyny według nazwy.
Infrastruktura: Koszt obejmuje stworzenie bazy danych, skonfigurowanie codziennego automatycznego uruchamiania (cron) oraz integrację z Excelem do raportów.
-
95572 1271 1 10 Witam. Mam duże doświadczenie w tworzeniu parserów. Jestem gotów do współpracy.
-
3459 48 2 Cześć!\nParsowanie cen dostawcy z magazynów - robiliśmy coś podobnego dla monitorowania cen.\n10000 artykułów dziennie to ~7 godzin parsowania przy 0,4 sek/artykuł, więc API jest krytyczne, jeśli jest - przez skrobanie będzie wolno i ryzykownie. Filtrowanie według typu dostawy + wykluczenie magazynów + wyszukiwanie minimalnej ceny - standardowa logika.\nPrześlij link do strony dostawcy i przykład artykułu - sprawdzę, czy jest API i podam dokładną wycenę.
-
3071 11 0 1 Cześć!
Mogę zrealizować taki parser z automatycznym codziennym zbieraniem danych dla ~10 000 artykułów, w tym z logiką wyboru najkorzystniejszego magazynu oraz filtrowaniem magazynów, z którymi nie współpracujesz.
Technicznie można to zrobić jako usługę w Pythonie (Scrapy/Playwright lub integracja API, jeśli jest dostępna), z bazą danych do przechowywania historii cen oraz automatycznym eksportem do Excela w razie potrzeby. Parsowanie można uruchamiać według harmonogramu (cron/serwerowy scheduler), aby proces odbywał się codziennie o ustalonej porze bez ręcznej interwencji.
Logika będzie obejmować: wyszukiwanie towaru po artykule, uzyskiwanie wszystkich dostępnych magazynów, wybór magazynu z najniższą ceną z uwzględnieniem typu dostawy oraz wykluczonych magazynów, a także przechowywanie historii zmian według dat w ustrukturyzowanej formie. Nowe artykuły będą automatycznie dodawane do systemu bez duplikacji i zaczną być parsowane od następnego cyklu.
Jestem gotów omówić szczegóły!
-
4675 14 0 Pawle, dzień dobry!
Mam doświadczenie w tworzeniu parserów dla e-commerce oraz monitorowania cen z codziennym automatycznym aktualizowaniem danych.
Aby dokładnie ocenić, chciałbym wyjaśnić kilka kwestii:
- link do strony dostawcy;
- przykład artykułu;
- jakie typy dostawy należy uwzględnić;
- lista magazynów, które należy wykluczyć.
…
Po krótkiej analizie będę mógł zaproponować optymalną wersję realizacji, terminy oraz dokładny koszt.
Możliwa realizacja zarówno przez API (jeśli dostępne), jak i przez parsowanie strony z automatycznym codziennym aktualizowaniem, zachowaniem historii cen oraz eksportem do Excel/Google Sheets.
-
3392 84 0 Jestem gotów się tym zająć. Ale ważne jest, aby zobaczyć, o jaki site chodzi. Należy wyjaśnić szczegóły zamówienia, piszcie! Używam Pythona, uv, github, docker.
-
716 4 0 Zrealizuję ten projekt najlepiej, ponieważ mam głębokie doświadczenie w tworzeniu stabilnych parserów dla e-commerce z ochroną przed banami, pracą z dynamiczną treścią oraz dużymi wolumenami danych. Moja architektura gwarantuje dokładność: unikalność artykułów, poprawny wybór magazynu według ceny i typu dostawy, wykluczenie niepożądanych platform. Otrzymujesz nie tylko skrypt, ale niezawodny system z logowaniem, obsługą błędów, elastycznym ustawieniem harmonogramu oraz wygodnym eksportem do analizy. Kod będzie czysty, udokumentowany i gotowy do skalowania, a wsparcie zapewni stabilną pracę przez miesiące.
Plan pracy:
Analiza strony dostawcy: określenie metody dostępu (API lub HTML-parsing), badanie struktury odpowiedzi, parametrów magazynów, ograniczeń.
Projektowanie architektury: wybór stosu (Python, requests/Scrapy, SQLite/MySQL), opracowanie schematu bazy danych dla artykułów, cen, dat i parametrów magazynów.
Realizacja rdzenia parsera: wyszukiwanie według artykułu, filtrowanie magazynów, wykluczanie zabronionych nazw, wybór minimalnej ceny z odpowiednim typem dostawy.
System przechowywania: logika dodawania nowych artykułów bez duplikatów, gromadzenie historii cen według dat, walidacja danych.
Integracja z Excelem: eksport tabel przestawnych przez pandas/openpyxl, import z bazy na żądanie, formatowanie do analizy.
Automatyzacja: konfiguracja harmonogramu (cron/Celery), uruchamianie o określonej porze, rotacja proxy, limity zapytań w celu uniknięcia blokad.
… Testowanie i oddanie: sprawdzenie na 100+ artykułach, debugowanie obsługi błędów, instrukcja dotycząca wdrożenia i wsparcia.
-
1328 35 1 Cześć. Chciałbym zobaczyć dawcę. Proszę się zgłosić, omówimy wszystkie szczegóły.
-
1251 35 1 3 Witam Pawle, jestem gotów do wykonania. Proszę przesłać na priv, skąd trzeba parsować, omówimy szczegóły.
-
1490 28 0 Proszę przesłać stronę dostawcy do zapoznania się, dziękuję.................................
-
3411 32 0 Witam! Wykonywałem już podobne zadanie, strona z autoryzacją, różne magazyny i dostępność. Proszę o przesłanie linku do strony na prywatną wiadomość w celu oceny trudności pracy.
-
420 2 0 Dzień dobry! Szybko wykonam twoje zadanie. Podaj link do strony dostawcy do analizy i sprawdzenia, czy jest API. Pisz na prywatne.
-
2632 153 1 2 Witam. Duże doświadczenie w parsowaniu różnych stron internetowych oraz pracy z API dostawców. Stawka orientacyjna - trzeba najpierw omówić bardziej szczegółowo. Proszę o kontakt.
-
320 1 0 Witam! Zadanie jest zrozumiałe. Jestem gotów opracować dla Państwa autonomiczny parser, który będzie zbierał i strukturyzował ceny, uwzględniając wszystkie Państwa logiczne filtry (typy dostawy, wyjątki magazynów, najniższa cena).
Rozwiązanie techniczne, które proponuję:
Silnik parsowania (Python + Playwright/Requests): * Jeśli dostawca ma API — to priorytet (szybkość i bezpieczeństwo).
Jeśli API nie ma — zrealizuję symulację działań użytkownika z wykorzystaniem serwerów proxy oraz rotacji User-Agent w celu ochrony przed blokadami.
Logika wyboru ceny: * Skrypt będzie automatycznie filtrować magazyny według Państwa "czarnej listy" oraz według typów dostawy.
… Z pozostałych opcji będzie wybierana minimalna cena.
Baza danych (SQLite/PostgreSQL): * Przechowywanie 10 000 pozycji z codzienną historią w samym Excelu jest niebezpieczne (plik stanie się nieczytelny po miesiącu).
Skonfiguruję bazę danych, w której dane będą przechowywane w sposób zorganizowany, a Państwo będą mogli jednym kliknięciem wyeksportować potrzebny raport do Excela (format: Artykuł | Data 1 | Data 2 ...).
Automatyzacja (Cron/Task Scheduler): * System będzie działał według harmonogramu (na przykład o 03:00 każdej nocy) bez Państwa udziału.
Praca z nowymi artykułami: * Zrealizuję funkcję importu listy nowych artykułów przez plik tekstowy lub osobną zakładkę Excela. System sam sprawdzi je pod kątem duplikatów.
-
10038 117 0 Witam.
Opracowuję parsery w NodeJS. Jestem gotów się tym zająć. Piszcie, omówimy.
-
1770 20 0 Gotowy do opracowania monitoringu cen, piszę parsery i umieszczam je na swoich serwerach z dalszym wsparciem ich działania.\nJako opcja realizacji wszystkie produkty, dla których potrzebny jest monitoring, będą znajdować się w arkuszu Google i tam również będziecie dodawać i usuwać niepotrzebne.\n\nAby ocenić, należy przejrzeć stronę pod kątem zabezpieczeń i bardziej szczegółowo zapytać, jak uzyskiwać dane.\nPiszcie, omówimy szczegóły.
-
417 2 0 Na początku cicho sprawdzam, jak strona zwraca dane (przez oficjalne „wewnętrzne” zapytanie, nie „kliknięcia”), potem raz ustawiamy zasady: jakie składniki i jakie typy dostawy bierzemy pod uwagę. Każdego ranka automatycznie zbierana jest najniższa cena dla każdego z waszych artykułów i zapisywana w historii; w Excelu od razu widzicie tabelę „artykuły × daty”. Nowe pozycje po prostu dodajecie do listy — bez duplikatów, są przechwytywane następnego dnia. Na wyjściu: codzienny obraz cen dla wszystkich towarów bez ręcznej pracy.
-
3340 147 4 1 Dzień dobry. Mogę zrealizować twój projekt. Już mam uniwersalny gotowy parser na node js. Jeśli masz pytania, możesz do mnie napisać.
-
6811 164 1 Dzień dobry, jestem gotów omówić z Państwem szczegóły projektu. Proszę pisać na prywatną wiadomość. Z góry dziękuję
-
1476 14 1 Parsowanie cen z uwzględnieniem unikalnych składów i automatyczna codzienna aktualizacja — to właśnie tym się zajmowałem. Mam doświadczenie w pracy z dużymi zbiorami danych i optymalizacji zapytań, aby uniknąć blokad. Jaka jest struktura strony dostawcy — czy jest API, czy trzeba będzie parsować HTML? To pomoże dobrać najlepsze rozwiązanie.
-
623 5 0 Dzień dobry! Zadanie jest zrozumiałe. Mam doświadczenie w pracy z dużymi wolumenami (ponad 10 tys. produktów), więc skonfiguruję parsowanie przez API lub proxy, aby uniknąć banów i zapewnić szybkość.
Zrealizuję automatyczne odfiltrowanie niepotrzebnych magazynów oraz codzienne generowanie raportu w Excelu (z historią cen według dat). System będzie działał autonomicznie według harmonogramu.
Proszę powiedzieć, o jakiego dostawcę chodzi? Chcę sprawdzić techniczne możliwości podłączenia do API.
Czekam na Ciebie w wiadomości prywatnej, aby omówić szczegóły.
Aktualne zlecenia dla freelancerów w kategorii Bazy danych i SQL
Usunąć problem niepełnego importu danych z plików Excel specyfikacji Nowej Poczty do 1C:
164 PLN
Cel: Istnieje przetwarzanie w 1C dotyczące ładowania specyfikacji Nowej Poczty. Z nieznanych powodów przestało ładować niektóre dane tabelaryczne. Należy znaleźć przyczynę i usunąć problem niepełnego importu danych z plików Excel specyfikacji Nowej Poczty do 1C: Mały Biznes.… Administracja systemem i siecią, Bazy danych i SQL ∙ 2 dni 17 godzin temu ∙ 16 ofert |
System ewidencji, planowania i sprzedaży dla farmy grzybowej
2215 PLN
Oto pełny, finalny tekst Technicznego Zadania (TZ). Łączy on wszystkie Twoje wymagania: 16 komór, 20 kontrahentów, harmonogram po dniach, ewidencja opakowań, obliczenie rentowności oraz obowiązkowy podział na trzy gatunki grzybów. Możesz całkowicie skopiować ten tekst i wysłać… Bazy danych i SQL, Zarządzanie klientami i CRM ∙ 4 dni 21 godzin temu ∙ 55 ofert |
Zewnętrzny raport 1C 8.3 — prognoza stanów towarów
82 PLN
Potrzebny zewnętrzny raport (.erf) dla 1C:Enterprise 8.3 (konfiguracja do ustalenia). Co ma robić: Wyciągać stany towarów z bazy Analizować historię sprzedaży za ostatnie 30 dni Liczyć średni tempo sprzedaży dla każdego towaru Określać, po ilu dniach towar się skończy Oznaczać… Bazy danych i SQL, Zarządzanie klientami i CRM ∙ 4 dni 21 godzin temu ∙ 13 ofert |
Audyt bezpieczeństwa aplikacji internetowej i bazy danych dla niestandardowego CRM — specjalista BaaS / Database-as-API (PenetrPrzegląd projektu Obsługujemy platformę zarządzania relacjami z klientami (CRM) stworzoną na zamówienie, która prowadzi dwa biznesy usługowe w jednym systemie. Jest to nowoczesna aplikacja internetowa JavaScript wspierana przez bazę danych jako usługa (BaaS) i wdrożona na… Bazy danych i SQL, Testowanie i kontrola jakości ∙ 5 dni 10 godzin temu ∙ 10 ofert |
Synchronizacja baz danychSynchronizacja programów Microsoft Access i CRM SalesDrive. Przekazywanie danych z CRM do Microsoft Access na pierwszym etapie (zmiana statusu lejka). Przekazywanie danych z Microsoft Access do CRM na drugim etapie (zmiana statusu w programie). Bazy danych i SQL ∙ 5 dni 16 godzin temu ∙ 13 ofert |