Stworzenie rozwiązania programowego do automatycznego zbierania danych o produktach z pięciu docelowych stron internetowych
Stworzenie rozwiązania programowego do automatycznego zbierania danych o produktach z pięciu docelowych zasobów internetowych i łączenia ich w jedną zbiorczą tabelę (Excel/Google Sheets).
1. Zbierane dane (Kolumny w tabeli końcowej)
Dla każdego produktu należy wyodrębnić:
Nazwa (pełna nazwa produktu).
Cena (aktualna cena, cena bez rabatu — jeśli jest).
Link do produktu (bezpośredni URL).
2 Wymagania techniczne
Obchodzenie zabezpieczeń: Realizacja przetwarzania dynamicznej treści (JavaScript), jeśli strona go używa. Użycie serwerów proxy lub opóźnień (user-agent rotacja) w celu zapobiegania blokadom.
Tabela zbiorcza:
Format: .XLSX lub zapis bezpośrednio do Google Sheets.
Ważne: Zrealizować logikę dopasowywania produktów (jeśli nazwy na stronach nieco się różnią, przewidzieć możliwość łączenia po artykule).
3 Funkcjonalność (Interfejs)
Możliwość uruchomienia parsowania na żądanie.
Opcjonalnie: Ustawienie harmonogramu (na przykład raz dziennie).
Logowanie błędów (jeśli strona produktu się nie załadowała lub zmieniła struktura strony).
-
Dzień dobry. Aby ocenić projekt, należy zapoznać się z konkretnymi zasobami. Podaję minimalny możliwy koszt.
-
Dzień dobry
Profesjonalnie zajmuję się parsowaniem stron internetowych. Wykonam wszystko jakościowo i szybko.
Aby dokładnie ocenić, musimy szczegółowo omówić TZ
Będę zadowolony ze współpracy
-
Witaj. Zrobię parser dla 5 stron: nazwa, cena, URL, dopasowanie według artykułu, eksport do XLSX/Google Sheets, logowanie — napisz listę stron, zaczynamy dzisiaj.
-
Dobranoc, mogę napisać parser z wygodnym interfejsem do automatycznego zbierania danych. Przed wykonaniem chciałbym wyjaśnić, co masz na myśli mówiąc o możliwości łączenia według artykułu (czy chodzi o zbieranie nazw wszystkich w jeden, czy aby były tylko unikalne artykuły)? Po zapoznaniu się z witrynami i pełnym TZ będą koszty i terminy.
-
650 2 0 Cześć!
Opracujemy parser do zbierania danych z 5 stron w jedną tabelę:
— Zbieranie dla każdego produktu: nazwa, cena, cena bez zniżki, bezpośredni link
— Przetwarzanie dynamicznej treści (strony JavaScript) za pomocą Playwright
— Rotacja User-Agent i opóźnienia w celu obejścia blokad
— Tabela zbiorcza w formacie XLSX lub Google Sheets
— Logika dopasowywania produktów po artykule (nawet jeśli nazwy się różnią)
… — Uruchamianie na żądanie + opcjonalnie harmonogram (raz dziennie)
— Logowanie błędów
Napisz na prywatnej wiadomości — prześlij listę stron, doprecyzujemy strukturę i podamy cenę.
-
346 Cześć!
Mogę zrealizować rozwiązanie zgodnie z opisem projektu.
Jestem gotów omówić szczegóły.
-
2793 23 0 Cześć, miałem doświadczenie w podobnych projektach, podobna funkcjonalność już była rozwijana. Chciałbym zobaczyć, z jakich usług będziemy pobierać dane, potem będzie można oszacować przybliżony budżet. Napisz w wiadomościach prywatnych.
-
1970 17 0 1 Tutaj zadanie nie polega na samym parsowaniu, ale na stabilnym zbieraniu danych z 5 różnych sklepów z normalizacją nazw, cen i poprawnym łączeniem tych samych produktów w jednej tabeli. Pracuję z katalogami e-commerce, feedami i automatyzacją importu, dlatego mogę stworzyć rozwiązanie z uruchamianiem na żądanie, logowaniem błędów i eksportem do Excela lub Google Sheets. W realizacji widzę to jako osobny serwis Python: dla każdej strony — swój moduł zbierania, w razie potrzeby z obsługą JavaScript przez Playwright, następnie warstwa normalizacji danych i dopasowanie produktów według artykułu/SKU. Jeśli na części stron artykuły są nieobecne, dodam rezerwową logikę dopasowania według marki, modelu i podobnej nazwy, aby nie mieszać różnych pozycji. Po przeglądzie 5 docelowych stron będę mógł określić kosztorys; wstępnie taki projekt zajmie 7–12 dni roboczych. Proszę przesłać listę stron oraz przykład 10–15 produktów, które należy "połączyć" między źródłami — wtedy od razu podam dokładną architekturę i zakres prac.
-
265 Dzień dobry!
Mam ponad 3-letnie doświadczenie w tworzeniu parserów, automatyzacji zbierania danych, przetwarzaniu dynamicznej treści oraz eksportowaniu wyników do Excela / Google Sheets.
Mogę zrealizować rozwiązanie do automatycznego zbierania danych z 5 docelowych stron internetowych, a następnie połączyć je w jedną tabelę przestawną: nazwa produktu, cena, link, a także logikę dopasowywania pozycji między różnymi źródłami.
W razie potrzeby można dodać uruchamianie według harmonogramu, logowanie błędów oraz zapis bezpośrednio do Google Sheets, aby rozwiązanie było wygodne do regularnego użytku, a nie tylko do jednorazowego parsowania.
Proponuję omówić szczegóły, a także koszt i terminy w wiadomościach prywatnych.
-
1422 13 0 Witam!
Mogę to zrealizować. Ustawię stabilne parsowanie z uwzględnieniem proxy, opóźnień i rotacji user-agent, a także logikę dopasowywania produktów (po artykule lub podobieństwie nazw). Mam doświadczenie w skomplikowanym parsowaniu i agregacji danych.
W rezultacie otrzymasz gotowe narzędzie: uruchamianie ręczne lub według harmonogramu, logowanie błędów, aktualne ceny oraz tabelę przestawną, gotową do analizy.
Proszę, daj znać, czy produkty mają stabilny artykuł na wszystkich stronach, czy trzeba robić dopasowanie po nazwie?
-
281 Cześć! Stworzę stabilny parser z omijaniem zabezpieczeń, inteligentnym dopasowaniem produktów i automatycznym eksportem do tabeli.
Jak to zrealizuję:
• Zbieranie danych: Python + Playwright (do renderowania JS) / Requests + BeautifulSoup. Rotacja User-Agent, adaptacyjne opóźnienia, pula proxy w celu ochrony przed banami.
• Dopasowanie produktów: Priorytet — artykuł/SKU. Jeśli brak — fuzzy-matching (RapidFuzz) + normalizacja nazw. Ustawię progi scalania pod Twoją nomenklaturę.
• Wyjście: Bezpośredni zapis do Google Sheets (na żywo aktualizacja) + eksport do .xlsx. Tabela od razu gotowa do pracy.
• Zarządzanie: Uruchamianie na żądanie lub według harmonogramu (cron / prosty interfejs / bot Telegram). Szczegółowe logowanie błędów, alerty przy zmianie struktury stron.
Termin: 5–7 dni
Format: kod źródłowy + instrukcja uruchomienia/konfiguracji + 14 dni wsparcia.
Prześlij listę 5 stron — zrobię darmowy audyt struktury i pokażę demo-eksport w ciągu 24 godzin. Gotowy do startu od razu po uzgodnieniu.
-
294 1 0 Cześć, Maksym! Zainteresował mnie Twój projekt dotyczący stworzenia systemu monitorowania.
Mam gotowe rozwiązania w Pythonie + Playwright, co jest znacznie bardziej efektywne i szybsze niż wspomniane Selenium przy pracy z dynamiczną treścią (JS) i ochroną przed botami.
Co proponuję:
Stabilne omijanie zabezpieczeń: Wykorzystanie rotacji sesji i wysokiej jakości proxy.
Inteligentne dopasowanie: Zrealizuję logikę łączenia produktów według artykułów lub podobieństwa nazw, aby tabela zbiorcza była czysta.
Wygodny format: Eksport do Excela lub Google Sheets „na żywo”.
… Jestem gotów omówić szczegóły i docelowe zasoby. Pozdrawiam!
-
3456 24 0 Maksym, dzień dobry. Są podobne przypadki w portfolio - parsery olx i auto.pro z eksportem do Google Sheets. Realizuję zbieranie przez playwright z rotacją user agent i proxy, dopasowywanie towarów według artykułu przez rapidfuzz, logowanie błędów do oddzielnego pliku. Termin: 4 dni. Budżet: 3500. Pisz.
-
138 Witam! Jestem gotów zrealizować rozwiązanie w C#. Mam doświadczenie w parsowaniu HTML oraz w używaniu wyrażeń regularnych i Selenium. Mogę skonfigurować zautomatyzowane zbieranie danych z zapisem w wygodnym formacie (JSON, CSV lub Excel). Skupię się na szybkości działania i maskowaniu pod rzeczywistego użytkownika, aby uniknąć blokad. Jestem gotów omówić szczegóły i przystąpić do pracy. Termin od 1 do 3 dni.
-
97 34 4 2 Mam znaczące doświadczenie w tworzeniu parserów i systemów automatyzacji opartych na Node.js i Laravel, które idealnie nadają się do takich zadań.
Wielokrotnie wdrażałem rozwiązania do omijania zabezpieczeń stron internetowych, wykorzystując narzędzia do renderowania dynamicznej treści (Puppeteer/Playwright), rotację serwerów proxy oraz emulację zachowań prawdziwego użytkownika. Mam również doświadczenie w opracowywaniu algorytmów dopasowywania danych według artykułów oraz integracji z Google Sheets API w celu automatycznego aktualizowania tabel.
Na życzenie mogę przesłać przykłady moich prac, w których zrealizowano podobną funkcjonalność: zbieranie danych w trudnych warunkach i ich strukturyzowanie w wygodne raporty.
Ponieważ złożoność struktury stron internetowych oraz poziom ich zabezpieczeń mogą się znacznie różnić, muszę zapoznać się z docelowymi zasobami. Po krótkiej analizie linków będę mógł przedstawić dokładną wycenę kosztów i terminów realizacji projektu.
Proponuję omówić szczegóły zadania technicznego na czacie. Będę zadowolony, mogąc pomóc w rozwiązaniu Twojego zadania!
-
655 6 1 Witaj! Jestem gotów opracować rozwiązanie do automatycznego zbierania danych o produktach z pięciu docelowych stron internetowych. Biorąc pod uwagę poufność stron, stawka jest orientacyjna.
-
2138 22 2 cześć, mam duże doświadczenie w parsowaniu
proszę o listę stron, które trzeba sparsować
jestem gotów stworzyć dla was autonomiczny system, który będzie działał na waszym serwerze
cena 5-10 tys. zł, piszcie, dogadamy się
-
349 Dzień dobry.
Miałam doświadczenie w tworzeniu bota, który parsuje strony z zamówieniami, robiłam go w Pythonie.
Wasz projekt jest bardzo podobny do tego, który robiłam. Mogę zrealizować ten projekt w Pythonie.
-
716 4 0 Witaj!
Od 10 lat specjalizuję się w skomplikowanych projektach, które wymagają wysokich kwalifikacji.
Mam duże doświadczenie w podobnych projektach.
Mogę profesjonalnie opracować program do automatycznego zbierania danych o produktach z pięciu docelowych stron internetowych.
Dokładna cena po doprecyzowaniu wymagań.
Plan pracy:
Analiza docelowych stron: ocena struktury, obecność JavaScript, ochrona przed botami, dostępność danych w kodzie lub przez API
Projektowanie architektury: wybór stosów, schemat zbierania danych, kolejki zadań, baza do tymczasowego przechowywania
… Opracowanie parserów dla każdego z pięciu zasobów: przetwarzanie dynamicznej treści, selektory danych, normalizacja nazw i cen
Realizacja mechanizmu omijania ochrony: rotacja user-agent, opóźnienia między zapytaniami, podłączenie serwerów proxy
Tworzenie logiki dopasowywania produktów: łączenie według artykułu, nieprecyzyjne wyszukiwanie według nazwy, priorytety źródeł
Integracja eksportu: generowanie plików .XLSX lub bezpośredni zapis do Google Sheets przez API
Opracowanie interfejsu uruchamiania: przycisk startu, ustawienia harmonogramu, logowanie procesu i błędów
Ustawienie systemu powiadomień: alerty przy zmianie struktury strony lub krytycznych błędach
Testowanie stabilności, sprawdzanie jakości danych, optymalizacja szybkości zbierania
Przygotowanie dokumentacji, instrukcje uruchamiania i przekazywania wsparcia.
-
231 Czy macie listę 5 docelowych stron i przykład artykułu/zasad dopasowania (aby "łączyć" produkty o różnych nazwach)? Proszę również wskazać, gdzie wygodniej jest przesłać podsumowanie — Google Sheets czy .XLSX?
Zrobimy parser w Pythonie z obsługą dynamiki (Playwright), rotacją proxy i user-agent, retryami oraz logowaniem błędów. Uruchomienie — na żądanie (CLI/panel) + opcjonalnie harmonogram (cron/Cloud Scheduler). Dane będziemy przechowywać w Google Sheets lub .XLSX, zrealizujemy dopasowanie po artykule + nieprecyzyjne porównanie nazw. Mamy doświadczenie w zbieraniu danych dla marketplace'ów i budowaniu niezawodnych pipeline'ów ETL.
Jesteśmy gotowi rozpocząć pilotaż na jednej stronie i szybko uzgodnić format tabeli. Napisz, aby uzgodnić docelowe zasoby i kryteria zgodności.
-
2335 37 0 Cześć. Zrozumiałem zadanie.
Z parsowaniem E-commerce pracuję na co dzień. Od razu powiem, gdzie będą główne problemy i jak je rozwiązuję:
Ochrona przed botami (Cloudflare/DataDome). Strony będą ograniczać zapytania i banować IP. Rozwiązuję to za pomocą Pythona + Playwright, dodatkowo podłączam pulę rezydenckich proxy z rotacją i randomizacją odcisków przeglądarki.
Zmiana układu. Sklepy często aktualizują design. Aby parser nie przestawał działać przy każdej zmianie przycisku, piszę elastyczne selektory.
Łączenie produktów (matching). Najtrudniejsze. Jeśli artykułów brakuje, zwykłe porównanie po nazwie da bałagan. Będę używać algorytmów wyszukiwania przybliżonego (Levenshtein), aby zrozumieć, że "iPhone 15 Pro 256GB" i "Apple iPhone 15 Pro 256 GB" to ten sam produkt. Wszystko, co będzie miało wątpliwy procent zgodności, trafi do osobnej kolumny do ręcznego potwierdzenia.
…
Orientacyjnie po pieniądzach to $200–300, po terminach — 10-14 dni.
Proszę, prześlij linki do tych 5 stron — zobaczę, jak surowa jest tam ochrona antyfraudowa, i będę mógł podać dokładną cenę i terminy.
-
1490 28 0 Mogę wykonać, piszcie w celu omówienia szczegółów. Cena i termin są warunkowe....
-
3305 70 1 Witam.
Mogę zrealizować rozwiązania zgodnie z opisem projektu.
Jestem gotów omówić projekt i zapoznać się z darczyńcami.
-
4975 41 4 1 Dzień dobry!
Jestem gotów zrealizować rozwiązanie programowe do automatycznego zbierania danych z pięciu stron internetowych. Mam doświadczenie w przetwarzaniu JavaScript, omijaniu zabezpieczeń (proxy, user-agent), integracji z Google Sheets oraz opracowywaniu logiki dopasowywania produktów. Przewiduję uruchomienie na żądanie i logowanie błędów.
Napisz, omówimy szczegóły!
-
1682 2 0 Maksym, zapoznałem się z opisem — zadanie jest zrozumiałe i odpowiada moim umiejętnościom.
Zrealizuję zbieracz na Pythonie + Playwright: dla każdej z pięciu stron wyciągnę pełną nazwę produktu, aktualną cenę i cenę bez rabatu (jeśli jest), bezpośredni URL. Dla stron z renderowaniem JS Playwright obsługuje dynamiczną treść natywnie. Podłączę rotację user-agentów i serwery proxy, aby uniknąć blokad. Wynik — plik XLSX przez openpyxl lub zapis bezpośrednio w Google Sheets przez API, według Twojego wyboru. Dla porównania produktów między stronami zrealizuję nieprecyzyjne dopasowanie według artykułu + nazwy (rapidfuzz) — jeśli nie ma artykułów, ustalimy logikę fallback. Uruchomienie — na żądanie przez CLI, opcjonalnie dodam harmonogram cron (raz dziennie). Logowanie błędów — do oddzielnego pliku z szczegółami dla każdej strony.
Jedna kwestia: czy możesz ujawnić, które konkretnie pięć stron należy zeskrobać? Jeśli jest tam Cloudflare lub Datadome — ma to wpływ na ocenę zakresu prac, chcę to uwzględnić od razu.
Cena: 14 400 UAH, termin — 5 dni.
-
260 Dobry wieczór, opracujemy specyfikację, i zrobimy wszystko szybko i jakościowo. Zbieranie informacji możemy zrealizować na wiele sposobów, piszcie w wiadomościach. Przetworzymy każdy rodzaj zabezpieczenia, i wszystko wyeksportujemy zgodnie z Państwa wymaganiami. Piszcie, dogadamy się co do terminów.
-
297 Cześć!
Mam doświadczenie w tworzeniu parserów do zbierania produktów z kilku stron internetowych z późniejszym łączeniem ich w jedną tabelę.
Jak to zrealizuję:
- Zbieranie nazwy produktu, ceny i linku
- Obsługa stron z JavaScript (Playwright lub API, jeśli dostępne)
- Ochrona przed blokadami (opóźnienia, user-agent, w razie potrzeby proxy)
- Tworzenie zwięzłej tabeli (Excel lub Google Sheets)
… - Logika dopasowywania produktów (po artykule lub podobnej nazwie)
Dodatkowo:
- Możliwość uruchamiania według harmonogramu
- Logowanie błędów
- Gotowy, uporządkowany wynik do dalszej pracy
Pracowałem z podobnymi zadaniami (rynkami, katalogami produktów, dużymi wolumenami danych).
Do wyjaśnienia:
- które dokładnie strony należy parsować
- przykład produktów do poprawnego dopasowania
- format wyniku (Excel czy Google Sheets)
Jestem gotowy rozpocząć od razu po uzgodnieniu szczegółów.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Skonfigurować moduł "Automatyczne przetwarzanie cenników. v.9.5".Sklep na OcStore 2.3. zainstalowany moduł "Automatyczne przetwarzanie cenników. v.9.5". Wszystko jest skonfigurowane przez autora modułu, ale teraz są kwestie dotyczące ustawień, których nie mogę zrozumieć i pojąć logikę działania modułu. Na przykład problem z dwoma… Sklepy internetowe i e-commerce, Parsowanie danych ∙ 12 godzin 52 minuty temu ∙ 18 ofert |
Cennik towarów części samochodowych od dostawców dla stron internetowych z częściami samochodowymi na bazie PromuSpecyfikacja techniczna Projekt Ustawienie zawartości i synchronizacji dwóch sklepów Prom.ua z dostawcami części samochodowych. Zadanie Wymagana jest realizacja załadunku i aktualizacji produktów od dostawców części samochodowych dla dwóch sklepów internetowych na… Parsowanie danych ∙ 1 dzień temu ∙ 43 oferty |
Parsowanie bazy
168 PLN
Wymagania dotyczące kanałów:1. Język treści:Rosyjski lub ukraiński(dopasowana mieszana treść RU/UA)2. Liczba subskrybentów:Nie mniej niż 500 subskrybentów3. Aktywność:Ostatni post opublikowany nie później niż 32 godziny temu4. Komentarze:Na kanale muszą być otwarte komentarze… Bazy danych i SQL, Parsowanie danych ∙ 1 dzień 2 godziny temu ∙ 28 ofert |
Należy opracować bota Telegram do monitorowania samochodów z aukcji w USA (Copart, IAAI)Należy stworzyć bota Telegram do automatycznego wyszukiwania i monitorowania samochodów "BUY IT NOW" na aukcjach w USA (Copart, IAAI). Bot powinien działać w trybie automatycznym i wysyłać powiadomienia o nowych samochodach, które odpowiadają zadanym filtrom.Podstawowa… Parsowanie danych, Tworzenie chatbota ∙ 2 dni 3 godziny temu ∙ 93 oferty |
Parsowanie produktów, przygotowanie do importu na WPWydobyć pełny katalog tych stron: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ Wszystkie produkty muszą być połączone w jedną wspólną tabelę do importu do WP. Każdy… Programowanie stron internetowych, Parsowanie danych ∙ 4 dni 19 godzin temu ∙ 62 oferty |