Opracowanie rozwiązania do parsowania/zbierania danych API/strony internetowe oraz zbierania kontaktów do outbound/sprzedaży
Opracować rozwiązanie (skrypt/usługę/scenariusz Make.com), które:
regularnie pobiera dane z określonych źródeł (API i/lub strony internetowe),
wykonuje parsowanie stron internetowych
znajduje nowe podmioty, których nie ma w naszej wewnętrznej liście,
zastosowuje skonfigurowane filtry,
znajduje oficjalną stronę podmiotu,
zbiera kontakty osób w odpowiednich rolach do uruchomienia kampanii outbound/sales,
przechowuje wyniki w bazie danych/magazynie + umożliwia eksport.
Oczekiwany wynik
Gotowe rozwiązanie, które tworzy i utrzymuje bazę kontaktów w strukturze:
Project website
Email
LinkedIn profile link
Job title
Twitter/X profile link
Phone number
Telegram handle lub Telegram link
Dodatkowo (pożądane): data znalezienia, źródło (source), status walidacji/kompletności kontaktu.
Źródła danych i strumienie przetwarzania (3 strumienie)
Przypadek 1 — Źródło typu “katalog nowych wpisów” (API/www)
Funkcje:
Pobierać wpisy w określonym okresie i/lub inkrementalnie (nowe od ostatniego uruchomienia).
Wykrywać “nowe” podmioty w odniesieniu do naszej wewnętrznej listy (CSV/Google Sheet/JSON).
Zastosować filtrowanie (skonfigurowane).
Dla każdego podmiotu:
znaleźć oficjalną stronę,
zbierać kontakty w potrzebnych rolach,
zapisać w bazie danych/magazynie.
Przypadek 2 — Agregatory/książki adresowe (kilka niezależnych źródeł)
Funkcje:
Pobierać dane z kilku agregatorów/książek adresowych (przez API lub scraping).
Łączyć/normować wpisy, wykonywać deduplikację.
Wykrywać “nowe” podmioty (nieobecne w naszej wewnętrznej liście).
Zastosować filtrowanie (skonfigurowane).
Znajdować oficjalną stronę i kontakty w potrzebnych rolach.
Przechowywać wyniki.
Strumień 3 — Porównanie obecności między źródłami
Funkcje:
Parsować/pobierać dane z 3–5 platform/katalogów (API/www).
Porównywać “obecność” podmiotu między źródłami (dopasowanie według nazwy/domeny/identyfikatora).
Wykrywać podmioty, które:
nie są obecne w naszej wewnętrznej liście,
spełniają filtry,
Dla odpowiednich podmiotów — wyciągnąć kontakty + zapisać.
Logika zbierania kontaktów
Dla każdego wybranego podmiotu:
Określić oficjalną stronę (z danych źródła lub przez dodatkowe przejścia/weryfikacje).
Zebrać kontakty dla ról (skonfigurowana lista ról), na przykład:
Founder / C-level
Head/Lead of Partnerships / BD / Sales / Growth
Head/Lead of Operations / Product (i inne, uzgodnimy)
Źródła kontaktów:
strony “Zespół”, “O nas”, “Kontakt”, “Kariera”, “Prasa”
LinkedIn (linki do profili/firmy, jeśli dostępne)
Twitter/X, Telegram, email/formularze, telefony
Minimalny wymóg: przechowywać kontakty tylko w określonej strukturze pól.
Wymagania dotyczące danych, przechowywania, eksportu
Przechowywanie: PostgreSQL lub SQLite (wykonawca proponuje optymalną opcję) lub magazyn z eksportem do Google Sheets.
Deduplikacja:
według domeny/strony internetowej
według emaila
według URL LinkedIn
według URL Twitter/X
według telefonu/Telegramu
Eksport: minimum 1 opcja z (CSV / Google Sheets / Airtable), pożądane 2.
Wymagania techniczne:
logi,
obsługa błędów,
retry/backoff,
rate limiting.
Pożądane:
status “processed / already contacted” dla wpisów.
Konfiguracja (obowiązkowo)
Filtry i zasady muszą być zmieniane bez przepisywania kodu:
przez plik konfiguracyjny (YAML/JSON) lub
przez parametry uruchomienia lub
przez prostą konfigurację administracyjną (jeśli usługa).
Technologie (dopuszczalne opcje)
Python (Requests/Scrapy + Playwright) lub Node.js (Playwright/Puppeteer) lub Make.com.
Priorytet: oficjalne API (jeśli są), w przeciwnym razie — staranny scraping.
Docker (pożądane).
Planista: cron/Celery/inny scheduler.
Uruchomienie na VPS.
My zapewnimy
Wewnętrzną listę do wykluczenia (CSV/Google Sheet/JSON).
Początkową listę filtrów i ról.
API keys (w razie potrzeby).
Wykonawca ma dostarczyć
Repozytorium z kodem lub scenariusze Make.com (z dostępem/eksportem).
README: uruchomienie, konfiguracja, zależności.
Opis architektury (krótko) + schemat przepływu danych.
Demonstracyjny przebieg: log/screen/przykład wyników eksportu.
Wymagania dotyczące wykonawcy
Doświadczenie w web scrapingu / integracjach API / automatyzacji generowania leadów.
Zrozumienie limitów szybkości, ochrony przed botami, stabilności, deduplikacji.
Przykłady podobnych prac (linki/opis).
Opinia zleceniodawcy o współpracy z Oleksandr Bilak
Opracowanie rozwiązania do parsowania/zbierania danych API/strony internetowe oraz zbierania kontaktów do outbound/sprzedażyWszystko w porządku, zadanie zostało wykonane zgodnie z ustaleniami.
Opinia freelancera o współpracy z Ruslan Petrov
Opracowanie rozwiązania do parsowania/zbierania danych API/strony internetowe oraz zbierania kontaktów do outbound/sprzedażySzczegółowe zlecenie bez wielu dodatkowych dyskusji. Płatność szybka!
-
Zawsze ciekawie jest dowiedzieć się o unikalnych narzędziach do zbierania i analizy danych. Wyobraź sobie rozwiązanie, które nie tylko automatyzuje zbieranie kontaktów, ale robi to efektywnie poprzez filtrowanie, deduplikację i dostosowywanie filtrów bez rekodowania. Moje doświadczenie w web development i integracjach API pozwoli stworzyć innowacyjną usługę, dostosowując najlepsze praktyki parsowania i przetwarzania danych. Wdrażając to, zapewnię dokładną interakcję między źródłami a niezawodnym przechowywaniem w bazach danych. Jestem gotowa omówić, jak ten system może stać się twoim potężnym wsparciem.
-
1422 13 0 Witam. Mam doświadczenie w parsowaniu, integracjach API i automatyzacji, podobne rozwiązania już realizowałem.
Proponuję realizację w Pythonie bez Make, w formie skryptu z konfiguracją.
Krótko jak widzę rozwiązanie:
- Python (Requests/Scrapy + Playwright dla stron JS)
- modułowa architektura pod wątki
- inkrementalne zbieranie + deduplikacja
- zbieranie kontaktów według ról
… - przechowywanie w PostgreSQL lub SQLite
- eksport do CSV, Google Sheets
- logi, retry, rate limit
Filtry, role i źródła - przez konfigurację.
Uruchamianie przez cron.
Podobne systemy do zbierania kontaktów robiłem, mam zrozumienie antybota, stabilności i skalowania.
Gotowy szybko zrobić MVP i dalej rozwijać pod wasze przypadki. Proszę o przesłanie źródeł do zapoznania się.
-
1621 35 1 6 Mam gotowe rozwiązanie. Jego główne funkcje:
✅ Globalny zasięg: Platforma automatycznie skanuje tysiące otwartych źródeł, stron internetowych i rejestrów publicznych na całym świecie w celu natychmiastowego wyszukiwania potrzebnych informacji.
✅ Głęboki zbiór danych: System samodzielnie wydobywa ważne szczegóły z mediów społecznościowych, zasobów medialnych i profesjonalnych forów, tworząc pełny obraz badania.
✅ Automatyzacja rutyny: Inteligentni agenci zbierają dane w czasie rzeczywistym, całkowicie uwalniając pracowników od godzin ręcznego wyszukiwania w internecie.
✅ Natychmiastowa strukturyzacja: Cała rozproszona informacja z różnych źródeł automatycznie przekształca się w uporządkowane tabele (Smart Sheets) dla wygodnej analizy.
✅ Maksymalna dokładność: Technologia inteligentnego skrapingu pozwala na uzyskiwanie zweryfikowanych danych nawet z najtrudniejszych segmentów sieci, gwarantując wiarygodność wyników.
Szczegóły pod tym linkiemGoogle Drive
… Koszt wdrożenia od 2500 usd, czas realizacji od 10 dni.
-
172 1 1 Dzień dobry. Jestem gotów wykonać ten projekt, mam duże doświadczenie w tworzeniu aplikacji.
-
1048 7 1 Cześć!
Mam doświadczenie w opracowywaniu rozwiązań do parsowania i zbierania danych, w tym zrealizowałem serwis do zbierania kontaktów z LinkedIn i innych platform z dalszym przechowywaniem w PostgreSQL.
Zrealizuję skrypt, który będzie regularnie pobierał dane z określonych API i stron internetowych, wykonywał parsowanie i przechowywał wyniki w ustrukturyzowanej formie. Użyję FastAPI do szybkiego przetwarzania zapytań oraz BeautifulSoup lub Scrapy do parsowania.
Dodatkowo skonfiguruję logikę deduplikacji w celu poprawy jakości zbierania kontaktów. Porozmawiajmy o szczegółach!
Aktualne zlecenia dla freelancerów w kategorii Kryptowaluty i blockchain
Szukam silnego specjalisty od botów handlowych i agentów
946 PLN
Rozpoczęcie jest ważne - DZISIAJ Potrzebuję osoby, która ma doświadczenie w pisaniu botów handlowych na DEX-ach (potrzebne w sieci BSC) zrozumienie kosztów transakcji, gazu itd. Chcę przetestować kilka strategii handlowych na rzeczywistym agencie handlowym Muszę szybko… Kryptowaluty i blockchain, Tworzenie chatbota ∙ 14 godzin 37 minut temu ∙ 18 ofert |
Audyt i budowa zabezpieczonej infrastruktury do wysyłania transakcji BTC
2274 PLN
Szukamy inżyniera ds. bezpieczeństwa Bitcoin do dwóch zadań: (1) audyt obecnego systemu generacji portfeli i wysyłania BTC z identyfikacją luk; (2) projektowanie i budowa nowej zabezpieczonej infrastruktury do przechowywania kluczy i wysyłania transakcji.Część 1 — Audyt obecnego… Administracja systemem i siecią, Kryptowaluty i blockchain ∙ 10 dni 23 godziny temu ∙ 11 ofert |