Budżet: 25000 USD Termin: 14 dni
Możemy zająć się takim systemem. Orientacyjny koszt pierwszego etapu roboczego to od 45 000 UAH i 10-14 dni. To nie jest tylko parser, kluczowe są tutaj jakość dopasowań, deduplikacja, kontrola błędnych profili oraz normalna struktura wyników w JSON lub CSV =)
Z doświadczenia - robiliśmy systemy wzbogacania danych, wyszukiwania w otwartych źródłach, automatyzacji zbierania, wewnętrzne CRM i analityczne pipeline'y. Do tego zadania użyłbym Pythona, Playwright lub Scrapy, osobny moduł wyszukiwania przez wyszukiwarki, kolejkę przetwarzania, cache, zasady weryfikacji oraz scoring dopasowań według imienia, firmy, adresu, stanu, strony internetowej i telefonu.
Widzę podejście w ten sposób:
> bierzemy małą próbkę twoich rekordów i robimy prototyp wyszukiwania
> osobno szukamy profilu osobistego, strony biznesowej, strony firmy oraz dostępnych kontaktów
> każde znalezione dopasowanie otrzymuje ocenę zaufania, aby nie mieszać ludzi o tych samych imionach
> wynik oddajemy w strukturze z źródłami, poziomem zaufania, datą weryfikacji oraz powodem dopasowania
Zobacz, tutaj jest niuans - LinkedIn i Facebook mają ograniczenia na automatyzowane zbieranie, dlatego nie budowałbym rozwiązania na kruchym dostępie do konta. Lepiej połączyć wyniki wyszukiwania, otwarte strony, stronę firmy, katalogi biznesowe oraz weryfikację atrybutów. W ten sposób system będzie stabilniejszy, a nie jak domek z kart na wietrze.
Proszę o wyjaśnienie:
> jaki jest zakres bazy na pierwszym etapie - 1 000, 50 000 czy więcej rekordów
> jaki jest dopuszczalny błąd i co jest ważniejsze - więcej znalezionych kontaktów czy mniej błędnych dopasowań
Relewantne przykłady Ingello:
> https://business.ingello.com/vorfahr - automatyzacja i złożona obróbka danych dla procesów biznesowych
> https://business.ingello.com/fractal - podejście agencji i automatyzacja złożonych procesów roboczych
> https://business.ingello.com/forma-crm - korporacyjny system z danymi, rolami i zorganizowaną logiką
Strona główna dla FLH - https://systems-fl.ingello.com/ua
Po próbie 100-300 rekordów będzie można dokładniej ocenić pełny budżet na cały zbiór. Zazwyczaj to właśnie pilotaż pokazuje rzeczywistą jakość źródeł i nie pozwala wydać budżetu na ładną, ale ślepą automatyzację.