Programista- parsera
Firma Group Working zajmuje się niezawodnym zatrudnieniem w Unii Europejskiej. Współpracujemy z wieloma partnerami w takich krajach jak Niemcy, Belgia, Austria, Francja i Holandia. Aby rozszerzyć naszą działalność i zoptymalizować proces poszukiwania potencjalnych partnerów i pracowników, konieczne jest opracowanie parsera, który automatycznie zbierać będzie dane kontaktowe z różnych europejskich stron internetowych z ofertami pracy.
Na dzisiaj poszukujemy programisty-parsera
Zakres prac
Opracowanie parsera, który będzie:
○ Zbierał dane kontaktowe z określonych stron.
○ Filtrował oferty pracy według krajów i zawodów.
○ Przechowywał zebrane dane w ustrukturyzowanym formacie.
Konfiguracja systemu do ciągłego zbierania danych w czasie rzeczywistym.
Testowanie i wdrożenie parsera w środowisku produkcyjnym.
Docelowe strony do parsowania
● OLX
● Flagma
● Jooble
(Możliwość dodania innych stron po uzgodnieniu)
Docelowe kraje
● Niemcy
● Belgia
● Austria
● Francja
● Holandia
Wymagania funkcjonalne
● Czas rzeczywisty zbierania danych: parser musi działać online i zbierać świeże oferty pracy bez opóźnień.
● Filtrowanie według kryteriów: zapewnić zbieranie danych tylko z określonych krajów i według zadanych zawodów.
● Skalowalność: możliwość dodawania nowych stron i zawodów do parsowania.
● Przechowywanie danych: wyniki parsowania powinny być przechowywane w bazie danych lub eksportowane w formatach CSV/Excel.
Wymagania technologiczne
● Język programowania: Python, Node.js lub inna odpowiednia technologia, która zapewni wymaganą funkcjonalność i wydajność.
● Baza danych: MySQL, PostgreSQL lub rozwiązanie NoSQL do przechowywania zebranych danych, rozważana jest również opcja przechowywania danych w formacie JSON, a następnie ich konwersji do formatu czytelnego (plik tekstowy) lub podłączenie parsera do bota Telegram do codziennych powiadomień.
● Frameworki i biblioteki: użycie nowoczesnych narzędzi do parsowania stron internetowych (np. Scrapy, BeautifulSoup).
Wymagania wobec wykonawcy
● Doświadczenie w opracowywaniu parserów i pracy z web scrapingiem.
● Umiejętność pracy z bazami danych i technologiami webowymi.
● Gotowość do współpracy i omówienia szczegółów projektu.
Wynagrodzenie omawiamy podczas rozmowy kwalifikacyjnej.
Jeśli jesteś zainteresowany naszą ofertą, chętnie porozmawiam z Tobą na temat współpracy.
-
Cześć, mam duże doświadczenie w data/web scraping, a także pracuję z różnymi bazami danych: mysql, postgres, redis (zwykle dla danych dynamicznych), s3. Mogę omówić wszystkie szczegóły współpracy w wiadomościach prywatnych. Będę zadowolona ze współpracy.
-
8796 60 0 1 Dzień dobry. Jestem gotów wykonać Twój projekt. Mam duże doświadczenie w pracy z parserami, a mianowicie parsowanie z OLX, Jooble i innych platform.
Piszę w Pythonie, zajmuję 3. miejsce na platformie.
Zapoznaj się z portfolio:Freelancehunt
Pisz, dogadamy się i zacznę pracować
Aktualne zlecenia dla freelancerów w kategorii Bazy danych i SQL
Usunąć problem niepełnego importu danych z plików Excel specyfikacji Nowej Poczty do 1C:
164 PLN
Cel: Istnieje przetwarzanie w 1C dotyczące ładowania specyfikacji Nowej Poczty. Z nieznanych powodów przestało ładować niektóre dane tabelaryczne. Należy znaleźć przyczynę i usunąć problem niepełnego importu danych z plików Excel specyfikacji Nowej Poczty do 1C: Mały Biznes.… Administracja systemem i siecią, Bazy danych i SQL ∙ 1 dzień 5 godzin temu ∙ 14 ofert |
System ewidencji, planowania i sprzedaży dla farmy grzybowej
2215 PLN
Oto pełny, finalny tekst Technicznego Zadania (TZ). Łączy on wszystkie Twoje wymagania: 16 komór, 20 kontrahentów, harmonogram po dniach, ewidencja opakowań, obliczenie rentowności oraz obowiązkowy podział na trzy gatunki grzybów. Możesz całkowicie skopiować ten tekst i wysłać… Bazy danych i SQL, Zarządzanie klientami i CRM ∙ 3 dni 9 godzin temu ∙ 55 ofert |
Zewnętrzny raport 1C 8.3 — prognoza stanów towarów
82 PLN
Potrzebny zewnętrzny raport (.erf) dla 1C:Enterprise 8.3 (konfiguracja do ustalenia). Co ma robić: Wyciągać stany towarów z bazy Analizować historię sprzedaży za ostatnie 30 dni Liczyć średni tempo sprzedaży dla każdego towaru Określać, po ilu dniach towar się skończy Oznaczać… Bazy danych i SQL, Zarządzanie klientami i CRM ∙ 3 dni 10 godzin temu ∙ 13 ofert |
Audyt bezpieczeństwa aplikacji internetowej i bazy danych dla niestandardowego CRM — specjalista BaaS / Database-as-API (PenetrPrzegląd projektu Obsługujemy platformę zarządzania relacjami z klientami (CRM) stworzoną na zamówienie, która prowadzi dwa biznesy usługowe w jednym systemie. Jest to nowoczesna aplikacja internetowa JavaScript wspierana przez bazę danych jako usługa (BaaS) i wdrożona na… Bazy danych i SQL, Testowanie i kontrola jakości ∙ 3 dni 22 godziny temu ∙ 10 ofert |
Synchronizacja baz danychSynchronizacja programów Microsoft Access i CRM SalesDrive. Przekazywanie danych z CRM do Microsoft Access na pierwszym etapie (zmiana statusu lejka). Przekazywanie danych z Microsoft Access do CRM na drugim etapie (zmiana statusu w programie). Bazy danych i SQL ∙ 4 dni 4 godziny temu ∙ 12 ofert |