Parsera wolnych miejsc
Schemat przekazywania danych
Źródło indeed.com parsim --> do pośredniego BD na tym samym hostingu (kontrola) --> dodajemy do strony BD agregatora miejsc pracy na zewnętrznym hostingu
Parkować trzeba:
- tytuł
- Opis
- daty
- nazwa firmy
- strona firmy
Adres (miasto i kraj)
Dane znajdują się na 2 stronach, głównej i na stronie szczegółów
Objętość parsinga jest niewielka - raz dziennie nie więcej niż 30-50 stron
Wyślemy szczegółowe TZ.Pokażmy przykładowe ceny.• • • • • • • • • • • •
Hosting bez VPS – zwykły standardowy hosting
Należy wybrać rozwiązania, które nie obejmują: wyznaczone lub wirtualne serwery, dodatkowe programy, które należy zainstalować na lokalnym komputerze.Rozpoczęcie i ustawienie parsera powinny być dostępne dla użytkownika poprzez korekty w plikach.Wszystkie pliki parsera muszą być przechowywane w oddzielnym folderze hostingu.• • • • • • • • • • • •
Parsera zamawiam przez kilka lat, oto lista problemów, które pojawiają się i których należy unikać:
- w TZ z góry napisane parametry hostingu, ale wykonawca po rozpoczęciu projektu prosi o zmianę hostingu
- w TZ wcześniej napisany sposób przechowywania danych, ale wykonawca następnie prosi o zmianę sposobu przechowywania danych
- w TZ z góry napisane, gdzie dane będą eksportowane, ale wykonawca nie może tego zrobić
- skomplikowany i niestabilny proces uruchomienia parsera (zaczyna się raz, trzeba pobrać specjalne programy na lokalnym komputerze do uruchomienia)
-
Крайне рекомендую указать в описании проекта то, что сайт находится на серверах CloudFlare.
-
Без разници где находится сайт. Просто надо использовать прокси для запросов и проблем не будет, так как если даже сайт спрятан не за CloudFlare, в чем проблема самостоятельно настроить nginx? А когда положат единственный IP в blacklist то неважно кто это сделает CloudFlare, nginx или руками
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Python / Inżynier Sieciowy: Optymalizacja sieci bota (WAF, Pooling połączeń, Asyncio)Uproszczona wersja! Proszę o odpowiedź tylko tych, którzy rozumieją i znają się na rzeczy. O projekcie: Zautomatyzowany bot do snajpingu. Podstawowa logika biznesowa (parsowanie, autoryzacja, budowanie pakietów JSON/XML) jest już gotowa i działa w Pythonie. Docelowe środowisko… Python, Parsowanie danych ∙ 13 godzin 20 minut temu ∙ 14 ofert |
OpenCart — katalog wynajmu sprzętu specjalistycznego
492 PLN
OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub… Programowanie stron internetowych, Parsowanie danych ∙ 13 godzin 29 minut temu ∙ 42 oferty |
Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)
169 PLN
Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu. Konfigurowanie oprogramowania i serwerów, Parsowanie danych ∙ 17 godzin 22 minuty temu ∙ 22 oferty |
Parsowanie i klasyfikacja dużej liczby obrazówNależy zrealizować projekt zbierania i strukturyzacji dużej ilości architektonicznych obrazów z otwartych źródeł internetowych.Zadanie obejmuje: automatyczne zbieranie obrazów; ładowanie plików w maksymalnie dostępnej jakości; klasyfikację obrazów według kategorii: Exterior;… Python, Parsowanie danych ∙ 17 godzin 50 minut temu ∙ 30 ofert |
Parsowanie CV z Work.ua i Rabota.uaNależy pobrać w formacie Excel bazę aktualnych CV z Work.ua i Работа.ua. Preferowane, aby plik Excel zawierał następujące kolumny:ImięNumer telefonu (w formacie +380...)Adres e-mailStanowisko (zawód)Stanowiska, które rozważaKategoria branży (rubryka)Branża, w której… Wyszukiwanie i zbieranie informacji, Parsowanie danych ∙ 1 dzień 17 godzin temu ∙ 18 ofert |
Praga