Naprawianie skryptów w Python i ustawienie wykonywania na serwerze
trzeba przetwarzać gotowy parsing produktów napisane w Pythonie, w ogóle teraz wszystko działa poprawnie, tylko parsing jest wykonywany w jednym strumieniu.
Zadania należy wykonać, aby parsing działał w kilku strumieniach, ale aby nie było dużego obciążenia na darczyńcę, z którego będzie wykonywany parsing. w tym pytaniu koniecznie, że masz doświadczenie i można dać radę o liczbie przepływów itp. Musisz ustawić wykonanie tego skryptu na serwerze. Również potrzebna jest porada, która wybrać serwer - cena\ Jakość.
Pokażmy wydawcy.
Jeśli łatwiej zaproponować swój parsing, mogę również rozważyć tę opcję.
Opinia zleceniodawcy o współpracy z Oleksandr K.
Naprawianie skryptów w Python i ustawienie wykonywania na serwerzeAleksander świetnie poradził sobie z zadaniem, wykonując wszystko nawet więcej!
Polecam do współpracy!
Opinia freelancera o współpracy z Oleksandr Ranichev
Naprawianie skryptów w Python i ustawienie wykonywania na serwerzeOleksander to uprzejma osoba, szczegółowo opisuje zadanie, ciągle w kontakcie, dobrze wie, czego potrzebuje w poprawkach, dobrze je opisuje. Miło było współpracować.
-
Gotowy do wykonania już teraz
Mam duże doświadczenie w pisaniu parserów w Pythonie, a także ustawienia serwerów
-
335 1 0 Pozdrawiam Aleksandra!
Mam doświadczenie w pisaniu, specjalizuję się w Pythonie.
Aby zorganizować wielofunkcyjność, planuję wykorzystać możliwości odpowiednich bibliotek i cache danych - pozwoli to wykonywać parsing w kilku strumieniach lub korytnach, wykonywać kilka pytań jednocześnie (i otrzymywać dane szybciej).
Serwer - DigitalOcean będzie działać, ma wiele ustawień. Musisz wybrać taryfę na podstawie ilości CPU, objętości pamięci operacyjnej i przepustowości sieciowej - im więcej, tym lepiej dla projektu.
Czekam na Twoją wiadomość w razie zainteresowania współpracą.
…
z szacunkiem
Pokojowe niebo
-
838 14 2 Witajcie !
Jest kilka pytań na temat Twojego zadania.
1 . „Niektóre przepływy” to wystarczająco rozciągające pojęcie. Czy pamiętasz, że jeden parser powinien używać kilku strumieni; czy kilka strumieni, a na każdym z nich - swój instans parser?
2 . Ja już to robię, mogę ci pomóc. Sam scenariusz uruchomię jako usługa, a tym samym scenariusz zostanie ponownie pobrany, jeśli coś się z nim stanie nie tak. Dodatkowo, w odniesieniu do serwera: oferuję Ci usługę DigitalOcean. Za jego jakość zjadamy obiad. Oto jego oceny: https://www.digitalocean.com/pricing/droplets
Jeśli jesteś zainteresowany moją kandydaturą, proszę o kontakt osobisty!
-
397 14 0 Pozdrawiam nazywa się Bogdan i chciałbym pracować nad Twoją projektem. Przygotowuje się do rozwiązania zarówno pierwszego, jak i drugiego zadania.
Twój problem szybkości jest rozwiązany przez Scrapy lub threading pod warunkiem, że nie ma długiego oczekiwania na odpowiedź od serwera. Możesz wysłać kod, aby ocenić wartość i czas, a także daję zalecenia wps, które sam używam do swoich projektów
Tech Stack
- Python
Zestawienie Selenium / Playwright
Wymagania + BS4
… - Proxies
Captcha solwer
- Scrapy
- PostgreSQL
Szybka API
Oceana cyfrowa
- linux
W razie potrzeby przedstawię swoje projekty.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Parsowanie danych przez mobilne APISzukałem osoby z doświadczeniem w parsowaniu danych przez mobilne API, do parsowania e-commerce, rozetka i podobne Zadania: 1. Przechwytywanie ruchu aplikacji mobilnej (Android) konfiguracja proxy, analiza zapytań 2. Określenie potrzebnych punktów końcowych API, do których… Python, Parsowanie danych ∙ 20 godzin 1 minuta temu ∙ 22 oferty |
Szukam programisty lub kodera do automatyzacji scrapingu danych 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing przypadkowo wysłałem ten link Programowanie stron internetowych, Parsowanie danych ∙ 22 godziny 23 minuty temu ∙ 30 ofert |
Stworzyć dashboard w https://airtable.com/ dotyczący efektywności reklamowych kreacji z facebook adsPełnoprawne TZ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Bazy danych i SQL, Parsowanie danych ∙ 5 dni 16 godzin temu ∙ 19 ofert |
Stworzenie pliku Exel do załadowania towarów na strony innych partnerów.Interesuje mnie, aby stworzyć tabelę Excel ze wszystkimi parametrami. Oto strona - https://heiztechnik.com.ua/ A pozycje, które mnie interesują, powinny być przeniesione: Kotły ręczne: 1) TIS UNI 15-95 kW (10) szt 2)TIS HARD 150-500 kW (7) szt Kotły na pelety: 1)TIS PELLET… Parsowanie danych ∙ 5 dni 21 godzin temu ∙ 37 ofert |
Wymagany programista do parsowania katalogu i automatyzacji importu danychSzczegółowe TZ w załączonym dokumencie proszę w odpowiedzi podać orientacyjną cenę i terminy realizacji czy masz doświadczenie w parsowaniu dużych katalogów jakie możliwe trudności lub ograniczenia widzisz w tym zadaniu Bazy danych i SQL, Parsowanie danych ∙ 5 dni 23 godziny temu ∙ 42 oferty |