Programista Python, ekspert ds. skrobania
Cześć, Szukamy osoby, która rozwiąże następujące zadania:
Refaktoryzacja systemu parserów (10 źródeł)
Mamy system z 10 parserami różnych źródeł.
Należy przeprowadzić refaktoryzację:
- Ujednolicić architekturę wszystkich parserów
- Wydzielić wspólną logikę do oddzielnych modułów
- Przygotować do integracji z AirFlow
- Ustawić cotygodniowe wykonywanie
Wymagana jest analiza obecnego kodu oraz propozycje dotyczące poprawy struktury.
Kod: https://drive.google.com/file/d/1RMZsWYDLTYV3c4zkHrrUT0-tdTo7Cua4/view?usp=sharing
Dostęp do bazy danych również można udostępnić, ale jeśli uruchomisz lokalnie, będzie super. To nie jest jednorazowe zadanie, można to traktować jako płatny test, w rezultacie szukamy osoby na część etatu.
Wymagania:
Zapoznać się z kodem
Proponować i argumentować poprawki do kodu.
Wprowadzić poprawki
Uruchomić to wszystko na serwerze i uruchamiać zgodnie z harmonogramem
Proszę, podajcie od razu swoją stawkę godzinową i oszacowanie na to zadanie!
-
1825 52 0 Cześć. Specjalizuję się w automatyzacji i parsowaniu informacji. Jestem zainteresowany stałą współpracą. Kod przejrzałem - wszystko jest jasne, tylko teraz importy są źle zapisane. W bazie - będą potrzebne tylko dane z tabeli "urls_sitemap" - aby sprawdzić, czy parsery działają.
Z AirFlow jeszcze nie pracowałem - ale jestem gotów szybko się z tym zapoznać.
Na koniec tego zadania - czy wymagana jest minimalna integracja z AirFlow, czy tylko przygotowanie i uruchomienie starego kodu na serwerze?
Stawka: 25$ / dzień
Aktualizacja: Już zrozumiałem AirFlow - ale teraz źródła są już niedostępne.
-
69 Cześć!
Jestem profesjonalnym programistą Pythona z dużym doświadczeniem w automatyzacji, parsowaniu, tworzeniu botów i narzędzi webowych.
Na moim koncie jest ponad 500 projektów — od prostych parserów cen konkurencji po skomplikowane systemy, które zbierają miliony produktów z Amazon, omijają Cloudflare, CAPTCHA, blokady IP i autoryzacje.
Pracowałem z takimi stronami jak:
- Amazon
- Instagram
… - Facebook
- Google
- Twitter
- LinkedIn
- Walmart
i wieloma innymi.
Technologie, z którymi pracuję:
- Python
- Requests
- BeautifulSoup
- Selenium
- Playwright
- Scrapy
- Undetected Chromedriver
- rotacja IP
- Django + PostgreSQL.
Dla dużych projektów tworzę panele administracyjne i bazy danych do wygodnej pracy z zebranymi danymi.
Mam również własną bazę leadów z e-mailami, telefonami i mediami społecznościowymi, która pomoże przyspieszyć Twój marketing lub sprzedaż.
Jestem gotów pokazać przykładowy test przed rozpoczęciem pracy, abyś mógł ocenić jakość. Napisz do mnie, opowiedz o zadaniu — a znajdziemy najlepsze rozwiązanie dla Twojego biznesu.
-
414 1 0 Dzień dobry, jestem gotów rozważyć, często zajmuję się parserami w różnych językach programowania. Proszę napisać na priv, tam wszystko omówimy dokładniej
-
320 Dzień dobry!
Mam doświadczenie w programowaniu w Pythonie.
Przejrzałem kod i mogę zaproponować zmianę (dopracowanie) architektury na Clean Architecture, a także poprawienie błędów z importami. Bazę mogę rozwinąć lokalnie samodzielnie, ale do prawidłowego działania parserów bardzo potrzebne są dane z tabeli urls_sitemap.
Z Airflow jeszcze nie pracowałem, ale szybko się uczę i jestem pewien, że będę w stanie przygotować system do integracji z Airflow. Mam również doświadczenie w konfigurowaniu harmonogramu do automatycznego uruchamiania zadań.
Stawka — 7$/godz.
Piszcie, będę zadowolony ze współpracy!
-
1412 14 3 1 Witam, przejrzałam twoje zadanie, chciałabym zająć się realizacją. Mogę pracować nawet po 16 godzin dziennie, stawka godzinowa 10$. Będę zadowolona ze współpracy.
-
512 3 1 Cześć, jestem zainteresowana pracą w niepełnym wymiarze godzin, podaję stawkę i termin realizacji (przy pracy 4 godziny dziennie)
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Potrzebny parser sklepu internetowego https://www.lcsc.com/należy regularnie (1 raz w miesiącu, lub przy uruchomieniu skryptu) uzyskiwać aktualne informacje o produktach dostępnych w sklepie https://www.lcsc.com/ z katalogu wszystkich działów… Parsowanie danych ∙ 20 minut temu ∙ 8 ofert |
OpenCart — katalog wynajmu sprzętu specjalistycznego
492 PLN
OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub… Programowanie stron internetowych, Parsowanie danych ∙ 16 godzin 46 minut temu ∙ 43 oferty |
Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)
169 PLN
Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu. Konfigurowanie oprogramowania i serwerów, Parsowanie danych ∙ 20 godzin 39 minut temu ∙ 25 ofert |
Parsowanie i klasyfikacja dużej liczby obrazówNależy zrealizować projekt zbierania i strukturyzacji dużej ilości architektonicznych obrazów z otwartych źródeł internetowych.Zadanie obejmuje: automatyczne zbieranie obrazów; ładowanie plików w maksymalnie dostępnej jakości; klasyfikację obrazów według kategorii: Exterior;… Python, Parsowanie danych ∙ 21 godzin 7 minut temu ∙ 30 ofert |
Parsowanie CV z Work.ua i Rabota.uaNależy pobrać w formacie Excel bazę aktualnych CV z Work.ua i Работа.ua. Preferowane, aby plik Excel zawierał następujące kolumny:ImięNumer telefonu (w formacie +380...)Adres e-mailStanowisko (zawód)Stanowiska, które rozważaKategoria branży (rubryka)Branża, w której… Wyszukiwanie i zbieranie informacji, Parsowanie danych ∙ 1 dzień 20 godzin temu ∙ 18 ofert |