Rozwój parsera/scrapera na Python + Selenium
910 PLN
Opracować zautomatyzowany parser na Python + Selenium do zbierania danych o reklamach z witryn:
Zebrane dane należy zaggregować, policzyć liczbę unikalnych linków, utworzyć ranking popularności stron reklamowych i przesłać wyniki do Notion przez API.
Udostępnimy dostęp do istniejącej bazy kodu, która już realizuje podstawowe funkcje autoryzacji, parsowania i integracji z API Notion dla AdHeart.me. Kod wykonuje inne zadania, ale może być użyty jako podstawa lub do uproszczenia rozwoju obecnego parsera.
Szczegółowe TZS:
https://www.notion.so/sirka-cpa/Python-Selenium-209a01e1b37180749184c3d30ca4e97e?source=copy_link
Po AdHeart.me kod jest u nas praktycznie gotowy, wystarczy go tylko dopracować, aby uzyskać potrzebne dane. (Obecnie pobiera on linki do filmów, a nam potrzebne są linki do promowanych lejków)
По AdHeart.me код у нас практически готов, нужно только доработать его для получения нужных данных. (Сейчас он вытягивает ссылки на видео, а нам нужны ссылки на рекламируемые воронки)
Załączniki 5
Opinia zleceniodawcy o współpracy z Oleh Ovchynnykov
Rozwój parsera/scrapera na Python + SeleniumNie doceniliśmy złożoności projektu. I ja, jako zamawiający, i Oleg, jako specjalista. W rezultacie projekt zamiast 5 dni trwał 2 miesiące.
Jednak mimo wszystko, Oleg doprowadził sprawę do końca i był w stanie dostarczyć działający parser.
Poza terminami, jedyną rzeczą, na którą mogę narzekać, jest dokładność i przestrzeganie dostarczonej specyfikacji. Po 50 razach straciłem rachubę, ile razy musiałem sprawdzać parser i odsyłać go do poprawy.
Opinia freelancera o współpracy z Kirill Ivannyk
Rozwój parsera/scrapera na Python + SeleniumDobry załącznik
Doprowadziłem projekt do końca
Będę cieszył się ze współpracy
-
5 dni1092 PLN5 dni1092 PLN
Witaj Kirillu,
Dokładnie przeanalizowałem Twoje specyfikacje techniczne oraz ostatnią aktualizację dotyczącą kodu AdHeart.me. Zrozumienie, że ta część projektu wymaga teraz dopracowania, a nie budowania od podstaw, pozwala mi zaproponować bardziej efektywny harmonogram.
Ten projekt jest idealnie dopasowany do moich umiejętności. Jako certyfikowany programista Pythona w ramach PCAP™, z bezpośrednim doświadczeniem w automatyzacji Selenium i, co kluczowe, Dockerze, mogę dostarczyć solidne, konteneryzowane rozwiązanie, którego potrzebujesz.
Jestem pewny, że poradzę sobie ze wszystkimi wyzwaniami technicznymi opisanymi, w tym:
Modyfikacją istniejącego kodu AdHeart.me do parsowania linków do lejków.
… Implementacją nowego parsera dla Facebook Ads Library z nieskończonym przewijaniem.
Strukturyzacją danych za pomocą Pandas i integracją z API Notion.
Dostarczaniem czystego, zoptymalizowanego obrazu Docker do łatwego wdrożenia, zgodnie z Twoimi wymaganiami niefunkcjonalnymi.
Moje portfolio jest dostępne na www.revazgoguadze.com. Jestem gotowy dostarczyć wysokiej jakości, niezawodne narzędzie dla Twojego zespołu.
Z poważaniem,
Revaz Goguadze
-
Oferta, która wygrała4 dni910 PLN
3482 50 0 Oferta, która wygrała4 dni910 PLNDzień dobry
gotów wykonać tę pracę
Piszcie, chętnie pomogę
Wykonam wasze zadanie, już z wami rozmawialiśmy
-
1 dzień1456 PLN
3893 24 0 1 dzień1456 PLNDzień dobry,
Jestem gotowy podjąć się opracowania zautomatyzowanego parsera. Mam doświadczenie w pracy z Pythonem i Selenium, a także umiejętność integracji danych z Notion przez API. Biorąc pod uwagę dostarczony kod i konieczność dopracowania go dla AdHeart.me, uważam, że mogę skutecznie dostosować istniejące funkcje i opracować nowe, aby pomyślnie zrealizować projekt.
Mój stawka to 16$ za godzinę.
-
3 dni1092 PLN
192 1 0 3 dni1092 PLNWitam. Mam szerokie doświadczenie w tworzeniu botów do parsowania na Pythonie z użyciem Selenium. Pracę można podzielić na 3 etapy:
1) Parsowanie danych ze stron internetowych (Selenium, BeautifulSoup)
2) Przetwarzanie i sortowanie (Pandas)
3) Wysyłanie wyników do Notion
Chętnie omówię z Tobą każdy krok, aby mieć ogólne zrozumienie rozwiązania Twojego zadania. Z przyjemnością pomogę, pisz!
P.S. Język komunikacji według Twojego uznania (rosyjski, angielski)
-
4 dni1456 PLN
2558 37 0 4 dni1456 PLNWitaj!
Z przyjemnością podejmę się Twojego projektu!
Mam w tym duże doświadczenie.
Napisz do mnie w wiadomości prywatnej i zobacz portfolio
-
7 dni1820 PLN
1616 8 0 7 dni1820 PLNWitam
Jestem programistą w dziedzinie ML/DL i Web Scraping. Chętnie wykonam Twój projekt. Napisz do mnie, omówimy szczegóły.
-
11 dni1092 PLN
720 6 1 11 dni1092 PLNPrzechodząc do sedna projektu:
Planuję napisać własny mechanizm parsowania, mechanizm autoryzacji rozwinąć na podstawie istniejącego repozytorium.
Krótko opisując algorytm robota:
1 - Połączenie z chmurowym serwerem i sprawdzanie przepełnienia sesji dla AdHeart.me (Należy doprecyzować szczegóły dotyczące punktu 12.5 w specyfikacji);
2 - Sprawdzenie połączenia z wskazanymi stronami;
3 - Zbieranie informacji z tabel Notion
3 - Parsowanie stron według algorytmu z specyfikacji. Wczytywanie wstępnych wyników do cache (Redis);
4 - Przetwarzanie i agregacja danych;
… 5 - Wczytanie do lokalnej bazy danych (Planowane jest użycie PostgreSQL, rozważane są również Twoje preferencje)
6 - Sprawdzenie dostępności Notion API
7 - Wczytanie danych z bazy do Notion
Planuję napisać dwie wersje repozytorium (prod & dev) dla ułatwienia wdrożenia i konteneryzacji. Będę pisać w Pythonie 3.12 (możliwe 3.13)
Przewidywana struktura projektu:
-d services (główne algorytmy i własne biblioteki)
--d scrape
---Facebook (funkcje i moduły do interakcji z Facebookiem)
---AdHeart (funkcje i moduły do interakcji z AdHeart)
---scrape_main (główny skrypt do parsowania)
--d Notion
---NotionAPI (interakcja z Notion)
-d models (modele dla BD)
-d db
--postgresql (główna baza)
--redis (cache)
-d .venv (środowisko wewnętrzne)
-d requirements (folder z plikami .txt z zależnościami)
- pyproject.toml (plik konfiguracyjny projektu)
- docker-compose
- README.md
- .env (zmienne środowiskowe)
- main.py (główny plik, dyrygent projektu)
Należy doprecyzować szczegóły i uzgodnić sposób realizacji oraz jej kontrolę. Chcę również omówić etapy projektu i terminy ich realizacji.
-
7 dni1820 PLN
93808 1266 1 10 7 dni1820 PLNWitam. Mam duże doświadczenie w tworzeniu parserów.Czy konieczne jest parsowanie FB Ads? Oni mają API
-
5 dni910 PLN
1412 4 0 5 dni910 PLNWitaj. Mam praktyczne doświadczenie z Pythonem, Selenium, agregacją danych i integracjami API, w tym Notion. Jestem gotów dostosować się do dostarczonej bazy kodu i rozbudować ją, aby skutecznie spełniała obecne wymagania. Skupiam się na stabilności, łatwości utrzymania i czystej implementacji.
Chętnie omówię szczegóły techniczne.
-
15 dni910 PLN
8867 60 0 1 15 dni910 PLNCześć! Jesteśmy firmą SolidWay i chętnie pomożemy w opracowaniu zautomatyzowanego parsera na Pythonie z użyciem Selenium. Posiadamy szerokie doświadczenie w tworzeniu podobnych rozwiązań i jesteśmy pewni, że możemy stworzyć skuteczny parser do zbierania danych o ogłoszeniach reklamowych.
Nasz zespół już pracował z integracją API i parsowaniem danych, dlatego posiadamy niezbędną wiedzę ekspercką do wykonania powierzonego zadania. Jesteśmy gotowi wykorzystać dostarczoną istniejącą bazę kodu i ją rozbudować, aby osiągnąć Twoje cele.
Omówimy szczegóły projektu, aby określić, jaki zakres prac będzie potrzebny i jak to się ma do Twoich oczekiwań. Również ustalimy terminy i budżet po dokładniejszej dyskusji na temat zadania.
-
14 dni874 PLN
1850 46 3 14 dni874 PLNCześć!
Jestem zainteresowany Twoim projektem. Mam szerokie doświadczenie w automatyzacji i emulacji działań użytkownika (JavaScript, Selenium, Playwright), asynchronicznym i wielowątkowym parsowaniu (Requests, WebSockets, HTTPX, BS4), przetwarzaniu informacji (Openpyxl, JSON, MySQL, MongoDB, Google Sheets API), a także w tworzeniu botów Telegram o różnym stopniu skomplikowania (Telethon, Pyrogram, Aiogram).
Skontaktuj się ze mną, aby omówić szczegóły i terminy realizacji projektu.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Zrobić bota do sprawdzania linków na FB
820 PLN
Jest dokument Google z linkami na FB trzeba, aby bot analizował dokument pod kątem opublikowanych postów i codziennie dostarczał raport Parsowanie danych, Tworzenie chatbota ∙ 2 godziny 57 minut temu ∙ 35 ofert |
Stworzenie pliku Exel do załadowania towarów na strony innych partnerów.Interesuje mnie, aby stworzyć tabelę Excel ze wszystkimi parametrami. Oto strona - https://heiztechnik.com.ua/ A pozycje, które mnie interesują, powinny być przeniesione: Kotły ręczne: 1) TIS UNI 15-95 kW (10) szt 2)TIS HARD 150-500 kW (7) szt Kotły na pelety: 1)TIS PELLET… Parsowanie danych ∙ 3 godziny 38 minut temu ∙ 19 ofert |
Wymagany programista do parsowania katalogu i automatyzacji importu danychSzczegółowe TZ w załączonym dokumencie proszę w odpowiedzi podać orientacyjną cenę i terminy realizacji czy masz doświadczenie w parsowaniu dużych katalogów jakie możliwe trudności lub ograniczenia widzisz w tym zadaniu Bazy danych i SQL, Parsowanie danych ∙ 6 godzin 31 minut temu ∙ 27 ofert |
Znaleźć feed produktowy (Google Merchant XML) dla strony na OpenCart
57 PLN
Konieczne jest znalezienie bezpośredniego linku do działającego pliku z danymi produktowymi (XML) konkurenta dla Google Merchant Center Platforma (CMS): OpenCart / ocStore Znajdź oryginalny plik z danymiWymagania dotyczące wyniku: Roboczy link do pliku XML Python, Parsowanie danych ∙ 11 godzin 47 minut temu ∙ 19 ofert |
Parsowanie produktów z supermarketówPotrzebny specjalista (parsowanie + Google Sheets + automatyzacja). Cel: Stworzyć system automatycznego pozyskiwania i aktualizacji cen produktów spożywczych z supermarketów Silpo i NOVUS z wyjściem danych do Google Sheets. Co należy zrealizować: Stworzyć główną tabelę Google… Parsowanie danych, Wyszukiwanie i zbieranie informacji ∙ 19 godzin 37 minut temu ∙ 38 ofert |
Manhattan