Skrypt parsowania dla Olx.ua
1. Cel
Stworzyć skrypt do parsowania ogłoszeń z OLX i przesyłania ich na naszą stronę (Symfony). Skrypt najlepiej zrealizować w Pythonie z uwagi na szerokie wsparcie biblioteczne do parsowania, przy czym interakcja z bazą danych Symfony będzie odbywać się bezpośrednio.
2. Wymagania funkcjonalne
2.1. Ustawienia URL do parsowania
Możliwość dodawania oddzielnych równoległych URL do parsowania (na przykład:
https://www.olx.ua/uk/nedvizhimost/if/
https://www.olx.ua/uk/nedvizhimost/zemlya/if/).
2.2. Parsowanie ogłoszeń
Wyciąganie następujących widocznych pól:
Główne zdjęcie (załadowanie i zapisanie obrazu)
Kategoria
Tytuł
Cena
Opis
Tagi (z opisu)
Telefon (obowiązkowo!; ogłoszenia bez telefonu – pominięcie)
Miasto lub miejscowość
Wyciąganie następujących ukrytych pól:
Link do ogłoszenia
Wynik zapisujemy w bazie danych MySQL
Twoja cena
-
Dzień dobry. Mam gotowy parser OLX, zrealizowany w python Selenium. Prędkość przetwarzania - około 30 sekund na ogłoszenie, jednak jest wsparcie dla wielowątkowości. Cena za sam parser - 5000 hrywien, jednak ta kwota nie obejmuje integracji z Twoim systemem. Będę zadowolony ze współpracy
-
3700 17 0 Cześć! 😊
Jestem gotów stworzyć dla Ciebie skrypt do parsowania ogłoszeń z OLX z bezpośrednim przesyłaniem danych do bazy danych 🚀
Proponowany stos technologiczny:
• Python (BeautifulSoup, Requests) – do parsowania danych
• Selenium (w razie potrzeby) – do pracy z dynamiczną treścią
• Pandas / openpyxl – do pracy z Excelem (jeśli zajdzie taka potrzeba)
… • MySQL – do przechowywania danych
• Asyncio – do równoległego wykonywania zadań
• Proxy – do omijania blokad, jeśli będzie to konieczne
Skontaktuj się w celu szczegółowej dyskusji na temat wszystkich niuansów projektu w wiadomościach prywatnych!
Z poważaniem,
Andrij!
-
1507 9 0 👋 Dzień dobry! Jestem gotowy zrealizować skrypt do parsowania ogłoszeń z OLX i przekazywania ich na Państwa stronę (Symfony).
✅ Stos technologiczny:
Python (Requests, Aiohttp, BeautifulSoup) — do szybkiego i efektywnego parsowania bez użycia Selenium. To pozwoli na uzyskiwanie danych maksymalnie szybko i bez przeciążania systemu.
Asynchroniczność (Asyncio) i wielowątkowość — do jednoczesnego parsowania wielu URL, co znacznie przyspieszy pracę.
Obsługa błędów i powtarzanie zapytań — dla zapewnienia stabilnej pracy skryptu nawet przy częściowych awariach.
…
MySQL — bezpośrednie przechowywanie danych w Państwa bazie danych Symfony.
Przechowywanie zdjęć — możliwe zarówno lokalnie, jak i w chmurze. W bazie danych będą przechowywane jedynie linki do obrazów.
📌 Moje doświadczenie:
Profesjonalnie zajmuję się parsowaniem od ponad 2 lat.
Tworzyłem wysoko wydajne parsery do zbierania dużych ilości danych z różnych platform.
Opracowywałem API i projekty z bezpośrednim zapisem danych do MySQL, optymalizując pracę z bazami dla szybkiego przechowywania i dostępu do informacji.
Posiadam umiejętności budowy architektury parserów, które wytrzymują znaczne obciążenia i stabilnie działają nawet z dynamicznymi stronami.
💪 Gwarantuję szybkie wykonanie zamówienia oraz wsparcie techniczne. Chętnie omówię wszystkie szczegóły w wiadomościach prywatnych. Czekam na Państwa odpowiedź!
-
823 3 1 Dobry wieczór.
Mogę jakościowo zrealizować ten projekt, ponieważ mam duże doświadczenie w tworzeniu botów Telegram, automatyzacji zadań i parsowaniu zasobów internetowych.
Mam doświadczenie w opracowywaniu botów Telegram, które pracują z web scrapingiem. Już realizowałem parsowanie skomplikowanych stron z zabezpieczeniami, używając Selenium i Scrapy oraz zewnętrznych API.
Czekam na wiadomości prywatne w celu omówienia szczegółów zamówienia.
-
3926 15 0 Dzień dobry.
Duże doświadczenie w pisaniu różnego rodzaju parserów.
Najtrudniejsze zadanie w moim doświadczeniu - parsowanie bazy danych nazw domen w WNP (opinie w profilu https://freelancehunt.com/project/parser-na-node-js/634091.html)
-
462 1 0 Dzień dobry. Twoje zadanie jest ciekawe i zrozumiałe. Jestem gotów wykonać je w krótkim czasie.
-
1645 100 5 3 Dzień dobry. Zrobię taki parser. Pisz, Będę rad współpracować!
-
3411 32 0 Dzień dobry.
Napisz na prywatną wiadomość, już są pewne opracowania dotyczące parsowania OLX.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Parsowanie danych przez mobilne APISzukałem osoby z doświadczeniem w parsowaniu danych przez mobilne API, do parsowania e-commerce, rozetka i podobne Zadania: 1. Przechwytywanie ruchu aplikacji mobilnej (Android) konfiguracja proxy, analiza zapytań 2. Określenie potrzebnych punktów końcowych API, do których… Python, Parsowanie danych ∙ 6 godzin 54 minuty temu ∙ 18 ofert |
Szukam programisty lub kodera do automatyzacji scrapingu danych 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing przypadkowo wysłałem ten link Programowanie stron internetowych, Parsowanie danych ∙ 9 godzin 16 minut temu ∙ 26 ofert |
Stworzyć dashboard w https://airtable.com/ dotyczący efektywności reklamowych kreacji z facebook adsPełnoprawne TZ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Bazy danych i SQL, Parsowanie danych ∙ 5 dni 3 godziny temu ∙ 19 ofert |
Stworzenie pliku Exel do załadowania towarów na strony innych partnerów.Interesuje mnie, aby stworzyć tabelę Excel ze wszystkimi parametrami. Oto strona - https://heiztechnik.com.ua/ A pozycje, które mnie interesują, powinny być przeniesione: Kotły ręczne: 1) TIS UNI 15-95 kW (10) szt 2)TIS HARD 150-500 kW (7) szt Kotły na pelety: 1)TIS PELLET… Parsowanie danych ∙ 5 dni 7 godzin temu ∙ 36 ofert |
Wymagany programista do parsowania katalogu i automatyzacji importu danychSzczegółowe TZ w załączonym dokumencie proszę w odpowiedzi podać orientacyjną cenę i terminy realizacji czy masz doświadczenie w parsowaniu dużych katalogów jakie możliwe trudności lub ograniczenia widzisz w tym zadaniu Bazy danych i SQL, Parsowanie danych ∙ 5 dni 10 godzin temu ∙ 41 ofert |