Specjalista ds. skrapowania w Pythonie

Parsowanie danych, Python — podano nieprawidłowe kategorie?

Zlecenie jest tłumaczone automatycznie. Zaloguj się lub zarejestruj się, żeby zobaczyć oryginał

Potrzebny kod w pythonie do pobierania treści z witryny viagogo.com

Uzyskać 100 razy tytuł strony. Bez użycia Selenium

W perspektywie z tym kodem planuje się wykonywanie kilku tysięcy zapytań na godzinę.

Potrzebne coś podobnego, jak na zrzucie ekranu poniżej - ale żeby działało


import requests
import re


url = "https://www.viagogo.com/Concert-Tickets/Pop-Rock/Post-Grunge/Linkin-Park-Tickets/E-156203727"
for i in range(100):   
    response = requests.get(url, timeout=10)
    match = re.search(r'<title>(.*?)</title>', response.text)  
    if match:
        title = match.group(1).strip()
        print(title)

Oferty 9 Wycofane 1 Dyskusje 2

Danish M.

20 0

Budżet: 1000 UAH Termin: 1 dzień

Cześć, mogę zrealizować parser w JS, proszę o kontakt.
Mój stos: JS, TS, ReactJS, NextJS, SCSS...

Dobry wieczór! Jestem gotów podjąć się tego zadania, gotów wykonać zadanie szybko i jakościowo. Mam duże doświadczenie w pisaniu parserów różnej trudności, dobrze rozumiem, jak najlepiej pracować z zapytaniami. Będę zadowolony z współpracy!

Olksandr Kazarov

3 1

Zlecenia 3
Ocena -
Ranking 449

Budżet: 8200 UAH Termin: 7 dni

Proponuję opracowanie rozwiązania do parsowania treści z witryny viagogo.com w celu uzyskania tytułu (title) strony, które będzie skalowalne i zoptymalizowane do realizacji tysięcy zapytań na godzinę.

Co zostanie zrobione:
Podstawowa funkcjonalność:

Uzyskanie tytułu strony z wykorzystaniem biblioteki requests.
Obchodzenie blokad za pomocą rotacji User-Agent i proxy.
Optymalizacja dla dużej liczby zapytań:

Asynchroniczne przetwarzanie zapytań za pomocą aiohttp dla wysokiej wydajności.
Integracja rotacji serwerów proxy i losowych nagłówków (User-Agent).
Odporność:

Obsługa możliwych błędów (np. blokady lub przekroczenia czasu).
Logowanie wyników i błędów do debugowania.
Zalety rozwiązania:
Wysoka prędkość realizacji dzięki asynchronicznym zapytaniom.
Odporność na blokady dzięki proxy i dynamicznym nagłówkom.
Skalowalność do obsługi tysięcy zapytań na godzinę.
Gotowy do realizacji rozwiązania, dostarczenia kodu źródłowego i instrukcji użytkowania. Napisz, aby omówić szczegóły!

Yehor I.

86 0

Budżet: 2000 UAH Termin: 4 dni

Gotowy się tym zająć.
Ale trzeba doprecyzować szczegóły zamówienia, piszcie!
Zrealizuję skryptem w pythonie.

Maksim I.

2 1

Zlecenia -
Ocena -
Ranking 237

Budżet: 2000 UAH Termin: 3 dni

Wiktor, dzień dobry!
Jestem gotów do realizacji twojego zadania, niektóre przykłady projektów możesz zobaczyć tutaj: Freelancehunt
Będę zadowolony ze współpracy!