Специалист по скрапингу на python

Python, Парсинг данных — неверно указаны категории?

Нужен код на python для получения контента с сайта viagogo.com

Получить 100 раз title страницы. Без использования Selenium

В перспективе с этим кодом планируется делать несколько тысяч запросов в час.

Нужно что то подобное, как на скрине ниже - но что б работало


import requests
import re


url = "https://www.viagogo.com/Concert-Tickets/Pop-Rock/Post-Grunge/Linkin-Park-Tickets/E-156203727"
for i in range(100):   
    response = requests.get(url, timeout=10)
    match = re.search(r'<title>(.*?)</title>', response.text)  
    if match:
        title = match.group(1).strip()
        print(title)

Ставки 9 Отозванные 1 Обсуждения 2

Danish M.

20 0

Проекты 20
Оценка 5.0
Рейтинг 3 397

Бюджет: 1000 UAH Срок: 1 день

Здравствуйте, могу реализовать парсер на JS, обращайтесь.
Мой стек: JS, TS, ReactJS, NextJS, SCSS...

Євгеній Семенюк

3 1

Проекты -
Оценка -
Рейтинг 735

Бюджет: 2000 UAH Срок: 3 дня

Добрый вечер! Готов взяться за данное задание, готов выполнить задание быстро и качественно. Имею большой опыт в написании парсеров различной сложности, хорошо понимаю, как лучше работать с запросами. Буду рад сотрудничеству!

Олксандр Казаров

3 1

Проекты -
Оценка -
Рейтинг 449

Бюджет: 8200 UAH Срок: 7 дней

Предлагаю разработать решение для парсинга контента с сайта viagogo.com с целью получения заголовка (title) страницы, которое будет масштабируемым и оптимизированным для выполнения тысяч запросов в час.

Что будет сделано:
Базовый функционал:

Получение title страницы с использованием библиотеки requests.
Обход блокировок с помощью ротации User-Agent и прокси.
Оптимизация для большого объема запросов:

Асинхронная обработка запросов с помощью aiohttp для высокой производительности.
Интеграция ротации прокси-серверов и случайных заголовков (User-Agent).
Устойчивость:

Обработка возможных ошибок (например, блокировки или таймауты).
Логирование результатов и ошибок для отладки.
Преимущества решения:
Высокая скорость выполнения благодаря асинхронным запросам.
Устойчивость к блокировкам за счет прокси и динамических заголовков.
Масштабируемость для обработки тысяч запросов в час.
Готов реализовать решение, предоставить исходный код и инструкции по использованию. Напишите, чтобы обсудить детали!