Скрипт для веб-скрапинга спортивных данных с Sofascore

Бюджет: 110 EUR Срок: 2 дня

Привет, Йоахим.

Я должен сказать, что недавно работал над веб-скрепером для колледжского проекта, а также создал приложение Streamlit для просмотра и анализа собранных данных с помощью динамических графиков.

Python — один из моих сильных навыков, так как я создавал много проектов с данными, используя его.

Для вашего проекта я могу собрать данные, очистить их и предоставить вам приложение Streamlit, которое вы сможете просматривать в реальном времени при обновлении без необходимости дополнительного кодирования. Или, если вам не нужно приложение и вы хотите, чтобы я поработал над незавершенным приложением, которое у вас уже есть, я тоже могу это сделать.

Не стесняйтесь связаться со мной, чтобы начать работу над проектом.

Бюджет: 450 EUR Срок: 5 дней

Привет, спасибо за подробное описание. Я работал над похожими проектами по сбору данных, включая сбор спортивных данных высокого объема и автоматизацию с использованием прокси для скрытности. Для Sofascore я могу создать для вас библиотеку на Python с хорошо структурированными функциями, которые возвращают предстоящие матчи, статистику прошлых матчей, информацию о игроках и рейтинги — всё через быстрый и устойчивый скрапинг.
Мой план — использовать `httpx` с `curl_cffi` и ротацией сессий, точно совпадая заголовки и отпечатки устройств. Чтобы избежать ошибок 403 при длительных запусках скрапинга, я оптимизирую обработку прокси и логику повторных попыток. Функции будут выводить чистые DataFrame pandas с сырыми JSON-данными для каждого записи, чтобы вы могли легко исследовать или сохранять данные.
Также я предлагаю кешировать токены сессий или cookies, когда это возможно, чтобы снизить нагрузку на аутентификацию и рано обнаруживать антибот-меры. Если у вас есть текущий скрипт для футбола, я буду рад улучшить его напрямую.

Могли бы вы подтвердить, есть ли у вас уже провайдер прокси или хотите, чтобы я порекомендовал более подходящего, исходя из вашего объема?

С нетерпением жду сотрудничества.

С наилучшими,
Даниэль

Бюджет: 450 EUR Срок: 5 дней

Здравствуйте, Joachim,

Я внимательно проанализировал ваш проект по сбору данных о теннисе с Sofascore. Это сложная задача, и у меня есть опыт для создания надежного и высокоскоростного решения, которое вам нужно.

Ошибка 403, с которой вы сталкиваетесь в вашем текущем скрипте, ясно показывает, что Sofascore успешно "отпечатвает" и блокирует ваши запросы. Простого подхода curl_cffi с базовыми заголовками и прокси часто недостаточно для такой сложной цели.

Чтобы решить эту проблему, я создам профессиональную библиотеку для парсинга на Python, использующую гораздо более мощную архитектуру:

Основной движок (Playwright): я буду использовать Playwright, а не только библиотеку requests. Это позволит автоматизировать реальный браузер, делая поведение нашего скрипта практически неотличимым от поведения человека.

Продвинутые методы против отпечатков: я реализую техники скрытности, чтобы избежать обнаружения. Это включает создание пользовательских "контекстов" браузера с рандомизированными пользовательскими агентами, разрешениями экрана и другими свойствами браузера, которые ищут системы антибот.

Интеллектуальное управление запросами: скрипт будет имитировать поведение человека при просмотре, а не просто быстро отправлять запросы. Он также будет умно управлять ротацией прокси, чтобы минимизировать риск блокировки IP.

Как сертифицированный разработчик Python по стандарту PCAP™, я специализируюсь на создании таких надежных систем извлечения данных. Итоговая версия будет чистой библиотекой Python с функциями вроде get_upcoming_matches(), get_historical_data(match_id) и т.д., возвращающими данные в DataFrame, как вы просили.

Общая оценка:

Сроки: 5 дней

Цена: 450 долларов США

Ваш бюджет в €110, к сожалению, недостаточен для разработки системы, которая сможет обойти современные решения антибота в требуемых масштабах. Моя цена отражает создание профессионального инструмента, который будет быстрым, надежным и способным удовлетворить ваши потребности в данных.

Я готов создать парсер, который действительно работает. Развернуть

Бюджет: 110 EUR Срок: 2 дня

Добрый вечер, могу помочь вам с вашим проектом, также есть опыт в данной сфере. Пишите и обсудим все детали.

Бюджет: 110 EUR Срок: 1 день

Привет..
Делал подобное по футболу для сайта flashcore. (есть в портфолио). По скорости примерно 2000 матчей в минуту. Если такой вариант подходит, предлагаю обсудить подробнее в личных сообщениях