Скрапинг данных
25 000 UAHТехническое задание по сбору данных в bet365
(Внимание, это трудный сайт для парсинга, в случае успеха, готовы работать постоянно с более простыми сайтами)
0.
работа будет производиться с букмекерской конторой Bet365 далее обозначающейся как БК
домены: bet365.com, bet365.es
Аккаунты если необходимо - обсуждаются отдельно
Спорт который надо парсить - футбол (football/soccer)
1. Цель:
- Разработать скрипт для сбора обновлений коэффициентов на прематч-событиях с сайта БК.
2. Получение коэффициентов:
- получать список событий по заданному виду спорта
- Получать обновления коэффициентов на прематч-событиях.
- Извлекать необходимую информацию - например название матча, лига, ссылка, идентификатор события, коэффициенты - по сути получать все данные что отдает БК по событию
- коэффициенты нужные в первую очередь: 1x2, totals, handicaps, team_totals1, team_totals2
- Обеспечить эффективную обработку большого количества обновлений коэффициентов в режиме реального времени.
- для прематча сбор должен осуществляться максимум 1 раз в 20 секунд
- предусмотреть возможность смены вида спорта (футбол, баскетбол, тенис и пр.)
3. Использование прокси:
- Реализовать возможность использования прокси-серверов для подключения к БК.
- Поддерживать работу с несколькими прокси и автоматическое переключение при отказе прокси ИЛИ в профилактических целях (чтоб меньше банили)
4. Обработка ошибок и исключений:
- Обрабатывать ошибки и исключения при работе с БК.
- Логировать ошибки и исключения.
5. Требования к документации:
- Подготовить документацию по использованию скрипта, включая инструкции по настройке и запуску.
- Подготовить информацию об ошибках
6. Результат
- Результатом выполнения задания будет скрипт, который получает данные и демонстрация того что эти данные актуальны (такие же как на сайте БК в данный момент времени)
- Данные сохранять построчно в формате csv либо многострочный json
- данные должны иметь понятную структуру - т.е. переформатировать из формата БК на понятный формат
как пример:
{
'match_id'
'match_url'
'home'
'away'
'liga_name'
'liga_id'
'1x2':{}
'totals':{}
'handicaps':{}
'team_totals1':{}
'team_totals2':{}
}
-
416 3 0 Могу сделать на Zennoposter, будет собирать необходимые вам данные и выдавать в нужном формате. Добавлю настройки которые сможете менять при необходимости. Хотелось бы узнать подробности в ПП. Могу потестировать чтобы понять потянули я. Вобщем жду общения в ПП.
-
210 Совершенно недавно делал задачу по скрапингу базы данных конкурента для одного клиента. Уверен, что не будет проблемой снять данные с вашего сайта и реализовать это в JSON формате. Или в том что будет вам удобен.
Успеете если что даже правки внести.
-
Привет, мы готовы работать через сейф с вами, но пожалуйста могли вы бы предварительно сделать первые запросы, чтобы убедиться, что справитесь, сайт действительно не простой. Если необходимо мы можем дать свой впн, который заходит на сайт
-
Актуальные фриланс-проекты в категории Парсинг данных
Рассылка Линкедин
5322 UAH
Рассылка Линкедин Необходимо запустить рассылку линкедин по заданной базе. 30 000+ контактов Ждем предложения E-mail маркетинг, Парсинг данных ∙ 7 часов 31 минута назад ∙ 6 ставок |
Парсинг email-ов компаний из специфической индустрии
5000 UAH
Найти контакты (e-mail, номер телефона) компаний, которые занимаются определенным бизнесом, указанным в этом Google документе https://docs.google.com/document/d/1_d-iLxLSL3gjRvo1GmUpWNm0Pm5YoKGcEvaiDc_2I0g/edit?usp=sharing Результат должен быть в виде таблицы с колонками:… Парсинг данных ∙ 1 день 7 часов назад ∙ 30 ставок |
Нужен парсер интернет-магазина https://www.lcsc.com/нужно регулярно (1 раз в месяц, или по запуску скрипта) получать актуальную информацию о товарах в наличии магазина https://www.lcsc.com/ из каталога всех разделов… Парсинг данных ∙ 2 дня 12 часов назад ∙ 43 ставки |
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 3 дня 5 часов назад ∙ 58 ставок |
Перенести программу - слетел сервер, где была программа (официальный разрешенный парсинг гос данных)
2061 UAH
Добрый! У меня у клиента произошел данный кейс описанный ниже. Нужно помочь перенести на новый сервер и оттестировать программу. Лучше программист, который разбирается в парсинге. Настройка ПО и серверов, Парсинг данных ∙ 3 дня 9 часов назад ∙ 29 ставок |