Парсер букмекерской линии
10 000 UAHНужна такая архитектура:
Центральный сервер, на него просятся и сохраняются данные с Парсинга. Парусинном занимаются мелкие серверы. А сами сайты обращаются к центральному серверу по api. Также со ставками. Ставки регистрируются в центральном сервере и на нем рассчитываются и отправляются сайтам. Грубо говоря тебе нужен отдельный сервис не зависимый от БК
например, в лайве 1500 событий. нужно поддерживать актуальность данных. Если парсинг события прошёл более 5 сек назад должен ставиться замочек на все маркеты события. Т.к в событии уже может быть не актуальная информация. Теперь 1500/5=300 событий в секунду тебе надо парсить чтобы обеспечить актуальную информацию. все события должны парситься за 2 сек. По мимо Лайва всегда есть где-то 10к событий прематч. Их актуальность тоже необходимо поддерживать. Хотябы 20-60 сек на событие.
1. Парсить нужно сайт париматч весь раздел спорта, лайв и прематч
3. Лайв раз в 3-5 сек, линию раз в 60 сек
4. Данные нужны все что есть. Дополнительно надо парсить виды спорта на наличие новых лиг и все лиги на наличие новых событий. При появлении чего то нового в спорте/лиге подключать в работу автоматически
5. Линукс сервер
6. Структурированно в БД, желательно постгрес
7. Передавать информацию не надо, надо хранить ее в бд. А рядом с бд реализовать Api методы чтобы другие сайты могли получать эти данные по запросу.
Ещё хотел добавить что парсер должен быть многопоточным.
Приложения 6
Актуальные фриланс-проекты в категории Парсинг данных
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 17 часов 37 минут назад ∙ 14 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 21 час 46 минут назад ∙ 31 ставка |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 1 день назад ∙ 36 ставок |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 1 день 5 часов назад ∙ 19 ставок |
Парсинг товаров с супермаркетовНужен специалист (парсинг + Google Sheets + автоматизация). Цель: Создать систему автоматического получения и обновления цен на продукты питания из супермаркетов Сильпо и NOVUS с выводом данных в Google Sheets. Что необходимо реализовать: Создать основную Google Sheets таблицу с… Парсинг данных, Поиск и сбор информации ∙ 1 день 13 часов назад ∙ 43 ставки |
Киев