Парсер букмекерської лінії
Центральний сервер, на нього просяться і зберігаються дані з Парсінга.Парусином займаються дрібні сервери.А самі сайти звертаються до центрального сервера за API.Також з ставками.Ставки реєструються на центральному сервері і на ньому розраховуються і відправляються сайтам.Тобто кажучи, вам потрібен окремий сервіс, який не залежить від БК.
Наприклад, в лайві 1500 подій.Необхідно підтримувати актуальність даних.Якщо парсінг події пройшов більше 5 секунд тому має бути покладений замок на всі ринки події.Так що в події вже може бути не актуальна інформація.Тепер 1500/5=300 подій на секунду вам потрібно парашувати, щоб забезпечити актуальну інформацію.Всі події повинні прорватися за 2 секунди.Помимо Лайва завжди є десь 10к подій прематч.Їх актуальність також повинна підтримуватися.Принаймні 20-60 секунд на подію.1 .Паріти потрібно сайт париматч весь розділ спорту, лайв і прематч
3 .Лайв раз на 3-5 секунд, лінія раз на 60 секунд
ЧетвертийІнформація потрібна всьому, що є.Додатково потрібно парізувати види спорту на наявність нових ліг і всі ліги на наявність нових подій.При появі чогось нового в спорті/лізі підключити до роботи автоматично
5 .Linux сервер
6 .Структурировано в БД, бажано постгрес
7 .Передавати інформацію не потрібно, потрібно зберігати її в бд.А поруч з бд реалізувати Апі методи, щоб інші сайти могли отримувати ці дані за запитом.Ще хотів додати, що парсер повинен бути багатопоточним.
Додатки 6
Актуальні фриланс-проєкти в категорії Парсинг даних
Парсинг сайту YouControl (Юконтрол)
1200 UAH
Потрібно спарсити компанії з деяких категорій на сайті юконтрол, включаючи 1) назву 2) ЄДРПОУ 3) керівника 4) телефон Всі ці дані відкриті. Парсинг даних ∙ 46 хвилин тому ∙ 10 ставок |
Створити дашборд у https://airtable.com/ по результативності рекламних креативів з facebook adsПовноцінне ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Бази даних та SQL, Парсинг даних ∙ 4 дні 3 години тому ∙ 18 ставок |
Створення файлу Exel для завантаження товарів на сайти інших партнерів.Мене цікавить щоб зробити табличку Exel з повністю всіма параметрами. Ось сайт -https://heiztechnik.com.ua/ І позиціії які цікавлять щоб були перенесенні : Ручні котли : 1) TIS UNI 15-95 кВт(10) шт 2)TIS HARD 150-500 кВт(7) шт Пелетні котли: 1)TIS PELLET 15-95 кВт(10) шт 2)TIS… Парсинг даних ∙ 4 дні 7 годин тому ∙ 36 ставок |
Потрібен розробник для парсингу каталогу та автоматизації імпорту данихПодробне ТЗ в прикріпленому документі прошу в відповіді вказати орієнтовну вартість і терміни реалізації чи є досвід роботи з парсингом великих каталогів які можливі складнощі або обмеження ви бачите в даному завданні Бази даних та SQL, Парсинг даних ∙ 4 дні 10 годин тому ∙ 41 ставка |
Знайти товарний фід (Google Merchant XML) для сайту на OpenCart
700 UAH
Необхідно знайти пряме посилання на діючий товарний фід (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Знайти оригінальний фідВимоги до результату: Робоче посилання на XML-файл Python, Парсинг даних ∙ 4 дні 15 годин тому ∙ 25 ставок |