Парсер/Парсинг данных HLTV
2774 USD
## Требуется разработать автоматизированую систему парсинга данных с ресурса HLTV
### Функциональные требования:
1. Парсинг и хранение данных с регулярной промежуточностью.
1. Должна быть админ панелька через которую можно следить за данными.
2. Должна быть страница статусов, которая сообщает о состоянии парсера и планировщика задач.
### Контент для парсинга:
1. Ивенты
2. Матчи
3. Игры
4. Команды
5. Игроки
В спаршеном контенте должны быть зависимости.
Пример:
Можем получить информации о каждой игре, участвующих командах по айди матча.
По айди команды можем получить информацию о всех игроках.
### Частота парсинга данных:
1. Информация о прошедших играх и матчах - актуализируем информацию 1 раз
2. Информация о матчах которые начнутся через сутки - актуализируем раз в 2 часа.
3. Информация о матчах которые начнутся через 2 часа - актуализируем раз в 10 минут
4. Информация о матчах которые начнутся через 30 минут - актуализурем раз в 5 минут
5. Информация о матчах которые начнутся через 5 минут или идут в текущий момент времени - актуализируем раз в минуту.
При получении новой информации об объекте, мы должны обновить всю новую информацию у зависимых элементов.
Пример:
При получении новой информации о матче, мы должны обновить всю зависящую инфу(игроки, команды, ивент, игры)
## Что интересно узнать у кандидата на выполнение работ:
1. рейт (usd/h)
2. Стек технологий который планируется использовать
3. Сколько часов в неделю сможете уделять проекту.
4. Информация об аналогичном опыте
5. грубая оценка в количестве часов на работу.
6. Мощности которые нужны для стабильной работы системы
В первую очередь отдам предпочтения фрилансерам, которые ответят на эти вопросы.
-
Добрый день!
1. На сайт только зашел. Ищу по порталам фриланса как раз подобные проекты, так как специализируюсь на парсинге;
2. Данные будут писаться в реляционную БД, интерфейс программы разделён на два модуля, модуль сбора и модуль редактирования. Реализация на C#+SQL+Selenium;
3. Времени сейчас достаточно, так что около 15 часов в неделю;
4. Из последнего, парсер сайта Фонбет с записью данных в БД и системой автоматизированных ставок по условиям пользователя;
5. Месяц реализация, 1-2 недели отладка
6. Стабильно будет работать даже на очень слабой машине, а вот для скорости, что не мало важно при извлечении оперативных данных будет нужно: около 16 Гб оперативки и где-то i5 по 2.60 ядро
-
Current freelance projects in the category Data Parsing
Database of websites on WooCommerceIt is necessary to compile a database of Ukrainian online store websites on WooCommerce with the contact information provided on the sites. Only active websites (indicator: updated catalog/content, working domain) Table format - website address, phone number, e-mail. Data Parsing ∙ 1 day 23 hours back ∙ 20 proposals |
Create a dashboard in https://airtable.com/ for the performance of advertising creatives from Facebook ads.Full specification https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Databases & SQL, Data Parsing ∙ 3 days 13 hours back ∙ 17 proposals |
Creation of an Excel file for uploading products to the websites of other partners.I am interested in creating an Excel table with all parameters. Here is the website - https://heiztechnik.com.ua/ And the positions I am interested in to be transferred: Manual boilers: 1) TIS UNI 15-95 kW (10) pcs 2)TIS HARD 150-500 kW (7) pcs Pellet boilers: 1)TIS PELLET… Data Parsing ∙ 3 days 18 hours back ∙ 35 proposals |
A developer is required for parsing the catalog and automating data import.Detailed technical specifications in the attached document Please indicate the estimated cost and timeline in your response Do you have experience working with parsing large catalogs What possible difficulties or limitations do you see in this task Databases & SQL, Data Parsing ∙ 3 days 20 hours back ∙ 40 proposals |
Find a product feed (Google Merchant XML) for a website on OpenCart
16 USD
It is necessary to find a direct link to the active product feed (XML) of a competitor for Google Merchant Center Platform (CMS): OpenCart / ocStore Find the original feedRequirements for the result: Working link to the XML file Python, Data Parsing ∙ 4 days 2 hours back ∙ 25 proposals |
Kyiv