Парсер OLX + Веб-сервис из спаршенных данных
1) Парсер с OLX и fn.ua - необходимо построить парсер, которые будет работать непрерывно и собирать все существующие на данный момент карточки товаров на сайтах.
Парсер собирает массив данных, который необходимо каждый раз сравнивать с уже существующим собственным массивом данных на предмет совпадений и отсутствий, чтобы производить дальнейшие действия по сценариям.
Веб-сервис, который разделен на две части:
2) Бэк, который обрабатывает данные полученные от парсера для пригодного отображения на фронте. Данная обработка включает в себя некоторые видоизменения уже существующей информации + необходимо допилить простой сервис, который будет обращаться по POST на Dialogflow, и из полученного ответа собирать данные и подставлять в датубазу.
3) Фронт, на котором отображается собранная и обработанная информация. Дизайн фронта уже есть. Также, при необходимости (как упомянуто выше), есть человек который можем верстать.
Поэтому интересует самое главное исполнение первых двух частей.
Просьба оставлять ваш телеграм, примерную стоимость работ, и как вы себе представляете с технической точки зрения как это все должно работать (верхнеуровнево).
Спасибо
-
30 days223 USD
151 30 days223 USD
Для себя делал парсер олх по категории видеокарт - данные сохраняются в гугл докс spreadsheets
Сделано на C#
Обращайтесь.
-
15 days223 USD
264 2 15 days223 USD
Добрый день! Уже есть подобный сервис, выполненный мною. Могу скинуть ссылку на тестовый сайт. К нему нужно будет добавить фронт.
-
10 days204 USD
221 9 1 3 10 days204 USD
Добрый день. Могу помочь. Я буду выполнять бэкенд и парсер, а мой коллега с которым я постоянно работаю выполнит фронт. Стоимость примерная. Точную скажу после обсуждения в телеграме голосом.
Мой телеграм: +994514543931
Мой скайп: [email protected]
-
50 days357 USD
108 50 days357 USD
Опыта в этой сфере не имею, подобного нечего не делал, но если вы дадите мне время то я постараюсь это сделать! Знания node.js есть. Примерную логику понимаю.
Есть у меня пару вопросов к вам. Какая база данных? И на чем написан ваш сервер (язык программирования)?
Пишите в телеграмм, обсудим все вопросы.
Моя компания: https://site-up.com.ua/
Мой телеграмм: @Des_igner
-
21 days670 USD
506 56 0 21 days670 USD
Если среди данных нужны номера телефонов, и Вас устроит python, то бэк по олх можно сделать в указанные сроки. Но Вы должны сами понимать, что это только до смены защиты от парсинга.
-
Здравствуйте. Примерно 2 месяца назад делал ровно такой же проект под названием Avect. Его задача была парусить товары с интернет-магазинов и передавать данные клиенту в базу данных. Также был удобный UI для управлениях заказами и проверки статуса парсинга/импорта. Проект был вскоре разделён на сервис и клиент. Если интересует - пишите в телеграм(@andrewgorpenko), а работать будем через эту площадку.
-
Приветствую!
Ваш проект меня заинтересовал.
В арсенале есть парсер olx.ua на запросах. https://youtu.be/fIhk-blBRQQ
Скорость парсинга 5000-7000/час в файл. Парсятся таки данные:
- Номер телефона
- Имя
- Пол
- Заголовок
- Описание
- Цена
- Валюта
- Ссылка юзера
- Путь к картинкам
- Геолокация
- URL
- Просмотры
- Номер объявления
- Дополнительные свойства товара взятые из таблицы в формате JSON
Можно переделать его чтобы работал с базой.
Есть навыки работы с БД MySQL. Навыки работы с запросами и API. Делал бекэнда для нескольких сервисов. Все работы выполнялись в C#, ZennoPoster.
Можем обсудить более подробное ТЗ.
Мои контакты:
Telegram: https://t.me/eltar
Тел./Viber: +380937068250
Skype: zhermen2
-
Current freelance projects in the category Data Parsing
Consultation on parsing Instagram account subscribersHello. It is necessary to conduct a preliminary assessment of the feasibility of the following task. I have a list of Instagram accounts. The goal is to obtain contact information (primarily email addresses) of users who follow these accounts. Previously, I encountered companies… Data Parsing ∙ 1 day 18 hours back ∙ 12 proposals |
A specialist is needed to find contacts of decision-makers in Ukraine.It is necessary to gather a database (or ready database) of contacts of decision-makers (DMs) in companies in Ukraine. Information Gathering, Data Parsing ∙ 1 day 22 hours back ∙ 16 proposals |
Need to scrape data from LinkedIn
We need to scrape data from LinkedIn based on our list. For each entry, we need to find and collect available data if it exists on the LinkedIn profile, including the profile picture on the LinkedIn social network, email address, links to social media, company website, and… Data Parsing ∙ 2 days 4 hours back ∙ 27 proposals |
Parsing and classification of data
We are looking for a developer to implement a system for collecting and structuring data from open sources. We have a database of small business owners in the USA, which contains the person's name, company name, address, and state. It is necessary to build a process for… Web Programming, Data Parsing ∙ 2 days 5 hours back ∙ 40 proposals |
Svitlahata
17 USD
It is necessary to import 1819 products from the XML/YML feed of Prom.ua to OpenCart 3. A ready XML file is available, which contains product names, descriptions, prices, photos, specifications, manufacturers, and categories. Requirements: import all products to OpenCart… Content Management Systems, Data Parsing ∙ 3 days 8 hours back ∙ 34 proposals |
Kyiv