Парсер OLX + Веб-сервис из спаршенных данных
1) Парсер с OLX и fn.ua - необходимо построить парсер, которые будет работать непрерывно и собирать все существующие на данный момент карточки товаров на сайтах.
Парсер собирает массив данных, который необходимо каждый раз сравнивать с уже существующим собственным массивом данных на предмет совпадений и отсутствий, чтобы производить дальнейшие действия по сценариям.
Веб-сервис, который разделен на две части:
2) Бэк, который обрабатывает данные полученные от парсера для пригодного отображения на фронте. Данная обработка включает в себя некоторые видоизменения уже существующей информации + необходимо допилить простой сервис, который будет обращаться по POST на Dialogflow, и из полученного ответа собирать данные и подставлять в датубазу.
3) Фронт, на котором отображается собранная и обработанная информация. Дизайн фронта уже есть. Также, при необходимости (как упомянуто выше), есть человек который можем верстать.
Поэтому интересует самое главное исполнение первых двух частей.
Просьба оставлять ваш телеграм, примерную стоимость работ, и как вы себе представляете с технической точки зрения как это все должно работать (верхнеуровнево).
Спасибо
-
151 Для себя делал парсер олх по категории видеокарт - данные сохраняются в гугл докс spreadsheets
Сделано на C#
Обращайтесь.
-
264 2 Добрый день! Уже есть подобный сервис, выполненный мною. Могу скинуть ссылку на тестовый сайт. К нему нужно будет добавить фронт.
-
221 9 1 3 Добрый день. Могу помочь. Я буду выполнять бэкенд и парсер, а мой коллега с которым я постоянно работаю выполнит фронт. Стоимость примерная. Точную скажу после обсуждения в телеграме голосом.
Мой телеграм: +994514543931
Мой скайп: [email protected]
-
108 Опыта в этой сфере не имею, подобного нечего не делал, но если вы дадите мне время то я постараюсь это сделать! Знания node.js есть. Примерную логику понимаю.
Есть у меня пару вопросов к вам. Какая база данных? И на чем написан ваш сервер (язык программирования)?
Пишите в телеграмм, обсудим все вопросы.
Моя компания: https://site-up.com.ua/
Мой телеграмм: @Des_igner
-
506 56 0 Если среди данных нужны номера телефонов, и Вас устроит python, то бэк по олх можно сделать в указанные сроки. Но Вы должны сами понимать, что это только до смены защиты от парсинга.
-
Здравствуйте. Примерно 2 месяца назад делал ровно такой же проект под названием Avect. Его задача была парусить товары с интернет-магазинов и передавать данные клиенту в базу данных. Также был удобный UI для управлениях заказами и проверки статуса парсинга/импорта. Проект был вскоре разделён на сервис и клиент. Если интересует - пишите в телеграм(@andrewgorpenko), а работать будем через эту площадку.
-
Приветствую!
Ваш проект меня заинтересовал.
В арсенале есть парсер olx.ua на запросах. https://youtu.be/fIhk-blBRQQ
Скорость парсинга 5000-7000/час в файл. Парсятся таки данные:
- Номер телефона
- Имя
- Пол
- Заголовок
- Описание
- Цена
- Валюта
- Ссылка юзера
- Путь к картинкам
- Геолокация
- URL
- Просмотры
- Номер объявления
- Дополнительные свойства товара взятые из таблицы в формате JSON
Можно переделать его чтобы работал с базой.
Есть навыки работы с БД MySQL. Навыки работы с запросами и API. Делал бекэнда для нескольких сервисов. Все работы выполнялись в C#, ZennoPoster.
Можем обсудить более подробное ТЗ.
Мои контакты:
Telegram: https://t.me/eltar
Тел./Viber: +380937068250
Skype: zhermen2
-
Актуальні фриланс-проєкти в категорії Javascript та Typescript
Розробка корпоративної фінансової системи — React, TypeScript, Node.jsШукаємо досвідченого full-stack розробника або невелику команду для розробки корпоративної фінансової системи з нуля. Необхідно реалізувати повний цикл розробки: проектування архітектури, backend, frontend, базу даних, тестування та запуск системи. Технології: Frontend: React,… Javascript та Typescript, Веб-програмування ∙ 4 години 58 хвилин тому ∙ 49 ставок |
Розробник ігор
53 739 UAH
Шукаємо досвідченого розробника ігор для доопрацювання існуючого проекту на PixiJS. Необхідно покращити математичну систему гри, переробити та збалансувати бонусні раунди, а також внести зміни в поточну ігрову логіку. Обов'язковий досвід комерційної розробки ігор та впевнене… Javascript та Typescript, Розробка ігор ∙ 9 годин 39 хвилин тому ∙ 13 ставок |
Розробка сайту по ТЗ на FramerПотрібно зробити сайт по цим параметрам що в тз https://docs.google.com/document/d/1ODO2C9Krb4AaMiJz9wfbNzWlAyA2FwCCHL8r0biajUY/edit?usp=sharing Називайте реальний рейт на основі цього дизайну HTML та CSS верстання, Javascript та Typescript ∙ 9 годин 39 хвилин тому ∙ 22 ставки |
Розробка інтерактивної карти Palworld для сайтуПотрібно розробити інтерактивну карту Palworld за прикладом: https://palworld.gg/map Нам потрібна не просто статична картинка, а повноцінна інтерактивна карта, де користувач може дивитися локації, вмикати / вимикати категорії об’єктів, шукати потрібні точки та взаємодіяти з… HTML та CSS верстання, Javascript та Typescript ∙ 2 дні тому ∙ 31 ставка |
Розробка платформи AM Mobility (автосервіс, парковка, страхування, оренда автомобілів)
259 707 UAH
Шукаємо команду або досвідченого Full Stack розробника для створення MVP платформи AM Mobility. AM Mobility — це єдина цифрова екосистема для автомобілістів, що об'єднує в одному додатку та веб-платформі: парковку; автосервіс; шиномонтаж; автомийку; оренду автомобілів;… Javascript та Typescript, Веб-програмування ∙ 7 днів 6 годин тому ∙ 119 ставок |