Парсер OLX + Веб-сервис из спаршенных данных
1) Парсер с OLX и fn.ua - необходимо построить парсер, которые будет работать непрерывно и собирать все существующие на данный момент карточки товаров на сайтах.
Парсер собирает массив данных, который необходимо каждый раз сравнивать с уже существующим собственным массивом данных на предмет совпадений и отсутствий, чтобы производить дальнейшие действия по сценариям.
Веб-сервис, который разделен на две части:
2) Бэк, который обрабатывает данные полученные от парсера для пригодного отображения на фронте. Данная обработка включает в себя некоторые видоизменения уже существующей информации + необходимо допилить простой сервис, который будет обращаться по POST на Dialogflow, и из полученного ответа собирать данные и подставлять в датубазу.
3) Фронт, на котором отображается собранная и обработанная информация. Дизайн фронта уже есть. Также, при необходимости (как упомянуто выше), есть человек который можем верстать.
Поэтому интересует самое главное исполнение первых двух частей.
Просьба оставлять ваш телеграм, примерную стоимость работ, и как вы себе представляете с технической точки зрения как это все должно работать (верхнеуровнево).
Спасибо
-
151 Для себя делал парсер олх по категории видеокарт - данные сохраняются в гугл докс spreadsheets
Сделано на C#
Обращайтесь.
-
264 2 Добрый день! Уже есть подобный сервис, выполненный мною. Могу скинуть ссылку на тестовый сайт. К нему нужно будет добавить фронт.
-
221 9 1 3 Добрый день. Могу помочь. Я буду выполнять бэкенд и парсер, а мой коллега с которым я постоянно работаю выполнит фронт. Стоимость примерная. Точную скажу после обсуждения в телеграме голосом.
Мой телеграм: +994514543931
Мой скайп: [email protected]
-
108 Опыта в этой сфере не имею, подобного нечего не делал, но если вы дадите мне время то я постараюсь это сделать! Знания node.js есть. Примерную логику понимаю.
Есть у меня пару вопросов к вам. Какая база данных? И на чем написан ваш сервер (язык программирования)?
Пишите в телеграмм, обсудим все вопросы.
Моя компания: https://site-up.com.ua/
Мой телеграмм: @Des_igner
-
506 56 0 Если среди данных нужны номера телефонов, и Вас устроит python, то бэк по олх можно сделать в указанные сроки. Но Вы должны сами понимать, что это только до смены защиты от парсинга.
-
Здравствуйте. Примерно 2 месяца назад делал ровно такой же проект под названием Avect. Его задача была парусить товары с интернет-магазинов и передавать данные клиенту в базу данных. Также был удобный UI для управлениях заказами и проверки статуса парсинга/импорта. Проект был вскоре разделён на сервис и клиент. Если интересует - пишите в телеграм(@andrewgorpenko), а работать будем через эту площадку.
-
Приветствую!
Ваш проект меня заинтересовал.
В арсенале есть парсер olx.ua на запросах. https://youtu.be/fIhk-blBRQQ
Скорость парсинга 5000-7000/час в файл. Парсятся таки данные:
- Номер телефона
- Имя
- Пол
- Заголовок
- Описание
- Цена
- Валюта
- Ссылка юзера
- Путь к картинкам
- Геолокация
- URL
- Просмотры
- Номер объявления
- Дополнительные свойства товара взятые из таблицы в формате JSON
Можно переделать его чтобы работал с базой.
Есть навыки работы с БД MySQL. Навыки работы с запросами и API. Делал бекэнда для нескольких сервисов. Все работы выполнялись в C#, ZennoPoster.
Можем обсудить более подробное ТЗ.
Мои контакты:
Telegram: https://t.me/eltar
Тел./Viber: +380937068250
Skype: zhermen2
-
Актуальные фриланс-проекты в категории Javascript и Typescript
Разработка платформы AM Mobility (автосервис, парковка, страхование, аренда автомобилей)
259 176 UAH
Ищем команду или опытного Full Stack разработчика для создания MVP платформы AM Mobility. AM Mobility — это единая цифровая экосистема для автомобилистов, объединяющая в одном приложении и веб-платформе: парковку; автосервис; шиномонтаж; автомойку; аренду автомобилей;… Javascript и Typescript, Веб-программирование ∙ 3 дня 10 часов назад ∙ 105 ставок |
Gsap анимации
1000 UAH
Добрый день. Нужно внести правки в текущем проекте. Нужен специалист, который хорошо работает на gsap/lenis Нужно сделать анимацию карточек. Подробное ТЗ здесь: https://www.figma.com/design/5bLEJudN5LPpB9ZSoJa2Eb/Untitled?m=auto&t=qwyluUctL1lrMNvh-6 Нужно… Javascript и Typescript, Веб-программирование ∙ 3 дня 16 часов назад ∙ 21 ставка |
Коммерческая on-premise платформа видеосвязи «ViM»Требуется разработать on-premise систему видеосвязи с базовым расчетом на 100 одновременных подключений (10 изолированных комнат по 10 человек). Платформа должна иметь заложенную архитектуру для будущего горизонтального масштабирования до 1000 пользователей путем добавления… Javascript и Typescript, Веб-программирование ∙ 4 дня 11 часов назад ∙ 32 ставки |
Ищу наставника по Claude Code для запуска веб-проекта с нуля**Кратко о задаче:** Я новичок без опыта в программировании. Есть готовое ТЗ на разработку сайта (42 страницы, Next.js, PostgreSQL). Хочу реализовать его самостоятельно с помощью Claude Code - нужен специалист, который настроит среду и научит меня работать с инструментом. ---… Javascript и Typescript, Обучение ∙ 5 дней 15 часов назад ∙ 18 ставок |
Обновление дизайна на сайтеНужно обновить дизайн существующего сайта используя HTML, CSS, JS: освежить внешний вид, сделать его современным и адаптивным под мобильные устройства. Требуется добавить плавные анимации и интерактивные элементы . HTML и CSS верстка, Javascript и Typescript ∙ 6 дней 9 часов назад ∙ 91 ставка |