Парсер для OLX - сбор открытой информации
нужен парсер для OLX
Задача: Сделать парсер OLX, который будет собирать данные с объявлений в нескольких рубриках в которых МОЖНО открывать контакты продавца БЕЗ ЗАЛОГИНИВАНИЯ
Входные данные:
1) на сайте OLX есть рубрики, в которых можно открывать контакты БЕЗ ЗАЛОГИНИВАНИЯ
2) Есть локальная MySQL таблица в которую нужно записать полученные данные с сайта OLX
Со страницы объявления нужно собрать следующие данные:
1) Телефон
2) Категорию объявления
3) Заголовок объявления
4) Цену из объявления
5) Валюту
6) Имя
7) Область и город
8) Год (касается рубрики автомобили)
OLX без залогинивания даёт открыть всего 10 номеров телефонов с одного IP
В парсере нужно реализовать смену IP используя TOR прокси после открытия 10ти номеров телефонов.
Записываться данные должны в MySQL базу в определённую таблицу
Парсер должен вносить в таблицу только уникальные записи предварительно сверясь по номеру телефона - то есть если парсер открыл контакты в объявлении на OLX, то потом он сверяется с таблицей на наличие конкретного номера телефона и в случае, если его нет в БД то парсер записывает данные в таблицу, а в случае, если парсер увидел, что в таблице уже есть этот номер телефона, то он не записывает данные и переходит к следующему объявлению
Данный парсер может быть реализован любым удобным для вас способом.
У меня должна быть возможность выбирать рубрики, которые будут парситься
Для детального обсуждения проекта пишите 🙂
-
6396 74 1 Добрый день. Есть опыт смены IP в сети TOR. Проверил на олх, они пускают с ТОR.
В ОЛХ есть возможно парсить сразу данные (значительно экономит время).
Если интересно, пишите, обсудим детали.
-
693 5 0 Добрый день, напишу для вас парсер, уже делал похожие для olx
Парсер должен работать 24/7 или по запуску?
Можем связаться в личные для обсуждения подробностей
-
1668 31 0 Я могу помочь с разработкой парсера для OLX, который будет собирать данные с объявлений в выбранных рубриках.
-
301 Добро пожаловать!
У меня есть опыт в разработке парсеров. Я вижу выполнение вашей задачи с использованием Python и его библиотек.
Для более подробной обсуждения проекта прошу отписать мне в личном сообщении. Буду рад сотрудничеству.
-
428 5 0 готов сделать вашу задачу ,у меня есть готовый многопоточный парсер olx ,который работает уже 2 года ,напишите ,буду переделать под ваши нужды
Актуальные фриланс-проекты в категории Веб-программирование
Верстальщик для multi-page advertorial сайта (Health Media) — вайб-кодинг, чистый код
6654 UAH
Нужно создать многостраничный сайт в стиле health media, по образцу healthinsider.news. Не просто лендинг — полноценный псевдо-редакционный сайт (advertorial), под который будет литься трафик с Meta Ads. ВАЖНО: задача делается через вайб-кодинг (AI-assisted coding / vibe… HTML и CSS верстка, Веб-программирование ∙ 1 час 25 минут назад ∙ 26 ставок |
Необходимо сделать редизайн вебсайта и разработать функционал личного кабинета оптового покупателяТехническое заданиеПроектРедизайн корпоративного вебсайта и разработка личного кабинета оптового покупателя, направление - детская одежда.Цель проектаСоздать современную цифровую платформу для B2B и B2C клиентов компании с акцентом на улучшение пользовательского опыта, повышение… Веб-программирование ∙ 4 часа 29 минут назад ∙ 28 ставок |
Pіm система
10 000 UAH
Необходимо создать PIM систему. Количество товаров — несколько миллионов. Есть несколько поставщиков, которые предоставляют данные в разных форматах: csv, xml, API. Данные ограничены, часто нужно находить характеристики товаров в других источниках и дополнять. Необходимо… Базы данных и SQL, Веб-программирование ∙ 6 часов 14 минут назад ∙ 33 ставки |
Ищем специалиста, который сделает XML/YML файл с товарами для маркетплейсов Rozetka и Kasta.Необходимо подготовить файл с товарами: название, описание, цена, остатки, фото, категории, характеристики, размеры/цвета. Важно: файл должен проходить валидацию Rozetka и корректно загружаться на Kasta. Товар у нас есть в CRM Ситникс и на сайте ХорошопТовара ориентировочно 80… Веб-программирование ∙ 9 часов 20 минут назад ∙ 26 ставок |
Сайт для магазина оптовой продажи волос
29 882 UAH
Тех задание в приложении Нужен сайт для магазина оптовой продажи волос в Польше Все подробности описаны в тз HAIR FAMILY ТЗ.docx Веб-программирование, Дизайн сайтов ∙ 9 часов 42 минуты назад ∙ 120 ставок |