Сделать Парсер ОЛХ
1. Основные требования:
1.1. Собирать текстовые данные на сайте olx.ua, картинки не собирать.
1.2. Ряд собранных данных, проверять на соответствие правилам, прописанным в тхт файлах, заменять и записывать в csv
1.3. Номер телефона приводить в единый формат +380679996688
1.4. Парсер должен иметь возможность работать через прокси.
1.5. Парсер должен работать на windows XP,7,8,10/32,64
1.6. Парсер должен работать с cookie, если есть необходимость
1.7. По завершению работы, предоставить исходники
Дизайн проекта, ориентир на примеры работ.
-Презентация в PDF
-Основные страницы сайта:
Для b2c:
--Виртуальная карта, взаимодействие с АПИ для выпуска карты на емейл+инструкция.
(Возможности, Партнёры)
Для b2b:
--Схема сотрудничества, возможности, заявка на подключение+презентация.
--Страница по АЗС, схема работы, возможности, услуги, заявка на подключение, калькулятор.
---FAQ, ответы на все вопросы + инструкция в виде презентации о карте U.
-О нас, Партнёры.
Дополнительно:
Соц.сети, респост наших услу+переход на страницы компании.
Вёрстка всех страниц, загрузка на хостинг, тест.
Вёрстка емейл писем:
-инструкция на выпуск карты.
(Еженедельное напоминание о выпуске, если не выпустил+еженедельное письмо о партнерах и точках продаж, где можно воспользоваться нашей картой)
Вёрстка емейл письма, взаимодействие с формой b2b:
- Онлайн форма для подключения партнёра к нам в систему и размещение на все наши ресурсы. (Сайт, соц.сети)
Еженедельная работа по наполнению информации, контроль качества.
Вы готовы, стать частью нашей команды?
Готовы обсудить ваши ежемесячный оклад + бонусную часть от ваших трудозатрат.
( Работа, без пред оплат, только командная и долгосрочная работа)
Начнём с презентации, нарисована от руки, нужно Ее оживить.
https://drive.google.com/open?id=0B6HkFBAuyv1sdEQ4dmllZXNTUDQ
Это первая задача, и потом по этапно по сайту.
Презентации, примеры:
https://cardberry.com/public/files/StartGuide_1.2_ru.pdf
https://retail.cardsmobile.ru/docs/cardsmobile-smb.pdf
https://cardsmobile.ru/terms/terms.pdf
https://drive.google.com/file/d/0B0N2jCmM9XZTSDVoMTBjbHZVbWs/view
Исходники лого, карты нашей, все есть
Так же сделать инструкцию нашей карты для клиентов на примере, что в приложении.
О нас,
"U" - Виртуальный носитель для всех видов карт с дополненной программой лояльности.
Виртуальный носитель "U" на всех мобильных устройствах:
- Passbook
- Apple Wallet
- Pass Wallet
- Windows Wallet
- Wallet Pass.
1500 международных брендов для передачи информации по баллам.
Два нажатия на Touch ID и "U" появится на экране вашего смартфона.
Быстро. Удобно. Надежно.
-
7 дней5000 UAH
7 дней5000 UAH
Доброго времени суток, буду рад помочь решить вашу задачу. Использую для таких решений C++ Qt Creator, в интерфейсе предусмотрю добавление прокси, если в этом будет нужда.
С уважением Миша.
Один месяц бесплатная гарантия на поддержку. Гарантии выполнения вашего тз в срок. Скорость имеет значение. MTitkov -
7 дней4000 UAH
2162 85 0 7 дней4000 UAH
Готов сделать.
-
5 дней3000 UAH
72 1 0 5 дней3000 UAH
Здравствуйте
Готов заняться
Писал парсеры сайтов для грабинга контента и автонаполнения интернет-магазинов
на PHP и Python
Могу проконсультировать по готовым решениям - + ZennoPosterPro + и Datacol
-
5 дней5000 UAH
3718 193 12 7 5 дней5000 UAH
Есть опыт работы с этой платформой. Знаю их защиты (например, при n+ запросов в n+ секунд). Более того, есть готовые продукты под их сервис. Готов поработать с Вами.
-
2 дня4000 UAH
194 1 0 2 дня4000 UAH
Здравствуйте. Пишу парсеры на Python.
Есть готовый мультипоточный парсер olx, т.е. нужно будет только допилить его под ваши нужды (напр. проверять данные на соответствие правилам). Также не описаны условия работы парсера. Мой вариант, например, парсит все объявления за последний час. (скорость примерно 35000-40000 объявлений за 20 минут).
Прокси не требуются, т.к. olx не банит.
Если заинтересовало - пишите.
Skype: Ultharas
E-mail: [email protected]
-
а как вы собираетесь парсить телефоны. они там подгружаются аяксом при клике. вам нужен бот, а не просто парсер
-
а разве парсер не моет сделать аякс запрос ? 😁
-
а разве парсер не может сделать аякс запрос ?
-
Смотришь что шлет браузер при событии нажатия и куда, определяешь логику работы и вперед.
Единственное геморно - слишком много данных для обработки, главный файл сайтмепа содержит в себе еще кучу хмл-сайтмепов https://www.olx.ua/sitemap.xml
А телефоны стянуть тебе поможет
PhantomJS
-
Это все конечно так. Вопрос в том что мы понимаем под парсингом. Где заканчивается парсинг как форматная обработка строк и начинается бот как взаимодействие с сайтом.
-
тут товарищ Сергей Евдокимов всё правильно описал , запросы идут одинаковые ,только айдишники разные )))
-
и кликать ничего не надо ... )
-
-
Парсер выполняет синтаксический анализ текста. Ну так проанализируй событие , что происходит при клике. Отправляется запрос в виде
"https://www.olx.ua/телефон/ID_vasia_pupkin
тянешь со страницы айди и подставляешь в запрос на каждой карточке
-
или
SlimerJS
-
Вообще не проблема. С# рулит
-
здесь нету автора проекта.
проект стянули с https://www.fl.ru/projects/3237936/sdelat-parser-olh.html
стянул и разместил посредник
можно всем расслабиться
-
:D
-
в процессе переписки по скайпу с посредником я 3 раза отказался участвовать в проекте. посредник не знал деталей ни сайта ни проекта.
а потом на меня вышел автор проекта и вместе посмеялись с посредника, который мои вопросы задавал автору а ответы писал мне.
-
Актуальные фриланс-проекты в категории Веб-программирование
Разработчик сайтов / Web-мастер со знанием SEO (Иврит и Английский)Мы ищем современного веб-разработчика / веб-мастера для работы над проектами нашей SaaS-платформы Kadmoo. Нам нужен специалист, который живет в «новом мире» веб-разработки, следит за трендами и умеет создавать быстрые, оптимизированные сайты с использованием передового стека и… SEO-аудит сайтов, Веб-программирование ∙ 1 час 59 минут назад ∙ 14 ставок |
Настройка Google Analytics 4
3000 UAH
Необходимо выполнить аудит и настройку отслеживания событий через Google Analytics 4 и Google Tag Manager для сайта на WordPress Основные задачи: Проверка и исправление текущих настроек GA4 и GTM. Устранение проблем с отслеживанием конверсионных форм. Настройка отслеживания… SEO-аудит сайтов, Веб-программирование ∙ 7 часов 4 минуты назад ∙ 21 ставка |
Настройка GTM-аналитики для GetCourse с привязкой рекламных данных к заказуНеобходимо настроить GTM-аналитику для образовательной платформы на GetCourse. Задача: через Google Tag Manager собирать рекламные данные пользователя из URL и cookie и привязывать их к конкретному пользователю/заказу в GetCourse. Необходимо собирать и сохранять такие данные:… Веб-программирование ∙ 17 часов 56 минут назад ∙ 15 ставок |
Нужно достать POST / GET / PUT запросы с мобильного приложения TikTok срочноПо сути. Нужно достать POST / GET / PUT запросы с мобильного приложения TikTok Даже по суи можно до конца не реверсить ничего такого ибо подписи есть в интернете и т.д. Но было бы тоже супер Вся авторизация (Отправка данных/подтверждение по почте и ввод кода если… Веб-программирование, Десктопные приложения ∙ 1 день 5 часов назад ∙ 20 ставок |
Функция поиска товаров по изображениюНеобходимо разработать и интегрировать на сайт функциюпоиска товаров по изображению.Что нужно реализоватьКнопка«Поиск по фото»на сайте.Загрузка изображения пользователем: JPG.Поиск визуально похожих товаров в каталоге.Вывод результатов в виде стандартных карточек товаров: фото,… PHP, Веб-программирование ∙ 1 день 5 часов назад ∙ 43 ставки |
Киев