Сделать Парсер ОЛХ
1. Основные требования:
1.1. Собирать текстовые данные на сайте olx.ua, картинки не собирать.
1.2. Ряд собранных данных, проверять на соответствие правилам, прописанным в тхт файлах, заменять и записывать в csv
1.3. Номер телефона приводить в единый формат +380679996688
1.4. Парсер должен иметь возможность работать через прокси.
1.5. Парсер должен работать на windows XP,7,8,10/32,64
1.6. Парсер должен работать с cookie, если есть необходимость
1.7. По завершению работы, предоставить исходники
Дизайн проекта, ориентир на примеры работ.
-Презентация в PDF
-Основные страницы сайта:
Для b2c:
--Виртуальная карта, взаимодействие с АПИ для выпуска карты на емейл+инструкция.
(Возможности, Партнёры)
Для b2b:
--Схема сотрудничества, возможности, заявка на подключение+презентация.
--Страница по АЗС, схема работы, возможности, услуги, заявка на подключение, калькулятор.
---FAQ, ответы на все вопросы + инструкция в виде презентации о карте U.
-О нас, Партнёры.
Дополнительно:
Соц.сети, респост наших услу+переход на страницы компании.
Вёрстка всех страниц, загрузка на хостинг, тест.
Вёрстка емейл писем:
-инструкция на выпуск карты.
(Еженедельное напоминание о выпуске, если не выпустил+еженедельное письмо о партнерах и точках продаж, где можно воспользоваться нашей картой)
Вёрстка емейл письма, взаимодействие с формой b2b:
- Онлайн форма для подключения партнёра к нам в систему и размещение на все наши ресурсы. (Сайт, соц.сети)
Еженедельная работа по наполнению информации, контроль качества.
Вы готовы, стать частью нашей команды?
Готовы обсудить ваши ежемесячный оклад + бонусную часть от ваших трудозатрат.
( Работа, без пред оплат, только командная и долгосрочная работа)
Начнём с презентации, нарисована от руки, нужно Ее оживить.
https://drive.google.com/open?id=0B6HkFBAuyv1sdEQ4dmllZXNTUDQ
Это первая задача, и потом по этапно по сайту.
Презентации, примеры:
https://cardberry.com/public/files/StartGuide_1.2_ru.pdf
https://retail.cardsmobile.ru/docs/cardsmobile-smb.pdf
https://cardsmobile.ru/terms/terms.pdf
https://drive.google.com/file/d/0B0N2jCmM9XZTSDVoMTBjbHZVbWs/view
Исходники лого, карты нашей, все есть
Так же сделать инструкцию нашей карты для клиентов на примере, что в приложении.
О нас,
"U" - Виртуальный носитель для всех видов карт с дополненной программой лояльности.
Виртуальный носитель "U" на всех мобильных устройствах:
- Passbook
- Apple Wallet
- Pass Wallet
- Windows Wallet
- Wallet Pass.
1500 международных брендов для передачи информации по баллам.
Два нажатия на Touch ID и "U" появится на экране вашего смартфона.
Быстро. Удобно. Надежно.
-
7 днів5000 UAH
7 днів5000 UAH
Доброго времени суток, буду рад помочь решить вашу задачу. Использую для таких решений C++ Qt Creator, в интерфейсе предусмотрю добавление прокси, если в этом будет нужда.
С уважением Миша.
-
7 днів4000 UAH
2162 85 0 7 днів4000 UAH
Готов сделать.
-
5 днів3000 UAH
72 1 0 5 днів3000 UAH
Здравствуйте
Готов заняться
Писал парсеры сайтов для грабинга контента и автонаполнения интернет-магазинов
на PHP и Python
Могу проконсультировать по готовым решениям - + ZennoPosterPro + и Datacol
-
5 днів5000 UAH
3718 193 12 7 5 днів5000 UAH
Есть опыт работы с этой платформой. Знаю их защиты (например, при n+ запросов в n+ секунд). Более того, есть готовые продукты под их сервис. Готов поработать с Вами.
-
2 дні4000 UAH
194 1 0 2 дні4000 UAH
Здравствуйте. Пишу парсеры на Python.
Есть готовый мультипоточный парсер olx, т.е. нужно будет только допилить его под ваши нужды (напр. проверять данные на соответствие правилам). Также не описаны условия работы парсера. Мой вариант, например, парсит все объявления за последний час. (скорость примерно 35000-40000 объявлений за 20 минут).
Прокси не требуются, т.к. olx не банит.
Если заинтересовало - пишите.
Skype: Ultharas
E-mail: [email protected]
-
а как вы собираетесь парсить телефоны. они там подгружаются аяксом при клике. вам нужен бот, а не просто парсер
-
а разве парсер не моет сделать аякс запрос ? 😁
-
а разве парсер не может сделать аякс запрос ?
-
Смотришь что шлет браузер при событии нажатия и куда, определяешь логику работы и вперед.
Единственное геморно - слишком много данных для обработки, главный файл сайтмепа содержит в себе еще кучу хмл-сайтмепов https://www.olx.ua/sitemap.xml
А телефоны стянуть тебе поможет
PhantomJS
-
Это все конечно так. Вопрос в том что мы понимаем под парсингом. Где заканчивается парсинг как форматная обработка строк и начинается бот как взаимодействие с сайтом.
-
тут товарищ Сергей Евдокимов всё правильно описал , запросы идут одинаковые ,только айдишники разные )))
-
и кликать ничего не надо ... )
-
-
Парсер выполняет синтаксический анализ текста. Ну так проанализируй событие , что происходит при клике. Отправляется запрос в виде
"https://www.olx.ua/телефон/ID_vasia_pupkin
тянешь со страницы айди и подставляешь в запрос на каждой карточке
-
или
SlimerJS
-
Вообще не проблема. С# рулит
-
здесь нету автора проекта.
проект стянули с https://www.fl.ru/projects/3237936/sdelat-parser-olh.html
стянул и разместил посредник
можно всем расслабиться
-
:D
-
в процессе переписки по скайпу с посредником я 3 раза отказался участвовать в проекте. посредник не знал деталей ни сайта ни проекта.
а потом на меня вышел автор проекта и вместе посмеялись с посредника, который мои вопросы задавал автору а ответы писал мне.
-
Актуальні фриланс-проєкти в категорії Веб-програмування
Розробка 2 SEO-орієнтованих сайтів з продажу запчастин (квадроцикли та спецтехніка)Розробка двох спеціалізованих сайтів з продажу запчастинЗагальна інформація Потрібно розробити два спеціалізовані сайти: Запчастини для квадроциклів, UTV, SSV та іншої подібної техніки. Запчастини для спеціальної техніки. Існуючий сайт компанії: https://kiaparts.com.ua/ Нові… PHP, Веб-програмування ∙ 8 годин 20 хвилин тому ∙ 40 ставок |
Потрібен спеціаліст 1С (Управління торгівлею)
1000 UAH
Потрібен спеціаліст 1С (Управління торгівлею) Шукаємо досвідченого програміста 1С для невеликого проєкту з інтеграції. У нас інтернет-магазин і конфігурація 1С УТ. Потрібно налаштувати обмін даними між сайтом і 1С — щоб сайт міг отримувати з 1С актуальну інформацію (залишки,… Адміністрування систем та мереж, Веб-програмування ∙ 11 годин 31 хвилина тому ∙ 7 ставок |
Створення або коригування сайту на opencartВсім привіт! Попередня ситуація для розуміння: Замовив розробку сайту у Templatemonsters. Заздалегідь погодив ТЗ і купив у них шаблон. В результаті не дотрималися дедлайнів і взагалі в підсумку написали, що не можуть зробити так, як погодили. Хостинг купив за їхньою… Веб-програмування, Інтернет-магазини та електронна комерція ∙ 1 день 20 годин тому ∙ 36 ставок |
Розробка AI мобільного додатку дитячих казокШукаю досвідченого розробника або команду для створення мобільного додатку з штучним інтелектом, який буде генерувати короткі, добрі та вікові казки для дітей простий, красивий і безпечний продукт, де батько за кілька хвилин може створити персональну казку для дитини на ніч, в… AI та машинне навчання, Веб-програмування ∙ 1 день 21 година тому ∙ 46 ставок |
Перекладач для вордпрес.Потрібно перевести сайт вордпрес c wocommerce на 30 мов. Плагін для зручного автоматичного перекладу. Щоб не проклікати кожну сторінку для перекладів і кожен товар. Щоб робити виключення на певні фрази. Можна було коригувати переклад. Автоматичний переклад SEO даних. При… Веб-програмування, Створення сайту під ключ ∙ 1 день 21 година тому ∙ 26 ставок |
Київ