Парсер ОЛХ 11ю05. 2019
2000 UAHНужен парсер олх который будет быстро получать телефон и парсить необходимые данные без остановки и банов со стороны олх, и делать запись в мою базу данных цена, год, маркамодель ,коментарии( в коментарии входит все что написано на странице : Состояние машины ,Доп. опции , Безопасность , Прочее , Растаможена - это название полей само название передавть не нужно) телефон, дата создания, дата редактирования,обьем двигателя, пробег, кпп, область, ссылка на обьяву, ссылка на изображение,вид топлива , тип кузова, цвет
Сылка на парсинг Но нужно сделать что бы можно было менять ее ;
конект по сокету
new Socket("localhost", 8100);
порт 8100
туда передаеться строка
String result=
"©"+price.replaceAll("|","").replaceAll("||","")
+ "©"+old.replaceAll("|","").replaceAll("||","")
+ "©"+марка.replaceAll("\"","").replaceAll("|","")
+ "©"+comment.replaceAll("|","").replaceAll("\"","").replaceAll("\'","").replaceAll("<","").replaceAll(">","")
+ "©"+telephone.replaceAll("|","").replaceAll("|","")
+ "©"+createdate.replaceAll("|","").replaceAll("|","")
+ "©"+editdate.replaceAll("|","").replaceAll("|","")
+ "©"+объем двигателя.replaceAll("|","").replaceAll("|","")
+ "©"+probeg.replaceAll("|","").replaceAll("|","")
+ "©"+kpp
+ "©"+oblast.replaceAll("|","").replaceAll("|","")
+ "©"+siteLink
+ "©"+imageUrl
+ "©"+тут число, 8
+ "©"+топливо;
+ "©" + Тут число 0
+ "©" + Тут число 0
+ "©"+тип кузова
+ "©"+Цвет
Если в объяве несколько телефонов предавать их через запятую, предварительно убрав все пробелы и +)( - и
обрезав до 10 знаков на чиная с конца ( +380504620159 или +38 (050) 462-01-59 должно предать 0504620159 )
Объем двигателя если указан 1800 или 5500- передавать 1.8 и 5.5 если обем указан 42 см³ - предавать 4.2 и округлять объем двигателя ( 1998 - до 2 , 1789- до 1.8 , 1398- до 1.4 , 2989- до 3 и тд )
Если цена указана в гривне или евро преводить и передавать в доллрах - отдельно вывести файлик что бы курс доллараи евро можно было поеменять , по умолчанию поставить 26.5 доллар 30 евро
область нужно передавать так
Волынь";"Волынская"
"Закарпатье";"Закарпатская"
"Ивано-франковск";"Ивано-франковская"
"Львов";"Львовская"
"Ровно";"Ровенская"
"Тернополь";"Тернопольская"
"Хмельницкий";"Хмельницкая"
"Черновцы";"Черновецкая"
"Винница";"Винницкая"
"Житомир";"Житомирская"
"Киев";"Киевская"
"Кировоград";"Кировоградская"
"Полтава";"Полтавская"
"Сумы";"Сумская"
"Черкассы";"Черкасская"
"Чернигов";"Черниговская"
"Крым";"Крым"
"Николаев";"Николаевская"
"Одесса";"Одесская"
"Херсон";"Херсонская"
"Днепропетровск";"Днепропетровская"
"Донецк";"Донецкая"
"Запорожье";"Запорожская"
"Луганск";"Луганская"
"Харьков";"Харьковская"
ТАкие обявы не ПАРСИТЬ :
https://www.olx.ua/obyavlenie/kia-sportage-tsna-znizhena-IDE3wXZ.html
https://www.olx.ua/obyavlenie/prodam-avto-v-rassrochku-dzhili-emgrand-novye-avtosalon-IDtWYBc.html
https://www.olx.ua/obyavlenie/chery-tiggo-3-v-rozstrochku-kredit-viplata-chastinami-IDDkWxO.html
https://www.olx.ua/obyavlenie/lada-x-ray-skidka-45-ot-1340-grn-mesyats-IDDVRqn.html
https://www.olx.ua/obyavlenie/avto-bez-probgu-zalishilos-2-ed-renault-duster-1-5d-at-IDEaJcE.html
Нужно сделать поле в которое я могу ввести количество страниц для парсинга , когда дойдет до последней начинало с превой и так по кругу , мне нужно три экземпляра такого парсера , что бы работал без остановок и банов БЕЗ ПРОКСЕЙ через ВПН - ОБЯВЛЕНИЕ РАЗМЕЩЕННОЕ НА САЙТЕ ДОЛЖНО ПОПАДАТЬ В МОЮ БД НЕ БОЛЬШЕ МИНУТЫ
НЕДЕЛЮ РАБОТАЕТ БЕЗ ОСТАНОВОК И БАНОВ Я ПЛАЧЮ ДЕНЬГИ !!!!!!
Пишите с ценами
Писать тем у кого есть понимание парсинга номеров с олх
АМАТОРАМ НЕ ПИСАТЬ !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
-
66 дней66 666 UAH
66 дней66 666 UAH
Дмитрий, добрый день. С OLX работал !
Могу предоставить любые гарантии, в моей команде несколько опытных ясновидящих.
Предскажем все изменения OLX, обойдем все баны!
Обращайтесь, буду рад помочь.
-
Без банов и без прокси? Вам нужно поехать в офис OLX и договориться, чтобы они не обращали внимание на то, что Вы с одного Ip-адреса открываете за час настолько много номеров.
-
Дмитрий Преображенский Автовыкуп Киев
Если Без ПРОКСЕЙ НИКАК то можно ли с бесплатными и что бы туда не лазить ,не искать эти прокси , что бы это делала программа
-
Можно и с бесплатными, но при этом гарантии 0)
Да и вообще вам гарантии ни кто не даст что завтра программа загнется... так как прогеры ОЛХ-а активно борются с парсингом и говоря активно я имею ввиду АКТИВНО.
Не пытайтесь решить вашу проблему рас и навсегда в у них программисты с прямыми руками сидят... закажите парсинг и пусть уже прогер ломает голову как вытащить нужную вам инфу
Ей богу на счет ОЛХ уже не раз все обсуждалось и все равно хотите одно и тоже (НЕ КОНКРЕТНО ВЫ)
НЕ НАПИШУТ ВАМ ВОЛШЕБНУЮ ПРОГРАММУ С ГАРАНТИЕЙ ХОТЯ БЫ В НЕДЕЛЮ РАБОТОСПОСОБНОСТИ
-
Дмитрий, некого не слушайте !
Я и моя команда, будем рады вам помочь.
Просто для решение этой задачи, необходимы специфические навыки.
-
Интересно ОЛХ сменит класс в CSS просто 1 класс (к тому же самому номеру телефона) к примеру
каким образом программа будет парсить не имеея класса
Наверное величайшим образом развода))
-
Специфические навыки? Интересно...
Русский язык сюда относится? 🙂
“некого”.replace(“e”, “и”)
;)
-
Без прокси? Даже если человек вручную мышкой будет открывать (не с супер скоростью) объявления из списка и нажимать «показать телефон», его через время забанят.
-
Актуальные фриланс-проекты в категории Парсинг данных
Парсинг товаров с супермаркетовНужен специалист (парсинг + Google Sheets + автоматизация). Цель: Создать систему автоматического получения и обновления цен на продукты питания из супермаркетов Сильпо и NOVUS с выводом данных в Google Sheets. Что необходимо реализовать: Создать основную Google Sheets таблицу с… Парсинг данных, Поиск и сбор информации ∙ 1 час 12 минут назад ∙ 19 ставок |
Рассылка Линкедин
5322 UAH
Рассылка Линкедин Необходимо запустить рассылку линкедин по заданной базе. 30 000+ контактов Ждем предложения E-mail маркетинг, Парсинг данных ∙ 1 день 8 часов назад ∙ 9 ставок |
Парсинг email-ов компаний из специфической индустрии
5000 UAH
Найти контакты (e-mail, номер телефона) компаний, которые занимаются определенным бизнесом, указанным в этом Google документе https://docs.google.com/document/d/1_d-iLxLSL3gjRvo1GmUpWNm0Pm5YoKGcEvaiDc_2I0g/edit?usp=sharing Результат должен быть в виде таблицы с колонками:… Парсинг данных ∙ 2 дня 9 часов назад ∙ 31 ставка |
Нужен парсер интернет-магазина https://www.lcsc.com/нужно регулярно (1 раз в месяц, или по запуску скрипта) получать актуальную информацию о товарах в наличии магазина https://www.lcsc.com/ из каталога всех разделов… Парсинг данных ∙ 3 дня 14 часов назад ∙ 43 ставки |
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 4 дня 6 часов назад ∙ 59 ставок |
Киев