Парсер ОЛХ 11ю05. 2019
2000 UAHНужен парсер олх который будет быстро получать телефон и парсить необходимые данные без остановки и банов со стороны олх, и делать запись в мою базу данных цена, год, маркамодель ,коментарии( в коментарии входит все что написано на странице : Состояние машины ,Доп. опции , Безопасность , Прочее , Растаможена - это название полей само название передавть не нужно) телефон, дата создания, дата редактирования,обьем двигателя, пробег, кпп, область, ссылка на обьяву, ссылка на изображение,вид топлива , тип кузова, цвет
Сылка на парсинг Но нужно сделать что бы можно было менять ее ;
конект по сокету
new Socket("localhost", 8100);
порт 8100
туда передаеться строка
String result=
"©"+price.replaceAll("|","").replaceAll("||","")
+ "©"+old.replaceAll("|","").replaceAll("||","")
+ "©"+марка.replaceAll("\"","").replaceAll("|","")
+ "©"+comment.replaceAll("|","").replaceAll("\"","").replaceAll("\'","").replaceAll("<","").replaceAll(">","")
+ "©"+telephone.replaceAll("|","").replaceAll("|","")
+ "©"+createdate.replaceAll("|","").replaceAll("|","")
+ "©"+editdate.replaceAll("|","").replaceAll("|","")
+ "©"+объем двигателя.replaceAll("|","").replaceAll("|","")
+ "©"+probeg.replaceAll("|","").replaceAll("|","")
+ "©"+kpp
+ "©"+oblast.replaceAll("|","").replaceAll("|","")
+ "©"+siteLink
+ "©"+imageUrl
+ "©"+тут число, 8
+ "©"+топливо;
+ "©" + Тут число 0
+ "©" + Тут число 0
+ "©"+тип кузова
+ "©"+Цвет
Если в объяве несколько телефонов предавать их через запятую, предварительно убрав все пробелы и +)( - и
обрезав до 10 знаков на чиная с конца ( +380504620159 или +38 (050) 462-01-59 должно предать 0504620159 )
Объем двигателя если указан 1800 или 5500- передавать 1.8 и 5.5 если обем указан 42 см³ - предавать 4.2 и округлять объем двигателя ( 1998 - до 2 , 1789- до 1.8 , 1398- до 1.4 , 2989- до 3 и тд )
Если цена указана в гривне или евро преводить и передавать в доллрах - отдельно вывести файлик что бы курс доллараи евро можно было поеменять , по умолчанию поставить 26.5 доллар 30 евро
область нужно передавать так
Волынь";"Волынская"
"Закарпатье";"Закарпатская"
"Ивано-франковск";"Ивано-франковская"
"Львов";"Львовская"
"Ровно";"Ровенская"
"Тернополь";"Тернопольская"
"Хмельницкий";"Хмельницкая"
"Черновцы";"Черновецкая"
"Винница";"Винницкая"
"Житомир";"Житомирская"
"Киев";"Киевская"
"Кировоград";"Кировоградская"
"Полтава";"Полтавская"
"Сумы";"Сумская"
"Черкассы";"Черкасская"
"Чернигов";"Черниговская"
"Крым";"Крым"
"Николаев";"Николаевская"
"Одесса";"Одесская"
"Херсон";"Херсонская"
"Днепропетровск";"Днепропетровская"
"Донецк";"Донецкая"
"Запорожье";"Запорожская"
"Луганск";"Луганская"
"Харьков";"Харьковская"
ТАкие обявы не ПАРСИТЬ :
https://www.olx.ua/obyavlenie/kia-sportage-tsna-znizhena-IDE3wXZ.html
https://www.olx.ua/obyavlenie/prodam-avto-v-rassrochku-dzhili-emgrand-novye-avtosalon-IDtWYBc.html
https://www.olx.ua/obyavlenie/chery-tiggo-3-v-rozstrochku-kredit-viplata-chastinami-IDDkWxO.html
https://www.olx.ua/obyavlenie/lada-x-ray-skidka-45-ot-1340-grn-mesyats-IDDVRqn.html
https://www.olx.ua/obyavlenie/avto-bez-probgu-zalishilos-2-ed-renault-duster-1-5d-at-IDEaJcE.html
Нужно сделать поле в которое я могу ввести количество страниц для парсинга , когда дойдет до последней начинало с превой и так по кругу , мне нужно три экземпляра такого парсера , что бы работал без остановок и банов БЕЗ ПРОКСЕЙ через ВПН - ОБЯВЛЕНИЕ РАЗМЕЩЕННОЕ НА САЙТЕ ДОЛЖНО ПОПАДАТЬ В МОЮ БД НЕ БОЛЬШЕ МИНУТЫ
НЕДЕЛЮ РАБОТАЕТ БЕЗ ОСТАНОВОК И БАНОВ Я ПЛАЧЮ ДЕНЬГИ !!!!!!
Пишите с ценами
Писать тем у кого есть понимание парсинга номеров с олх
АМАТОРАМ НЕ ПИСАТЬ !!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!
-
66 днів66 666 UAH
66 днів66 666 UAH
Дмитрий, добрый день. С OLX работал !
Могу предоставить любые гарантии, в моей команде несколько опытных ясновидящих.
Предскажем все изменения OLX, обойдем все баны!
Обращайтесь, буду рад помочь.
-
Без банов и без прокси? Вам нужно поехать в офис OLX и договориться, чтобы они не обращали внимание на то, что Вы с одного Ip-адреса открываете за час настолько много номеров.
-
Дмитрий Преображенский Автовыкуп Киев
Если Без ПРОКСЕЙ НИКАК то можно ли с бесплатными и что бы туда не лазить ,не искать эти прокси , что бы это делала программа
-
Можно и с бесплатными, но при этом гарантии 0)
Да и вообще вам гарантии ни кто не даст что завтра программа загнется... так как прогеры ОЛХ-а активно борются с парсингом и говоря активно я имею ввиду АКТИВНО.
Не пытайтесь решить вашу проблему рас и навсегда в у них программисты с прямыми руками сидят... закажите парсинг и пусть уже прогер ломает голову как вытащить нужную вам инфу
Ей богу на счет ОЛХ уже не раз все обсуждалось и все равно хотите одно и тоже (НЕ КОНКРЕТНО ВЫ)
НЕ НАПИШУТ ВАМ ВОЛШЕБНУЮ ПРОГРАММУ С ГАРАНТИЕЙ ХОТЯ БЫ В НЕДЕЛЮ РАБОТОСПОСОБНОСТИ
-
Дмитрий, некого не слушайте !
Я и моя команда, будем рады вам помочь.
Просто для решение этой задачи, необходимы специфические навыки.
-
Интересно ОЛХ сменит класс в CSS просто 1 класс (к тому же самому номеру телефона) к примеру
каким образом программа будет парсить не имеея класса
Наверное величайшим образом развода))
-
Специфические навыки? Интересно...
Русский язык сюда относится? 🙂
“некого”.replace(“e”, “и”)
;)
-
Без прокси? Даже если человек вручную мышкой будет открывать (не с супер скоростью) объявления из списка и нажимать «показать телефон», его через время забанят.
-
Актуальні фриланс-проєкти в категорії Парсинг даних
Збір бази телеграм-каналів (англомовних)Потрібно зібрати базу телеграм каналів з наступними критеріями(2000-3000) каналів Критерії ТГ каналів: Мова: English Географія аудиторії: США (US)/Великобританія/Канада і т.д. англомовні канали під тир 1-2 гео Аудиторія: переважно чоловіки 21+ Канал публічний… Збір інформації, Парсинг даних ∙ 5 годин 6 хвилин тому ∙ 1 ставка |
База сайтів на woocommerceПотрібно зібрати базу українських сайтів інтернет-магазинів на woocommerce з контактами, які вказані на сайтах. Тільки працюючі сайти (індикатор: оновлення каталогу/контенту, робочий домен) Формат таблиці - адреса сайту, номер телефону, e-mail. Парсинг даних ∙ 20 годин 14 хвилин тому ∙ 18 ставок |
Створити дашборд у https://airtable.com/ по результативності рекламних креативів з facebook adsПовноцінне ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Бази даних та SQL, Парсинг даних ∙ 2 дні 10 годин тому ∙ 17 ставок |
Створення файлу Exel для завантаження товарів на сайти інших партнерів.Мене цікавить щоб зробити табличку Exel з повністю всіма параметрами. Ось сайт -https://heiztechnik.com.ua/ І позиціії які цікавлять щоб були перенесенні : Ручні котли : 1) TIS UNI 15-95 кВт(10) шт 2)TIS HARD 150-500 кВт(7) шт Пелетні котли: 1)TIS PELLET 15-95 кВт(10) шт 2)TIS… Парсинг даних ∙ 2 дні 14 годин тому ∙ 34 ставки |
Потрібен розробник для парсингу каталогу та автоматизації імпорту данихПодробне ТЗ в прикріпленому документі прошу в відповіді вказати орієнтовну вартість і терміни реалізації чи є досвід роботи з парсингом великих каталогів які можливі складнощі або обмеження ви бачите в даному завданні Бази даних та SQL, Парсинг даних ∙ 2 дні 17 годин тому ∙ 39 ставок |
Київ