Постоянный парсер
На данном сайте под определенным фильтром показываются автомобили с ценой покупки сейчас:
https://www.copart.com/vehicleFinderSearch/?displayStr=%5B2010%20TO%202021%5D&from=%2FvehicleFinder%2F&searchStr=%7B%22MISC%22:%5B%22%23VehicleTypeCode:VEHTYPE_V%22,%22%23LotYear:%5B2010%20TO%202021%5D%22%5D,%22sortByZip%22:false,%22buyerEnteredZip%22:null,%22milesAway%22:null%7D&searchCriteria=%7B%22query%22:%5B%22*%22%5D,%22filter%22:%7B%22FETI%22:%5B%22buy_it_now_code:B1%22%5D,%22MISC%22:%5B%22%23VehicleTypeCode:VEHTYPE_V%22,%22%23LotYear:%5B2010%20TO%202021%5D%22%5D%7D,%22sort%22:%5B%22auction_date_type%20desc%22,%22auction_date_utc%20asc%22%5D,%22watchListOnly%22:false,%22searchName%22:%22%22,%22freeFormSearch%22:false%7D
1. Нужно собрать все автомобили которые сейчас показываются, можно хранить их в вайле и идентификатором будет id у каждого авто он уникальный.
2. После того как собрали автомобили происходит проверка на появления нового транспорта и сравнивается со списком который есть в базе.
3. Если автомобиль который нашли его в файле по id нету парсер публикует его в телеграмм, токен бота и id чата предоставлю
4. Данная программа должно проверять постоянно список так как транспорт появляться в рандомнное время и очень важно получить в телеграмм данные сразу как только он появился в списке
5. Данные которые нужно отправлять в телеграмм:
- Год Марка Модель
- Цена
- Номер VIN
- Номер ID
- Первое фото
- Ссылка на данный транспорт
Данная структура должна выглядеть так http://joxi.ru/vAWE70jFOVNqam
По итогу могу сказать что данный парсер работает в постоянно режиме, сравнивает если уникальное отправляет в телеграмм и записывает id в файл что бы не было дублев. Так же очень важное время проверки такой же софт уже есть рабочий и присылает после публикации автомобиля на сайте ссылку в телеграмм с задержкой в 2-4 секунды, все эти действия работают без прокси.
Технология которая будет применятся может быть любая.
-
645 49 1 Здравствуйте! Сделаю вам такого бота.
Есть опыт в парсинге, телеграм ботах.
-
1792 40 0 Здравстуйте, есть опыт парсинга копарт. Сделаю максимально быстро. Постинг в телеграм куда именно? Бюджет можем скоректиоовать, всегда иду на уступки, если есть конструктивные аргументы.
Актуальні фриланс-проєкти в категорії Парсинг даних
OpenCart — каталог оренди спецтехніки
6000 UAH
OpenCart — каталог оренди спецтехніки Потрібно запустити каталог оренди спецтехніки на OpenCart. Тематика: екскаватори; автовишки; навантажувачі; генератори; крани; риштування; інша будівельна техніка. Бажано, щоб у вас вже був готовий шаблон або напрацювання під… Веб-програмування, Парсинг даних ∙ 15 годин 39 хвилин тому ∙ 42 ставки |
Перенести програму - слетів сервер, де була програма (офіційний дозволений парсинг державних даних)
2066 UAH
Добрий! У мене у клієнта стався даний кейс, описаний нижче. Потрібно допомогти перенести на новий сервер і протестувати програму. Краще програміст, який розбирається в парсингу. Налаштування ПЗ та серверів, Парсинг даних ∙ 19 годин 32 хвилини тому ∙ 24 ставки |
Парсинг та класифікація великого масиву зображеньПотрібно реалізувати проєкт зі збору та структурування великого масиву архітектурних зображень із відкритих вебджерел.Задача включає: автоматизований збір зображень; завантаження файлів у максимально доступній якості; класифікацію зображень за категоріями: Exterior; Interior;… Python, Парсинг даних ∙ 20 годин 11 секунд тому ∙ 30 ставок |
Парсинг Резюме Work.ua та Rabota.uaПотрібно завантажити у форматі Excel базу актуальних резюме з Work.ua та Работа.ua. Бажано, щоб файл Excel містив такі стовпці: Ім’я Номер телефону (у форматі +380...) Електронна пошта Посада (професія) Посади, які розглядає Категорія сфери діяльності (рубрика) Галузь, у якій… Збір інформації, Парсинг даних ∙ 1 день 19 годин тому ∙ 18 ставок |
Парсинг сайтуПотрібна реалізація 4 парсерів (сайти каталоги) Є ТЗ, є приклад коду як референс. В завдання входить: Написати парсер Прикрутити проксі Логіка дедублікації (перенести логіку з прикладу) Логіка хешування по 3 полям Парсер має працювати як пайплайн з логікою, що описана… Парсинг даних ∙ 2 дні 11 годин тому ∙ 42 ставки |