Разработал систему мониторинга для сайта vaurioajoneuvo.fi — финского аукциона по продаже автомобилей с повреждениями. Цель — автоматически отслеживать новые лоты (машины), появляющиеся на сайте, и моментально отправлять информацию в Telegram-группу.
Основной функционал:
Поиск новых машин на главной странице сайта.
Проверка уникальности: если ссылка на авто уже есть в базе — пропуск, если новая — уведомление.
Сбор информации по лоту: марка, модель, год выпуска, изображение, ссылка на карточку.
Устойчивость к защите Cloudflare: ручная генерация cf_clearance, фиксация сессии (cookie + user-agent + proxy), работа через сохранённые профили.
Отправка уведомлений в Telegram с карточкой автомобиля (текст + фото + ссылка).
Многопоточность: несколько потоков с отдельными сессиями для параллельного мониторинга.
Конфигурация через JSON-файл: настройка путей, таймингов и количества потоков.
Запуск по расписанию или как фоновой службы (Windows Task Scheduler / daemon).
Технологии:
C#, PuppeteerSharp, SQLite, Telegram Bot API, Proxy, Cloudflare Bypass, Multithreading
Результат:
Парсер успешно находит новые автомобили в течение нескольких секунд после их появления на сайте и отправляет информацию в Telegram. Позволяет оперативно отслеживать интересные лоты без необходимости вручную мониторить сайт.
#парсинг #автопарсер #аукцион #битыеавто #финляндия #автоматизация #телеграмбот #cloudflarebypass #многопоточность #sqlite #puppeteersharp #csharp #вауриоаюнево #vaurioajoneuvo #vaurioajoneuvofi #поискмашин #автомониторинг #проектдляпортфолио #парсердлятелеграма #обходзащиты
#carscraper #cardeals #damagedcars #finnishauction #vaurioajoneuvo #vaurioajoneuvofi #csharpdeveloper #puppeteersharp #webscraping #automationtools #realtimemonitoring #cloudflarebypass #multithreading #telegrambot #sqlite #proxy #cartracking #telegramintegration #portfolio
#autoparseri #rikkinäisetautot #verkkohuutokauppa #vaurioajoneuvo #vaurioajoneuvofi #automaatiotyökalu #tietojenkeruu #telegrambilotti #pilvipalvelunkierto #suomiautot #seurantajärjestelmä
Основной функционал:
Поиск новых машин на главной странице сайта.
Проверка уникальности: если ссылка на авто уже есть в базе — пропуск, если новая — уведомление.
Сбор информации по лоту: марка, модель, год выпуска, изображение, ссылка на карточку.
Устойчивость к защите Cloudflare: ручная генерация cf_clearance, фиксация сессии (cookie + user-agent + proxy), работа через сохранённые профили.
Отправка уведомлений в Telegram с карточкой автомобиля (текст + фото + ссылка).
Многопоточность: несколько потоков с отдельными сессиями для параллельного мониторинга.
Конфигурация через JSON-файл: настройка путей, таймингов и количества потоков.
Запуск по расписанию или как фоновой службы (Windows Task Scheduler / daemon).
Технологии:
C#, PuppeteerSharp, SQLite, Telegram Bot API, Proxy, Cloudflare Bypass, Multithreading
Результат:
Парсер успешно находит новые автомобили в течение нескольких секунд после их появления на сайте и отправляет информацию в Telegram. Позволяет оперативно отслеживать интересные лоты без необходимости вручную мониторить сайт.
#парсинг #автопарсер #аукцион #битыеавто #финляндия #автоматизация #телеграмбот #cloudflarebypass #многопоточность #sqlite #puppeteersharp #csharp #вауриоаюнево #vaurioajoneuvo #vaurioajoneuvofi #поискмашин #автомониторинг #проектдляпортфолио #парсердлятелеграма #обходзащиты
#carscraper #cardeals #damagedcars #finnishauction #vaurioajoneuvo #vaurioajoneuvofi #csharpdeveloper #puppeteersharp #webscraping #automationtools #realtimemonitoring #cloudflarebypass #multithreading #telegrambot #sqlite #proxy #cartracking #telegramintegration #portfolio
#autoparseri #rikkinäisetautot #verkkohuutokauppa #vaurioajoneuvo #vaurioajoneuvofi #automaatiotyökalu #tietojenkeruu #telegrambilotti #pilvipalvelunkierto #suomiautot #seurantajärjestelmä