Парсер оголошень з сайту в телеграм чат

Пропоную розробити Telegram-бота, який буде моніторити нові оголошення на сайті нерухомості та автоматично надсилати їх у ваш Telegram-чат у заданому форматі. Бот також матиме функціонал для керування моніторингом та ведення статистики.

Функціонал бота
Моніторинг сайту:

Перевірка нових оголошень кожні 10 хвилин.
Збереження URL нових оголошень у базу даних для унікалізації.
Відправка повідомлень у Telegram-чат:

… Форматована публікація нових оголошень.
Уникнення повторних публікацій.
Меню бота:

Кнопка ВКЛ/ВИКЛ: Увімкнення/вимкнення моніторингу сайту.
Статистика: Показує кількість нових оголошень:
За сьогодні.
За весь час.
Розширення функціоналу:

Можливість додавання нових сайтів у майбутньому.
Відокремлення бази даних для кожного сайту.
Етапи реалізації
Архітектура бази даних:

Створення таблиць для зберігання URL, часу публікації та інших даних.
Відокремлення даних для кожного сайту.
Розробка парсера:

Налаштування парсингу оголошень за допомогою бібліотек (наприклад, BeautifulSoup, Scrapy).
Обробка пагінації.
Перевірка унікальності оголошень за URL.
Інтеграція з Telegram:

Використання Telegram Bot API для надсилання повідомлень у чат.
Реалізація меню для керування ботом.
Реалізація статистики:

Підрахунок кількості нових оголошень за сьогодні та за весь час.
Тестування та оптимізація:

Перевірка коректності роботи парсера.
Перевірка швидкості роботи та стабільності.
Технічні деталі
Мова програмування: Python.
Бібліотеки:
Для парсингу: BeautifulSoup, Scrapy, або Selenium (якщо потрібно).
Для роботи з Telegram: python-telegram-bot.
Для бази даних: SQLite/MySQL.
Хостинг: Розміщення бота на сервері (Heroku, AWS, або інший хмарний провайдер).
Очікувані результати
Автоматизація: Швидке виявлення нових оголошень та їх відправка у Telegram.
Управління: Зручне меню для контролю за роботою бота.
Масштабованість: Легке додавання нових сайтів для моніторингу.
Аналітика: Збір статистики для моніторингу ефективності.
Готовий обговорити деталі проекту та почати реалізацію.

Вітаю!

Готовий взятися за виконання вашого проєкту. Маю досвід у розробці подібних парсерів. Реалізую все грамотно і структурно, з можливістю додавання нових сайтів у майбутньому.

Код буде написаний з зрозумілими коментарями, подальша підтримка і запуск проєкту на обраному хостингу. Завжди на зв'язку, працюю швидко і якісно.

З повагою,
Роман

Показати оригінал

Перекласти

привіт, вкажіть сайт з якого треба парсити, це основне що потрібно для оцінки

Доброго дня, Михайло! 👋

Мене зацікавило Ваше замовлення, і я готовий допомогти з розробкою парсера для моніторингу оголошень з сайту нерухомості в телеграм боті.

🟡Що я пропоную🟡:

✅Грамотна структура
✅База даних, розділена за сайтами, для легкого масштабування.
✅Збір усіх оголошень із функцією унікалізації за URL.
… ✅Налаштування порівняння нових оголошень зі старими.

✅Відправлення нових оголошень у Ваш чат-бот в телеграмі у заданому форматі.
✅Функцію, яка запобігатиме дублюванню оголошень.
✅Зручне меню з кнопками для активації моніторингу.
✅Статистику з підрахунком кількості оголошень за день і за весь час.

Буду радий обговорити деталі проєкту та розпочати співпрацю! 😊
З найкращими побажаннями,
Андрій!)😁

Готовий взятися.
Але треба уточнити деталі замовлення, пишіть!
Реалізую скриптом на python.

Парсер для одного сайту - 1600 грн. Готовий зробити швидко і якісно.

Показати оригінал

Перекласти

Доброго дня. Можу виконати ваше замовлення. Напишіть в повідомленнях список потрібних сайтів, та які сайти плануєте ще додати у майбутньому.

Готовий виконати ваш проєкт. У мене є досвід із подібними задачами, використовую мікросервісну архітектуру, що дозволить масштабувати систему та додавати нові модулі. Зроблю все якісно й доволі швидко.

Доброго дня, мене зацікавив ваш проект. Вмію добре писати парсери, а також писати ботів. Зроблю добре цього бота, якщо зацікавили, пишіть в лс для подробиць.

Показати оригінал

Перекласти

Вітаю!

Зацікавив Ваш проєкт, маю великий досвід в асинхронному/багатопотоковому парсингу (Requests, WebSockets, HTTPX, BS4, JSON) автоматизації та емуляції дій користувача (JavaScript, Selenium, Playwright), обробці інформації (Openpyxl, JSON, MySQL, MongoDB, Google Sheets API) й розробці телеграм-ботів різної складності (Telethon, Pyrogram, Aiogram);

Зв'яжіться зі мною для обговорення деталей та строків виконання даного проєкту!

Готовий взятися за роботу, напишіть в ЛС посилання на сайти, щоб краще оцінити ціни і терміни, бувають просто сайти, які можна легко спарсити, без всяких ковирянь в javascript, а над деякими треба підзаморочитися. Досвід у розробці ботів є, досвід у парсингу також.
Приклади моїх ботів: AudioRizakBot MuzykaFreeBot ZobrazhenyaConvertBot CreateQRCode_robot

Показати оригінал

Перекласти

Доброго дня. Зроблю такого бота. Пишіть, буду радий співпрацювати!

Показати оригінал

Перекласти

Привіт.

Розробляю ботів для телеграма на NodeJS. Готовий взятися. Пишіть, обговоримо.

Показати оригінал

Перекласти

Привіт, Михаиле! Я Олена, і наша команда KUB-X готова вирішити ваше завдання з парсінгу оголошень. Ми створимо бота, який буде перевіряти сайт кожні 10 хвилин, надсилати нові оголошення у ваш Telegram чат та зберігати URL в БД для уникнення дублікатів. Наша структура проекту дозволить легко додавати нові сайти в майбутньому. Чекаємо на співпрацю, щоб перетворити вашу ідею в успішний проект!

Привіт! Готовий розробити для Вас Telegram-бота з функціоналом парсингу оголошень. Реалізую:

- Моніторинг нових оголошень з унікалізацією URL.
- Відправку даних у чат у заданому форматі.
- Базу даних з розбиттям по сайтам для масштабування.
- Меню з функціями включення/вимкнення моніторингу та статистики.

Покажу портфоліо, обговоримо деталі в ЛС.

Показати оригінал

Перекласти

Доброго дня

готовий виконати дану роботу

Пишіть
зроблю завтра, буде готово

Показати оригінал

Перекласти