Бюджет: 75 PLN Термін: 1 день
Добрий день. Мені здається, що Ви банально не туди воюєте. Працюю з OLX вже кілька років, можу безкоштовно проконсультувати.
Буду радий співпраці!Тема: Оптимізація скрапінгу OLX.pl + Otodom.pl для платного Telegram-бота (мінімум трафіку/проксі + аналіз “як роблять безкоштовні боти”)
Шукаю фрілансера, який допоможе з оптимізацією скрапінгу OLX.pl та Otodom.pl для Telegram-бота моніторингу оголошень нерухомості в Польщі.
Платний сервіс моніторингу оголошень нерухомості під критерії користувача.
Ціна: 1 zł/день (~30 zł/місяць) за 1 активний моніторинг (набір фільтрів).
Джерела: OLX.pl + Otodom.pl (основні польські платформи нерухомості).
Логіка розсилки:
кожні 15 хв — перевірка (цикл)
за цикл шукаємо до 5 нових оголошень
відправляємо не все разом, а кожні 3–5 хв 1 оголошення, щоб розтягнути навантаження (за годину виходить ~4 цикли)
Є VPS + Docker, є скрапер/бот.
База: Supabase, частина логіки у Supabase Functions.
Telegram-боти вже є: окремо для налаштувань, окремо для сповіщень, окремо для підтримки.
Фото не завантажуємо (не качаємо картинки), беремо лише:
текст/опис
посилання
фільтри
посилання на усіх зображень(URL), без завантаження файлу
Якщо у кількох користувачів ідентичні фільтри, ми робимо 1 унікальний пошук на всіх, без дублювання запитів.
Навіть після оптимізацій по фото і “об’єднання однакових пошуків”, витрати на проксі високі, бо:
сторінка листингу (результат пошуку) може важити ~400–500 KB за запит
детальна сторінка оголошення (щоб дістати повний опис/параметри, якщо їх немає в листингу) теж може важити ~500 KB
якщо на цикл беремо до 5 оголошень — загальний трафік може бути ~3 MB / 15 хв
це дає приблизно ~288 MB/доба, ~8.6 GB/місяць на 1 унікальний пошук
за умовної ціни проксі 1 GB = 10 zł виходить, що один активний пошук може коштувати дорожче, ніж підписка клієнта (30 zł/міс), особливо якщо пошуків багато (16 міст і більше)
Є момент, який я хочу, розібрати:
Я підписаний на кілька безкоштовних Telegram-ботів/каналів, які вже місяцями працюють по OLX/нерухомості.
Вони надсилають сотні повідомлень щодня з новими оголошеннями.
У них немає:
підписки/платних функцій
реклами
очевидної монетизації
При цьому витрати на інфраструктуру/проксі у них явно мають бути — але вони якось це роблять і не закриваються.
Тому потрібно зрозуміти, як отримати “безлімітний трафік” без банів або інший спосіб отримання даних
Бюджет: 75 PLN Термін: 1 день
Добрий день. Мені здається, що Ви банально не туди воюєте. Працюю з OLX вже кілька років, можу безкоштовно проконсультувати.
Буду радий співпраці!Бюджет: 500 PLN Термін: 2 дні
Доброго дня,
Мав досвід співпраці з популярним у Варшаві агентством Grand, якщо знаєте. Але там ми робили збір даних у зв'язці з іншими платформами (mls та інші, не зовсім пам'ятаю назви), також є сервіс, з якого можна збирати додаткову інформацію, навіть можливо без проксі. Напишіть мені в ЛС, готовий допомогти тим, чим зможу, і проконсультувати.
Буду радий співпраці!
Бюджет: 75 PLN Термін: 1 день
Вітаю!
Маю великий досвід в написанні парсерів/телеграмм ботів.
Працюю з python та VPS вже 5 років
Допоможу вам вирішити ваше питання дуже швидко та якісно.
Звертайтесь!
Бюджет: 1700 PLN Термін: 15 днів
Оптимізація скрапінгу OLX.pl та Otodom.pl для Telegram-бота потребує комплексного підходу до зниження витрат на проксі та забезпечення стабільного доступу до даних. У вашому випадку ключовим фактором є зменшення кількості запитів до сторінок листингів та детальних оголошень, а також використання ефективних методів отримання даних. Зокрема, можна зосередитися на аналізі безкоштовних ботів, щоб виявити, як вони уникли банів або мінімізували трафік. Наприклад, можливе використання headless браузерів з розумним управлінням сесіями, інтеграція з API платформ (якщо доступні) або оптимізація логіки пошуку для мінімізації дублювання запитів.
Мій досвід у розробці мікросервісів, оптимізації інфраструктури та роботі з Telegram-ботами дозволяє пропонувати рішення, які зменшать навантаження на проксі. Наприклад, можна впровадити систему управління проксі з автоматичним вибором оптимальних маршрутів, а також використовувати кешування для повторних запитів. Крім того, для зменшення трафіку можна реалізувати більш ефективну логіку обробки сторінок — наприклад, використання парсингу лише потрібних даних (тексту, посилань) без завантаження повної сторінки.
Ключовим етапом буде аналіз безкоштовних ботів, щоб виявити технічні патерни, які дозволяють отримувати дані без високих витрат. Це може включати використання приватних API, розумного управління сесіями, або оптимізацію частоти запитів. Також важливо врахувати можливість інтеграції з іншими джерелами або використання альтернативних методів отримання даних, щоб уникнути обмежень платформ. Підхід має бути гнучким, адаптованим до вашого графіка та бюджету, з урахуванням масштабування у разі зростання кількості користувачів.
Бюджет: 500 PLN Термін: 3 дні
Доброго дня! Я вивчив ваш проект і готовий розпочати роботу. Певен, що зможу задовольнити всі ваші очікування.
РЕКОМЕНДОВАНИЙ ФРІЛАНСЕР!Бюджет: 3000 PLN Термін: 3 дні
🤝 Якісне рішення вашої задачі — точно в строк
Здравствуйте! Вивчив опис вашого проекту і готовий розпочати реалізацію.
Гарантую глибоке занурення в проект і опрацювання всіх деталей.
Суворо дотримуюсь дедлайнів. Робота буде готова вчасно або раніше.
Завжди на зв'язку і надаю звітність на ключових етапах.
Чекаю на ваш фідбек!
Бюджет: 75 PLN Термін: 1 день
звертайтесь
________________________________________________________
Бюджет: 300 PLN Термін: 3 дні
доброго дня. є досвід з парсерами олх та подібних сайтів. можу оптимізувати завантаження самої сторінки, тобто завантажувати тільки потрібні поля, або ж при можливості через внутрішні API сайтів.
Бюджет: 5000 PLN Термін: 5 днів
Вітаю! Маю значний досвід в оптимізації парсерів для масштабних проєктів. Працював з OLX та Otodom, розумію специфіку їхнього захисту та лімітів.
📌 Що я пропоную:
• Аналіз поточного коду та виявлення “вузьких місць” у споживанні трафіку.
• Впровадження ефективних стратегій використання проксі та ротації User-Agents.
• Оптимізація запитів для мінімізації передачі зайвих даних.
• Налаштування асинхронного парсингу для підвищення швидкості.
• Інтеграція з Telegram-ботом з мінімальною затримкою.
Гарантую якісну оптимізацію, яка знизить ваші витрати на інфраструктуру та проксі.
Бюджет: 350 PLN Термін: 5 днів
працював з парсингом відодом і олх. пишіть, все розповім. у вас спочатку закладена невірна архітектура
Бюджет: 6000 PLN Термін: 5 днів
Привіт,
Я можу допомогти вам проаналізувати, перепроектувати та значно зменшити витрати на трафік і проксі для збору даних з OLX.pl та Otodom.pl для вашої служби моніторингу Telegram, зберігаючи при цьому стабільність і стійкість до блокувань. У мене є практичний досвід роботи з високочастотним збором даних, оптимізацією трафіку та ухиленням від ботів, особливо для ринків і оголошень. Ваша поточна архітектура, що складається з VPS + Docker, Supabase, об'єднаних пошуків і без завантаження зображень, є надійною, тому основним викликом є стратегія отримання даних та ефективність витрат.
Я б почав з реверс-аналізу того, як безкоштовні боти OLX/недвижимість працюють довгостроково без видимої монетизації. На практиці це зазвичай передбачає уникнення повних завантажень сторінок, використання легких кінцевих точок або внутрішніх API, агресивне кешування, перевірки на основі різниці замість перезавантаження всіх сторінок пошуку, умовне отримання сторінок деталей лише за необхідності, відбитки запитів, які імітують реальних користувачів, і розумне планування замість фіксованих інтервалів.
Далі я зосереджуся на зменшенні трафіку за цикл, а не лише на зменшенні використання проксі. Це включає зменшення розміру корисного навантаження за запитом, усунення непотрібного HTML/JS контенту, виявлення нових оголошень без завантаження повних сторінок результатів і мінімізацію отримання сторінок деталей шляхом витягування більшої кількості даних безпосередньо з оголошень.
Нарешті, я можу допомогти оцінити альтернативні шляхи доступу до даних, такі як приховані або внутрішні кінцеві точки, які використовуються фронтендами OLX/Otodom, стратегії проксі з низькою вартістю або гібридні стратегії, а також кешування в поєднанні з вибірковим отриманням.
Результатом буде чітке пояснення того, як безкоштовні боти працюють протягом місяців, конкретний план значного зменшення місячного трафіку, практичні рекомендації для підтримки стабільності бота в масштабах кількох міст і дієві зміни для вашої існуючої налаштування Docker/Supabase. Я не обіцяю "чарівного безмежного трафіку", але можу допомогти вам наблизитися до цього без блокувань, роблячи модель підписки економічно життєздатною.
Радий обговорити деталі та почати з аудиту вашої поточної логіки збору даних.
З найкращими побажаннями,
Тобіас
Бюджет: 200 PLN Термін: 1 день
Вітаю!
Розробляю ботів для телеграму на NodeJS. Готовий взятися. Пишіть, обговоримо.
Бюджет: 1000 PLN Термін: 3 дні
Доброго дня!
Професійно розробляю Telegram-ботів та скрапери на Python. Маю досвід з API, проксі, Docker/Supabase. Готовий проаналізувати роботу "безкоштовних" ботів та оптимізувати скрапінг OLX/Otodom для мінімізації трафіку.
Напишіть мені в лс, уточнимо деталі.
Нам необхідна актуальна та «жива» база даних для відділу продажів. Нас цікавлять: Приватні косметологи (приватна практика / ФОП); Салони краси з послугами косметолога; Клініки естетичної медицини; Пластичні хірурги (клініки та персональні кабінети); Приватні медичні центри. Географія: Україна (усі діючі заклади). Критично важливі вимоги до даних: Обов'язково: Контактний номер телефону (актуальний, мобільний або робочий рецепції) та ПІБ (керівника, власника, провідного косметолога або особи, яка приймає рішення). Бажано (додатково): Назва закладу, місто, посилання на сайт або Instagram-профіль. Формат вивантаження: Файл Excel (.xlsx).Перед затвердженням виконавця попрошу надіслати тестові 5–10 рядків для перевірки якості збору.
Збір посилань на джерела з оголошеннями про оренду житла Потрібно зібрати базу посилань на групи, канали, форуми та майданчики, де публікуються оголошення про оренду житла у великих містах Європи та США. Мета: знайти джерела, де регулярно з'являються оголошення про короткострокову, середньострокову та довгострокову оренду, суборенду, кімнати, студії, квартири та lease takeover. Міста: Почати з: Париж, Женева, Цюрих, Берлін, Амстердам, Барселона, Мадрид, Мілан, Лондон, Нью-Йорк, Лос-Анджелес, Сан-Франциско, Бостон, Чикаго, Майамі. Можна додавати інші великі міста, якщо є хороші джерела. Які джерела шукати: Групи/сторінки Facebook Публічні канали Telegram Спільноти Reddit / посилання для пошуку Посилання Craigslist, особливо для міст США Місцеві форуми та сайти оголошень Дошки оголошень університетів/студентів Спільноти експатів Сторінки Instagram агентств, колівінгів, студентського житла, орендних спільнот Посилання для пошуку X/Twitter Інші публічні сторінки, де люди публікують пропозиції оренди Що потрібно внести в таблицю: Місто Країна Платформа: Facebook / Telegram / Reddit / Craigslist / Форум / Сайт / Instagram / Інше Назва джерела URL Тип оренди: кімната / квартира / суборенда / короткострокова / довгострокова / студентське житло / житло для експатів Мова Чи є це публічним? Так/Ні Оцінена активність: висока / середня / низька Примітки Важливо: Не збирати особисті дані людей. Не копіювати самі оголошення. Потрібні тільки публічні посилання на джерела. Перевіряти, що посилання відкривається. Не додавати дублікатів. Пріоритет — активні джерела, де є свіжі пости за останні 30 днів. Очікуваний результат: Google Sheet / Excel-файл мінімум з 300–500 релевантними посиланнями. Для кожного міста бажано знайти мінімум 20–40 хороших джерел.
Магазин на OcStore 2.3. встановлено модуль "Автоматична обробка прайс-листів. v.9.5". Все налаштовано автором модуля, але зараз є моменти по налаштуванням, які не можу розібрати та допетрати логіку роботи модуля. Наприклад проблема з двома мовами в картці товару, тягне постійно, то одну, то іншу у всі вкладки. Що потрібно: 1) допомогти налаштувати як треба; 2) пояснити покроково що і як налаштовувати, щоб міг самостійно додавати прайси і налаштовувати крон до них.
Технічне завдання Проєкт Налаштування наповнення та синхронізації двох магазинів Prom.ua з постачальниками автозапчастин. Завдання Необхідно реалізувати завантаження та оновлення товарів від постачальників автозапчастин для двох інтернет-магазинів на Prom.ua. ⸻ 1. Підключення постачальників Необхідно підключити постачальників через: API постачальника; XML, CSV, XLS прайс-листи; або інший доступний спосіб отримання товарів із сайту постачальника. Важливо забезпечити повну синхронізацію товарів між постачальником та магазинами Prom.ua. ⸻ 2. Фільтрація та відбір товарів Необхідно реалізувати можливість відбору товарів під час імпорту за такими параметрами: марка автомобіля; категорія запчастин; підкатегорія запчастин; інші доступні характеристики. Приклад: Для кожного магазину повинна бути можливість окремо визначати, які категорії товарів та які марки автомобілів необхідно завантажувати. Додаткові вимоги до відбору товарів Необхідно реалізувати можливість відбору товарів під час імпорту не лише за марками автомобілів та категоріями запчастин, а також за статусом наявності товару. Повинна бути можливість налаштувати такі сценарії: імпортувати тільки товари, які є в наявності у постачальника; не імпортувати товари зі статусом “немає в наявності”; відключати або видаляти товари з Prom.ua після зникнення їх із наявності у постачальника; Під час налаштування прайсингу повинна бути можливість комбінувати фільтри: за маркою автомобіля; за категорією запчастин; за підкатегорією; за наявністю товару. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Також необхідно реалізувати механізм запобігання дублюванню товарів від різних постачальників. Якщо один і той самий товар присутній у кількох постачальників, у каталог повинен імпортуватися лише один запис товару. Критерії вибору товару при виявленні дублікатів: пріоритет надається товару, який є в наявності у постачальника; якщо товар є в наявності у кількох постачальників, пріоритет надається товару з найнижчою ціною; якщо найдешевший товар відсутній у наявності, система повинна обрати найдешевший товар серед тих, що є в наявності; товари-дублікати від інших постачальників не повинні створювати окремі позиції в каталозі. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Якщо одна й та сама запчастина доступна у кількох постачальників, до каталогу імпортується лише одна позиція — від постачальника з найнижчою ціною серед тих, у кого товар є в наявності. ⸻ 3. Імпорт карток товарів Під час імпорту повинні автоматично завантажуватися: назва товару; артикул; фотографії; опис товару; ціна; характеристики товару; виробник; інші доступні параметри. ⸻ 4. оновлення Необхідно налаштувати автоматичне: оновлення цін при зміні від постачальника ⸻ 5. Видалення відсутніх товарів Товари, яких більше немає в наявності у постачальника, повинні: відключатися; або видалятися з Prom.ua (за погодженням). ⸻ 6. Наповнення магазинів Необхідно: створити структуру категорій; створити підкатегорії; правильно розподілити товари по категоріях; перевірити коректність імпорту товарів. ⸻ 7. Результат роботи Після завершення робіт повинно бути: підключено постачальників; налаштовано імпорт товарів; налаштовано оновлення цін; налаштовано додавання нових товарів; налаштовано відключення або видалення відсутніх товарів; магазини Prom.ua повністю наповнені та готові до роботи.
Потрібно створити Telegram-бота для автоматичного пошуку та моніторингу автомобілів "BUY IT NOW" на аукціонах США (Copart, IAAI) Бот повинен працювати в автоматичному режимі та надсилати повідомлення про нові автомобілі, які відповідають заданим фільтрам.Основний функціоналНалаштування фільтрів: 1. Марка автомобіля; 2. Модель; 3. Рік випуску (від/до); 4. Тип палива; 5. Об'єм двигуна; 6. Пробіг; 7. Діапазон ціни; Функції бота: 1. Автоматичний моніторинг нових лотів; 2. Перевірка оновлень кожних 1-2 хвилини; 3. Захист від повторних сповіщень (антидубль); 4. Можливість додавати та видаляти фільтри через меню бота; 5. Збереження налаштувань вже існуючого пошуку автомобілів. Формат повідомлення: 1. Фото автомобіля (4-фото); 2. Назва та номер лота; 3. Рік випуску; 4. Пробіг; 5. Тип двигуна та об'єм; 6. Ціна buy it now; 7. Посилання на лот.