Спарсить все объявления и залить на сайт
4000 UAHПриветствую. Имеется сайт доска объявлений в Турции - https://www.sahibinden.com
Нужно спарсить оттуда все объявления и затем залить на сайт на CMS Wordpress. ( используется тема ClassiAds в связке с плагином доски объявлений DirectoryPress)
В идеале предложить 2 варианта: разовый парсинг и заливка и сделать так, что бы был парсер и раз в сутки прогружал все объявления.
Также интересует затем сделать еще 2 парсинга из стран:
Украина - OLX
Испания - Wallapop
Предпологается не парсить все объявления, а с каждой категории и подкатегорий по 60-70 объяв последних.
Отзыв заказчика о сотрудничестве с Василем Стьожкой
Спарсить все объявления и залить на сайтРабота выполнена качественно. Профессионал своего дела. Советую и рекомендую. Будем обращаться далее
Отзыв фрилансера о сотрудничестве с Вадимом Третьяком
Спарсить все объявления и залить на сайтХороший заказчик, рекомендую к сотрудничеству
-
7 дней5000 UAH
7 дней5000 UAH
Вы хотите не просто «снять» объявление, а построить стабильный поток данных без ручной рутины — это можно сделать аккуратно. Я бы предложил 2 сценария: разовый парсинг с подготовкой структуры для WordPress/ClassiAds/DirectoryPress и отдельно автообновление раз в день. Важно сразу учесть антибот-защиту, дубликаты, маппинг полей и корректный импорт фото. Работал с парсингом e-commerce и каталогов, так что могу также подготовить и следующие источники по OLX и Wallapop.
Похожий выполненный проект: Парсинг та фільтрація сторінок, що продають оригінальну парфумерію по Україні
-
1 день1000 UAH
1 день1000 UAH
Приветствую
Я специалист по парсингу данных, хочу уточнить по поводу категории товаров (услуг) на сайте обьявлений и можем сразу перейти к реализации автоматического наполнения вашей доски объявлений.
💬 обращайтесь
-
7 дней4000 UAH
7 дней4000 UAH
Добрый день. На сайте присутствует хорошая защита, для обеспечения стабильной работы на протяжении длительного времени понадобятся хорошие прокси, а также это делает процесс разработки дороже. У меня также есть готовый парсер OLX, так что можем обсудить сразу несколько проектов.
-
1 день700 UAH
411 6 1 1 день700 UAH
Привет! Я готов выполнить парсинг всех объявлений с выбранного ресурса и загрузить их на ваш сайт. Опишите, пожалуйста, детали: какие поля нужны, формат выгрузки, сроки. Я использую Python и Selenium/BeautifulSoup, гарантируем чистый код и тесты. Готов обсудить детали и предложить оптимальный план работы. Жду вашего ответа.
-
7 дней7000 UAH
576 1 0 7 дней7000 UAH
Добрый день, заинтересовала ваша задача.
Тут важно не просто “спарсить и залить”, а правильно выстроить логику импорта, чтобы сайт не лег от объёма и данные корректно обновлялись.
Могу предложить 2 варианта:
— разовый парсинг + чистая загрузка в WordPress (с нормальной структурой под ClassiAds / DirectoryPress)
— автоматический парсер с обновлением (cron, фильтрация дублей, обновление объявлений)
Также сразу учту:
… — структуру полей (цены, фото, категории)
— оптимизацию загрузки (батчи, очереди)
— защиту от блокировок при парсинге
Делал подобные задачи, понимаю нюансы с сайтами типа OLX / Wallapop (там часто ограничения и антибот-защита).
Могу сначала предложить архитектуру решения, чтобы не пришлось всё переделывать после первого запуска.
Готов обсудить детали и объём.
-
3 дня2000 UAH
726 9 1 3 дня2000 UAH
Здравствуйте! Ваш проект привлек мое внимание. Готов начать работу и обеспечить высокое качество исполнения.
-
Победившая ставка5 дней4000 UAH
2528 29 0 Победившая ставка5 дней4000 UAH
Здравствуйте. Могу спарсить последние 50-10 обьявлений со всех трёх сайтов по городам, имею опыт обхода блокировок от ботов а так же бана по айпи, могу спарсить на одном из языков, это: Python, PHP, Nodejs. Знаю какой лучше всего подойдет, так как имею опыт парсинга на сайтах где стоит защита от ботов. Пишите
-
5 дней12 000 UAH
4873 107 0 5 дней12 000 UAH
Здравствуйте, Вадим!
Для выполнения задачи парсинга и загрузки объявлений на сайт предлагаю разработать скрипт на основе PHP, который будет использовать прокси-сервера для обхода защиты сайта Sahibinden. Это обеспечит стабильную работу скрипта и позволит загружать объявления на WordPress без проблем.
Точная цена и сроки — после уточнения деталей.
Профиль:
Freelancehunt
Отзывы: Freelancehunt
-
4 дня8000 UAH
841 20 3 4 дня8000 UAH
Вадим добрый день!
Такую работу надо выполнять на Python. У него самая богатая экосистема библиотек для обхода защит и готовые решения для интеграции с WordPress.
Однако важно понимать: Sahibinden, OLX и Wallapop — это сайты с экстремально высоким уровнем защиты (Cloudflare, Akamai, кастомные антифрод-системы). Обычный скрипт на BeautifulSoup там забанят через 2 секунды.
Профессиональное решение данного вопроса где то до 4-ох дней работы по 8 часов каждый. По деньгам это до 8000 грн.
Если интересно пишите в личку, буду рад пообщаться, поторговаться, обсудить фронт работы.
-
7 дней18 000 UAH
7 дней18 000 UAH
Добрый день.
Ознакомился с проектом и уточнениями в обсуждении.
В вашем случае вижу задачу как управляемое начальное наполнение доски объявлений по выбранным городам и категориям, а не как попытку полностью воспроизвести все источники.
Реализацию предлагаю на Python: отдельный модуль сбора данных, нормализация объявлений и корректный импорт в WordPress с учетом структуры ClassiAds / DirectoryPress. Обязательно предусматривается защита от дублей и возможность повторного запуска для дальнейшего наполнения.
С учетом того, что источник не является самым простым в плане стабильного сбора, решение должно быть не в формате одноразового скрипта, а как аккуратно собранный рабочий модуль под ваш текущий MVP.
Что входит в первый этап:
- парсинг по согласованным городам и категориям;
- импорт последних объявлений в заданном лимите;
… - загрузка в WordPress без дублей;
- основа для дальнейшего расширения.
Стоимость: 18 000 грн
Срок: 7 дней
При необходимости автоматическое обновление, а также подключение OLX / Wallapop можно вынести на следующий этап.
В портфолио есть релевантный кейс по парсингу объявлений с фильтрацией, нормализацией и подготовкой данных к дальнейшей обработке.
-
3 дня3000 UAH
3 дня3000 UAH
Добрый день, вижу есть защита но её можно спокойно обойти, сделать или через хорошие прокси или через playwright, тоже самое можно будет сделать на ОЛХ и тд.тп
-
10 дней15 000 UAH
136 10 дней15 000 UAH
Это «задача с звездочкой», поскольку Sahibinden — один из самых защищенных ресурсов в мире (использует Akamai/DataDome). Обычным парсером его не взять. Здесь нужен опыт в обходе антифрод-систем и понимании того, как работает база данных WordPress/DirectoryPress.
Вот вариант отклика, который выделит тебя как технически подкованного специалиста, который знает реальные сложности, а не просто обещает «сделать за вечер».
Вариант отклика (Технически-экспертный)
Тема: Парсинг Sahibinden, OLX, Wallapop и автоматический импорт в ClassiAds/DirectoryPress
Здравствуйте!
… Ваша задача понятна, но она имеет критический нюанс: Sahibinden имеет одну из самых сильных анти-бот защит (Akamai). Я знаю, как работать с такими системами, используя браузерную автоматизацию и резидентные прокси, чтобы ваши парсеры не блокировались через 5 минут работы.
Мое предложение по реализации:
Разработка парсера (Python/Playwright): Создам гибкий скрипт, который будет собирать последние 60–70 объявлений из каждой категории. Это позволит поддерживать актуальность базы без перегрузки вашего сервера.
Интеграция с WordPress (DirectoryPress): Настрою маппинг полей (заголовки, цены, атрибуты вилл/авто, геопозиция, фото). Данные будут корректно заходить в структуру плагина DirectoryPress, сохраняя все связи категорий.
Два сценария работы:
Разовый импорт: Для быстрого наполнения базы «здесь и сейчас».
Автоматизация (Daily Sync): Настрою Cron-задачу на сервере, которая раз в сутки будет проверять новые объявления и добавлять их на сайт.
Масштабирование: Архитектуру парсера сделаю модульной, чтобы позже легко добавить модули для OLX (Украина) и Wallapop (Испания) без переписывания всей системы.
Результат: Вы получаете «живую» доску объявлений, которая наполняется свежим контентом без вашего участия.
У меня два технических вопроса:
На каком хостинге размещен ваш WordPress? (Для Sahibinden важно иметь возможность запускать headless-браузеры).
Нужно ли загружать фото на ваш сервер, или оставить ссылки на оригиналы (для экономии места)?
Готов обсудить детали и продемонстрировать подход к обходу защиты.
-
1 день4000 UAH
172 1 1 1 день4000 UAH
Добрый день. Готов выполнить данный проект есть большой опыт разработки различных приложений.
-
5 дней10 000 UAH
184 5 дней10 000 UAH
Добрый день! Мы с коллегой профессионально занимаемся технической автоматизацией e-commerce и разработкой парсеров для зарубежных площадок более 4 лет, поэтому мы поможем вашей доске объявлений на WordPress наполняться актуальным контентом из Турции, Украины и Испании в автоматическом режиме, мы реализуем бэкенд-логику для обработки 60–70 листингов из каждого подразделения, настроим автоматическое создание терминов таксономии и обеспечим стабильную работу парсера без блокировок со стороны Wallapop или OLX, наш опыт 4 года подтвержден проектами drkukharevich.rivne.ua, crave-agency.com.ua, jk-solution.com.ua, где мы уже успешно внедряли подобные решения для миграции данных. Мы обеспечим техническую безупречность выполнения, настроим ежедневный запуск скриптов через серверный Cron и передадим вам полностью автономную систему, которая не требует ручного вмешательства, работаем надежно и с акцентом на производительность.
-
10 дней15 000 UAH
1182 13 0 3 10 дней15 000 UAH
Здравствуйте! Мы с напарником (дизайнер + full-stack) более 4 лет специализируемся на разработке систем автоматизации и парсинга сложных маркетплейсов, поэтому мы поможем вам наладить стабильный импорт объявлений с Sahibinden, OLX и Wallapop в вашу тему ClassiAds. Мы разработаем архитектуру на базе Python (Scrapy/Selenium), которая обойдет антифрод-системы и будет извлекать по 60–70 последних объявлений из каждой категории, автоматически конвертируя данные в формат DirectoryPress. Наш опыт в разработке 4 года, посмотрите на наши работы с точки зрения технической логики и скорости обработки больших массивов данных: hyperfi.tech, espressolab.com.ua, hudi.com.ua. Мы профессионально реализуем два варианта: разовый импорт через WP All Import и автономный парсер на Cron, который ежедневно обновляет базу объявлений, уделяя особое внимание загрузке изображений на ваш сервер и корректному маппингу кастомных полей.
-
1 день1000 UAH
2022 4 0 1 день1000 UAH
Здравствуйте!
Я ознакомился с вашим заданием, у меня есть опыт работы с подобными проектами и я хорошо понимаю поставленные задачи. Готов реализовать проект в короткие сроки.
Буду рад обсудить детали в личных сообщениях.
-
5 дней27 000 UAH
13013 67 0 5 дней27 000 UAH
Здравствуйте! Выполню ваше задание быстро и качественно.
Мое портфолио: https://freelancehunt.com/ua/freelancer/romas6ka.html#portfolio
Пишите, начну сегодня работать. Буду рад сотрудничеству с Вами!
-
3 дня3000 UAH
15541 214 1 3 дня3000 UAH
Добрый день!
Есть готовая реализация для Wordpress
Работаю со многими клиентами.
ЧТо касается https://www.sahibinden.com - он под паролем, поэтому важно сначала проерить насколько легко он парсится.
Буду рада обсудит сотрудничество.
-
1 день1000 UAH
5049 48 0 1 1 день1000 UAH
Привет, Вадим.
Вижу задачу так: PHP-скрипт парсит объявления с Sahibinden, загружает их на WordPress, с возможностью автоматического ежедневного обновления.
Ориентировочный план реализации:
1. Парсинг Sahibinden: Напишу PHP-скрипт, который собирает объявления с Sahibinden и сохраняет их в формате, совместимом с WordPress.
2. Интеграция с WordPress: Сделаю WP-плагин, который импортирует объявления в вашу тему ClassiAds, учитывая структуру DirectoryPress.
3. Автоматизация: Настрою cron-задачу на сервере для ежедневного парсинга и обновления объявлений.
4. Парсинг OLX и Wallapop: Аналогично реализую парсинг для OLX и Wallapop с соответствующей интеграцией в WordPress.
…
Подводные камни — возможные изменения в структурах сайтов-источников, которые могут потребовать коррекцию скриптов. Также нужно парсить с турецкого IP, так как требуется логин на сайте при входе из других стран (создавать аккаунты).
Стек: PHP, WordPress, MySQL, WP-крон.
Обращайтесь, обсудим детали и начнем :)
-
2 дня3000 UAH
9972 117 0 2 дня3000 UAH
Здравствуйте.
Разрабатываю парсеры на NodeJS. Готов взяться. Пишите, обсудим.
-
Здравствуйте. Если речь идет о миллионах обьявлений связка ClassiAds + DirectoryPress. Вот почему: если взять только https://www.sahibinden.com/ там миллион обьявлений, с учетом вашей конфигурации это wp_posts 1 000 000
wp_postmeta 1 000 000 × 15 (среднее) = 15 000 000
wp_term_relationships 1 000 000 × 3 = 3 000 000
Итого: 19 000 000 записей. Вордпресс ляжет. Если нужно могу предложить решение включая парсер
-
Вадим Третьяк SumWeb Studio
Предложите свое решение.
Но там не будет такого кол-ва объявлений.
Или можем ограничиться к примеру каждой категории взять последние по 50-100 объяв -
Ну если по 50-100 то да, Вордпресс потянет
-
Вадим Третьяк SumWeb Studio
Ну этого будет достаточно. Задача такая что это по сути наполнение первостепенное.
Так как чтобы запустить доску нужно чтобы уже были видны объявления для людей.А дальше мы уже рекламу будем запускать и привлекать клиентов: ПО городам если все будет ок и дадите предложение( я дам города, их не будет много)
-
Не дописал: связка ClassiAds + DirectoryPress не подходит.
-
Вадим Третьяк SumWeb Studio
И в чем же оно не подхоит?
Нет там такого кол-ва объъявлений. Учитывая, что будет выбор по нескольким городам.
-
Я смотрел там 1,3 ляма, ну если по нескольким городам только то будет не так много но по прежнему нагрузка будет большая
-
Актуальные фриланс-проекты в категории Веб-программирование
Shopify-разработчик для сайта доставки суши (Польша)Ищем опытного разработчика Shopify для реализации сайта доставки еды (суши) для клиента из г. Катовице, Польша. Что нужно сделать: Настроить сайт на готовом шаблоне Shopify (шаблон согласован) Меню с фотографиями блюд и описаниями Онлайн-оформление заказов Подключение способов… Веб-программирование ∙ 39 минут назад ∙ 11 ставок |
Вебфлоу разработчик для заполнения страниц портфолио на сайтеСайт разработан кастомно на Webflow для строительной компании, нужно быстро заполнить страницы проектов по одному шаблону (заменить картинки и тексты) Для 2 языков Количество - 6 штук Готовы начинать как можно скорее, спасибо! HTML и CSS верстка, Веб-программирование ∙ 16 часов 34 минуты назад ∙ 32 ставки |
Администратор-настройщик LearnWorldsЗадача Настроить готовую платформу LearnWorlds под элитный онлайн-курс. Не разрабатывать архитектуру — реализовать уже готовую структуру руками в admin panel. ———————— Что нужно сделать: Брендинг ⦁ Подключить свой домен ⦁ Загрузить логотип, настроить фирменные цвета ⦁… CMS, Веб-программирование ∙ 19 часов 39 минут назад ∙ 9 ставок |
Верстка та посадка на WordPress сайту будівельної компанії (Premium-сегмент) з акцентом на SEOОписание проекта: Ищем опытного WordPress-разработчика для верстки и посадки готового дизайн-макета из Figma на CMS WordPress. Важный контекст проекта: Это не разработка сайта с нуля. Компания имеет действующий сайт, мы обновляем структуру и дизайн. Нам необходимо реализовать… HTML и CSS верстка, Веб-программирование ∙ 21 час 16 минут назад ∙ 55 ставок |
~5 микросервисов на FastAPI + правки и рефакторинг
15 682 UAH
Есть проект состоящий примерно из ~11 микросервисов на FastAPI с интеграциями, который более, чем на половину готов. Задача доделать остальные ~5 микросервисов (более конкретно - subscription/billing и интеграция с Revenuecat, abuse protection для биллинга, Notifications,… Python, Веб-программирование ∙ 23 часа 27 минут назад ∙ 37 ставок |
Львов