Скрипт парсинга для Olx.ua
1. Мета
Создать скрипт для парсинга объявлений с OLX и передачи их на наш сайт (Symfony). Скрипт желательно реализовать на Python с учетом широкой библиотечной поддержки для парсинга, при этом взаимодействие с базой данных Symfony будет осуществляться непосредственно.
2. Функциональные требования
2.1. Настройка URL для парсинга
Возможность добавления отдельных параллельных URL для парсинга (например:
https://www.olx.ua/uk/nedvizhimost/if/
https://www.olx.ua/uk/nedvizhimost/zemlya/if/).
2.2. Парсинг объявлений
Извлечение следующих видимых полей:
Главное фото (загрузка и сохранение изображения)
Категория
Заголовок
Цена
Описание
Теги (из описания)
Телефон (обязательно!; объявления без телефона – пропуск)
Город или населенный пункт
Извлечение следующих скрытых полей:
Ссылка на объявление
Результат записываем в базу данных MySQL
Ваша цена
-
Добрый день. У меня есть готовый парсер OLX, реализованный на python Selenium. Скорость потока - примерно 30 секунд на объявление, однако есть поддержка многопоточности. Цена за сам парсер - 5000 гривен, однако эта сумма не включает интеграцию в вашу систему. Буду рад сотрудничеству
-
3700 17 0 Привет! 😊
Готов создать для вас скрипт для парсинга объявлений с OLX с передачей данных непосредственно в базу данных 🚀
Технологический стек, который я предлагаю:
• Python (BeautifulSoup, Requests) – для парсинга данных
• Selenium (по необходимости) – для работы с динамическим контентом
• Pandas / openpyxl – для работы с Excel (если понадобится)
… • MySQL – для хранения данных
• Asyncio – для параллельного выполнения задач
• Прокси – для обхода блокировок, если будет нужно
Обращайтесь для детального обсуждения всех нюансов проекта в личных сообщениях!
С уважением,
Андрей!
-
1531 9 0 👋 Доброго дня! Готов реализовать скрипт для парсинга объявлений с OLX и передачи их на Ваш сайт (Symfony).
✅ Технологический стек:
Python (Requests, Aiohttp, BeautifulSoup) — для быстрого и эффективного парсинга без использования Selenium. Это позволит получать данные максимально быстро и без перегрузки системы.
Асинхронность (Asyncio) и многопоточность — для одновременного парсинга многих URL, что значительно ускорит работу.
Отлов ошибок и повторные запросы — для обеспечения стабильной работы скрипта даже при частичных сбоях.
…
MySQL — непосредственное сохранение данных в вашу БД Symfony.
Сохранение фото — возможно как локально, так и в облачных хранилищах. В БД будут храниться только ссылки на изображения.
📌 Мой опыт:
Профессионально занимаюсь парсингом более 2 лет.
Создавал высокопроизводительные парсеры для сбора больших объемов данных с различных платформ.
Разрабатывал API и проекты с непосредственной записью данных в MySQL, оптимизируя работу с базами для быстрого сохранения и доступа к информации.
Имею навыки построения архитектуры парсеров, которые выдерживают значительные нагрузки и стабильно работают даже с динамическими сайтами.
💪 Гарантирую быстрое выполнение заказа и техническую поддержку. Буду рад обсудить все детали в личных сообщениях. Жду вашего ответа!
-
823 3 1 Добрый вечер.
Я могу качественно реализовать этот проект, так как у меня большой опыт в создании Telegram-ботов, автоматизации задач и парсинге вебресурсов.
У меня есть опыт разработки Telegram-ботов, которые работают с вебпарсингом. Я уже реализовывал парсинг сложных сайтов с защитой, используя Selenium и Scrapy, а также сторонние API.
Жду в личных сообщениях для обсуждения деталей заказа.
-
3926 15 0 Добрый день.
Большой опыт в написании различных парсеров.
Самая сложная задача в моем опыте - парсинг базы данных доменных имен СНГ (отзыв в профиле https://freelancehunt.com/project/parser-na-node-js/634091.html)
-
462 1 0 Добрый день. Ваша задача интересная и понятная. Готов выполнить в короткие сроки.
-
1660 100 5 3 Добрый день. Сделаю такой парсер. Пишите, Буду рад сотрудничать!
-
3411 32 0 Добрый день.
Напишите в личные, уже есть определенные наработки по парсингу OLX.
Актуальные фриланс-проекты в категории Парсинг данных
База сайтов на woocommerceНеобходимо собрать базу украинских сайтов интернет-магазинов на woocommerce с контактами, которые указаны на сайтах. Только работающие сайты (индикатор: обновление каталога/контента, рабочий домен) Формат таблицы - адрес сайта, номер телефона, e-mail. Парсинг данных ∙ 2 дня 4 часа назад ∙ 21 ставка |
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 3 дня 18 часов назад ∙ 17 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 3 дня 22 часа назад ∙ 35 ставок |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 4 дня 1 час назад ∙ 40 ставок |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 4 дня 6 часов назад ∙ 25 ставок |