Разработка скрипта-парсера для сайта
Если кратко:
Есть готовая бд mysql.
Нужно написать парсер который будет раз в день (ночью) обращаться к сайту-донару по конкретному урл, забирать оттуда данные и складывать их в mysql.
Чуть подробнее:
У нас есть бд и примитивный веб интерфейс к ней.
В этом интерфейсе сначала создается задача. Задача состоит только из названия и целевого урл.
Пример целевого урл: https://suchen.mobile.de/fahrzeuge/search.html?cn=DE&dt=ALL_WHEEL&fr=2019%3A&isSearchRequest=true&ms=7700%3B8%3B%3B&od=up&ref=srp&refId=e280ae1d-f6ad-85ad-050d-5743bdf92864&s=Car&sb=p&vc=Car
А внутри задачи уже находятся сущности объявления.
Задача парсера - раз в сутки просканировать целевую страницу и добавить в бд информацию по всем машинам на этой странице.
Так вот парсер должен взять по машинам эту информацию:
- айди
- название (строка)
- урл фотки
- цена
Если раньше этой машины не было в нашей бд то она туда добавляется.
Если была то обновляется цена. Но цена хранится в связанной таблице, потому что нам нужно хранить не цену в моменте а динамику цен.
Задача проекта - формирование таблицы где в строках - машины, в столбцах даты, а на пересечении или цена или прочерк.
Примерная визуализация того что мы должны получить в нашем интерфейсе на выходе находится во вложении.
Но сейчас мы в поиске человека кто напишет парсер который будет наполнять бд этими данными. Вывод в веб интерфейс мы сделаем самостоятельно. Прошу оставить отклики с указанием стоимости и срока. Также прошу указать какие технологии вы будете использовать для выполнение задачи.
Работа через сейф, сроки не ограничены. Приоритет в выборе кандидатов - стоимость и опытность.
Приложения 1
-
2 дня3000 UAH
1444 9 0 2 дня3000 UAH
💬 Добрый день! Готов выполнить задачу по разработке парсера, который ежедневно собирает данные с сайта-доноров и обновляет информацию в базе данных MySQL.
✅ Технологический стек:
Python (Requests, Aiohttp, BeautifulSoup) — быстрый и эффективный парсинг без Selenium, что обеспечивает высокую скорость работы.
Asyncio и многопоточность — для одновременной обработки нескольких URL, что значительно ускоряет сбор данных (опционально).
MySQL (pymysql / SQLAlchemy) — для сохранения данных и ведения истории изменения цен.
… Логирование и обработка ошибок — скрипт будет устойчив к сбоям и автоматически возобновлять прерванные запросы.
📌 Уточнения:
Нужно ли парсеру переходить по всем страницам из фильтра (пагинация)?
Планируется ли работа только с одним сайтом-донором или будут добавляться другие ресурсы?
🎯 Мой опыт:
2+ года разработки высокопроизводительных парсеров, которые устойчиво работают даже с динамическими сайтами.
Разработка API и интеграций с MySQL, включая отслеживание изменений данных и сбор историй.
Постоянная поддержка и улучшение разработанных решений.
💪 Гарантирую:
Качественное выполнение задачи.
Поддержку и доработку по запросу.
Доступную стоимость и быстрое выполнение.
Буду рад обсудить детали в личных сообщениях и предложить оптимальное решение для вашего проекта. Жду вашего ответа!
-
1 день700 UAH
411 6 1 1 день700 UAH
Здорово!
Готов разработать скрипт-парсер для
вашего сайта.
Расскажите подробнее о:
* цели парсинга (какую информацию нужно извлечь)
… * структуре сайта (матрице HTML, API)
* объёме данных
* формате вывода полученной информации
Тогда смогу уточнить сроки и стоимость.
-
4 дня3000 UAH
655 6 1 4 дня3000 UAH
Здравствуйте. Готов сделать приложение для сбора данных с заданного сайта по списку ссылок и выгрузки результатов в базу данных mysql.
-
7 дней8000 UAH
95799 1272 1 10 7 дней8000 UAH
Здравствуйте.Есть большой опыт с Node.js/Python.Готов к сотрудничеству
-
3 дня2000 UAH
1673 100 5 3 3 дня2000 UAH
Добрый день. Сделаю такой парсер. Пишите, Буду рад сотрудничать с Вами!
-
10 дней12 000 UAH
1315 7 0 10 дней12 000 UAH
Добрый день.
Готов взять Ваш проект.
Смогу разработать для Вас парсер для добавления объявлений с авто с помощью no-code/low-code инструментов и/или на Node.js (по необходимости).
Пишите в личные, обсудим все детали и нюансы, и найдем для Вас лучшее решение.
-
3 дня2000 UAH
726 9 1 3 дня2000 UAH
Добрый день! Я внимательно изучил ваш проект и готов приступить к его реализации. Давайте обсудим детали для наилучшего выполнения.
Актуальные фриланс-проекты в категории Парсинг данных
Требуется специалист по продвижению в Telegram.
1286 UAH
Задачи: инвайт реальных пользователей по базе юзернеймов в новые чаты и рассылка сообщений по целевой базе. Интересует только качественный трафик и работа с живой аудиторией — исполнителей, использующих ботов, накрутку или некачественные методы, просьба НЕ БЕСПОКОИТЬ. Работа… Парсинг данных, Продвижение в социальных сетях (SMM) ∙ 1 день 4 часа назад ∙ 6 ставок |
Сбор B2B базы данных компаний в Германии
1801 UAH
Цель: Получение списка потенциальных работодателей (клиентов) для B2B рассылки. Регион: Мюнхен (München) + радиус 50 км. Требуемые ниши: Строительные компании (Bauunternehmen) Пищевые предприятия (Lebensmittelhersteller, мясокомбинаты, пекарни) Логистика и складские… Парсинг данных, Продажи и генерация лидов ∙ 1 день 6 часов назад ∙ 26 ставок |
База данных перевозчиковИнтересует сбор базы данных перевозчиков по Украине за 2026 год, включая цистерны, тенты, зерновозы и другие. Желательно разработать таблицу. Поиск и сбор информации, Парсинг данных ∙ 1 день 7 часов назад ∙ 29 ставок |
Консультация по парсингу подписчиков Instagram-аккаунтовЗдравствуйте. Необходимо провести предварительную оценку возможности выполнения следующей задачи. У меня есть список Instagram-аккаунтов. Цель — получить контактные данные (в первую очередь email-адреса) пользователей, которые подписаны на эти аккаунты. Ранее мне встречались… Парсинг данных ∙ 4 дня 23 часа назад ∙ 12 ставок |
Нужен специалист для поиска контактов ЛПР по УкраинеНеобходимо собрать базу (или готовую базу) контактов лиц, принимающих решения (ЛПР), в компаниях Украины. Поиск и сбор информации, Парсинг данных ∙ 5 дней 3 часа назад ∙ 18 ставок |
Одесса