Парсинг цен поставщика
Добрый день.
Нужен парсер для парсинга цен поставщика по заданным артикулам товаров.
Что именно нужно:
На сайте поставщика по конкретному артикулу товара предоставляется информация о складах, на которых этот товар есть в наличии. Склады имеют разное местоположение, разный тип доставки и разную стоимость. Каждый склад имеет свое уникальное название.
По заданным артикулам товаров (их будет около 10000 всего) через поиск на сайте поставщика (возможно по API, чтобы не было бана) находить склад с наименьшей ценой товара и с соответствующими параметрами этого склада (конкретный тип доставки) и за исключением названий нескольких складов (с которыми не работаем).
Эту наименьшую цену накапливать в соответствующий день парсинга в таблице напротив артикула товара, по которому был парсинг соответственно. А общие данные накапливать в таблице Excel, или иметь возможность импортировать из базы данных в таблицу Excel по необходимости и для анализа. Такой парсинг должен происходить каждый день автоматически и в соответствующий заданный час.
На выходе нужно получить таблицу с артикулами товаров, а в колонках будут даты парсинга и соответственно цены товаров напротив каждого артикула.
Новые артикулы должны добавляться, и парсинг цен по ним происходит следующей датой парсинга. Если артикул уже есть в базе – он не добавляется (не дублируется).
Отзыв заказчика о сотрудничестве с Оленою Амбріс
Парсинг цен поставщикаВсе сделано, как нужно. Даже больше, чем нужно. Большое спасибо.
Отзыв фрилансера о сотрудничестве с Павлом Валентиновичем
Парсинг цен поставщикаОтличный заказчик, с которым приятно и легко работать. Всегда на связи, быстро отвечает на вопросы и оперативно решает все рабочие моменты. Согласование проекта и оплата прошли без задержек. Рекомендую и с радостью буду сотрудничать снова.
-
Добрый день. Выполнял похожий проект, готов выполнить и ваш. Нужно обсудить детали для точной оценки заказа.
Похожий выполненный проект: Розробка системи оновлення товарів на пром юа
-
Добрый день.
Могу реализовать такую систему парсинга "под ключ" с автоматическим ежедневным обновлением цен, фильтрацией складов и накоплением истории изменений.
Что будет реализовано:
— парсинг по списку артикулов (10 000+)
— поиск товара через сайт или API (если доступно)
— выбор наименьшей цены только среди разрешенных складов
— фильтрация по типу доставки
… — исключение нежелательных складов
— автоматическое обновление ежедневно по расписанию
— сохранение истории цен по датам
— защита от дублирования артикулов
— экспорт в Excel / CSV
— возможность дальнейшего масштабирования
Технически оптимально:
• Python
• PostgreSQL / SQLite
• API или автоматизация браузера (в зависимости от поставщика)
• cron/scheduler для автоматического запуска
На выходе:
Таблица вида:
Артикул | 11.05 | 12.05 | 13.05 ...
с историей минимальных цен.
Ориентировочная стоимость:
• если есть нормальное API 350–700$
• если сложный антибот / только через браузер 800–1600$+
Сроки:
3–7 дней после доступа к сайту и примерам.
Для точной оценки нужно:
— сайт поставщика
— пример поиска товара
— список нежелательных складов
— логика выбора типа доставки
— нужен ли интерфейс/кабинет или достаточно Excel + БД
Могу начать сразу.
-
433 Здравствуйте, я уже разрабатывал высокопроизводительные парсеры с параллельной обработкой, ротацией прокси и Selenium/Playwright для динамических сайтов.
По вашей задаче:
* сроки и стоимость будут зависеть от сложности сайта и наличия у них открытого API
* для ускорения парсинга стоит записывать в БД. По желанию, могу сделать средство для экспорта из БД в Excel или автоматически это делать и отправлять готовый файл на почту или Telegram.
Пишите, обсудим все детали заказа.
-
3124 87 0 Добрый день. Готова обсудить детали проекта. Есть подобный опыт работы. Обращайтесь.
-
1455 9 0 Здравствуйте! Могу выполнить Ваш проект — у меня многолетний опыт в создании парсеров и фидов. Буду рад сотрудничеству.
Также в будущем при необходимости смогу создать аналитическую панель из собранных товаров.
-
387 1 0 Здравствуйте, Павел Валентинович!
У меня есть опыт разработки парсеров для сложных логистических и торговых систем. Ваша задача требует не просто сбора данных, а создания стабильной архитектуры для мониторинга 10 000+ позиций ежедневно.
Предлагаю следующее техническое решение:
Стек: Python (библиотеки requests/aiohttp для скорости) + база данных SQLite для хранения истории и избежания дубликатов.
Алгоритм выбора: Реализую логику фильтрации складов-исключений и автоматический поиск самой низкой цены среди доступных остатков.
…
База данных: Система будет автоматически проверять артикулы: новые добавляются в базу, существующие — обновляются новыми ценовыми срезами.
Автоматизация: Настрою ежедневный запуск по расписанию (Task Scheduler/Cron). Вы будете получать Excel-таблицу, где даты парсинга автоматически становятся новыми столбцами для удобного сравнительного анализа.
Несколько уточняющих вопросов:
Есть ли у вас список артикулов в файле (Excel/CSV), или их нужно подтягивать из другого источника?
Имеет ли сайт поставщика защиту от частых обращений (Cloudflare и т.д.)? Возможно, потребуется использование прокси для стабильной работы с 10к запросами.
Готова разработать надежное решение, которое будет работать автономно.
-
297 6 0 Доброго дня, напишіть в особисті повідомлення для уточнення сайта поставщика и пару артикулов для тестирования
-
1836 55 0 Добрый день. Готов заняться этим парсером. Могу начать и сегодня. Пишите, спасибо.
-
172 1 1 Добрый день. Готов выполнить данный проект, имею большой опыт разработки приложений.
-
650 2 0 Привет!
Парсеры с ежедневным сбором данных и Excel-отчетами — наша специализация.
По проекту:
Парсинг — проверю, есть ли API у поставщика (быстрее + без бана). Если нет — Playwright для JS-страниц или httpx, если статические. 10 000 артикулов обработаю с задержками, чтобы не словить бан.
Логика фильтрации — по каждому артикулу нахожу все склады, исключаю запрещенные названия, фильтрую по типу доставки, беру минимальную цену.
…
Excel — таблица: строки = артикулы, колонки = даты парсинга, на пересечении — минимальная цена того дня. Новые артикулы добавляются без дубликатов. Есть возможность экспорта из базы в любой момент.
Автозапуск — ежедневный парсинг в заданное время через планировщик (APScheduler или cron на VPS).
-
5545 105 2 предлагаю парсер с открытым кодом на NodeJS.
опыт написания большой. учту все условия
-
265 Добрый день, пишу от имени компании Devoxen. Как раз специализируемся на подобных задачах. Имеем большой опыт в разработке парсеров, автоматизации сбора данных и построении систем мониторинга цен для больших объемов товаров. Сможем реализовать парсер для сбора цен по артикулам с логикой отбора минимальной цены по конкретным параметрам склада, исключением нежелательных складов и автоматическим ежедневным обновлением данных.
Также можем реализовать работу через API или максимально безопасный режим парсинга для минимизации риска блокировок, сохранения истории цен в БД и автоматический экспорт/синхронизацию с Excel. Предусмотрим проверку дублей артикулов, автоматическое добавление новых позиций и накопление исторических данных по датам парсинга для дальнейшего анализа.
Можем сделать без лишних вопросов и затрат времени. Также даем гарантию и по желанию поддержку. Мы сможем взять в работу ваш проект сразу после обсуждения ТЗ.
Предлагаю перейти в личные сообщения для более детального диалога.
-
976 4 0 Добрый день
Меня зовут Дмитрий
Могу реализовать автоматический парсер для сбора цен по артикулам с ежедневным обновлением и накоплением истории цен.
Что будет:
— поиск товаров по артикулам
— выбор самой низкой цены с учетом типа доставки
— исключение нужных складов
— автоматический ежедневный парсинг
— сохранение истории цен по датам
… — Excel-таблица / экспорт для анализа
— защита от дублирования артикулов
Работаю с большими объемами данных и парсингом, поэтому система будет рассчитана на 10000+ артикулов.
По срокам: 5–14 дней
Готов обсудить детали 👍
-
307 4 0 Большой объем данных: Необходимо эффективно обрабатывать более 10 000 артикулов.
Работа с API или HTML: Если у поставщика нет API, парсинг HTML значительно усложняет работу из-за рисков блокировки.
Сложные правила: Алгоритм должен анализировать несколько складов для каждого товара: сравнивать цены, фильтровать по типу доставки и исключать определенные склады по названию.
Инфраструктура: Стоимость включает создание базы данных, настройку ежедневного автоматического запуска (cron) и интеграцию с Excel для отчетов.
-
94294 1269 1 10 Здравствуйте. У меня большой опыт в разработке парсеров. Готов к сотрудничеству.
-
3459 48 2 Здравствуйте! Парсинг цен поставщика со складов - делали похожее для прайс-мониторинга. 10000 артикулов в день это ~7 часов парсинга при 0.4 сек/артикул, поэтому API критично, если есть - через скрапинг будет медленно и рискованно. Фильтрация по типу доставки + исключение складов + поиск минимальной цены - стандартная логика.
Скиньте ссылку на сайт поставщика и пример артикула - проверю, есть ли API, и дам точную оценку.
-
3071 11 0 1 Здравствуйте!
Я могу реализовать такой парсер с автоматическим ежедневным сбором данных по ~10 000 артикулов, включая логику выбора наиболее выгодного склада и фильтрацию складов, с которыми вы не работаете.
Технически это можно сделать как Python-сервис (Scrapy/Playwright или API-интеграция, если она доступна), с базой данных для хранения истории цен и автоматическим экспортом в Excel по необходимости. Парсинг можно запускать по расписанию (cron/серверный планировщик), чтобы процесс выполнялся ежедневно в заданное время без ручного вмешательства.
Логика будет включать: поиск товара по артикулу, получение всех доступных складов, отбор склада с минимальной ценой с учетом типа доставки и исключенных складов, а также сохранение истории изменений по датам в структурированном виде. Новые артикулы будут автоматически добавляться в систему без дублирования и начнут парситься с следующего цикла.
Готов обсудить детали!
-
4675 14 0 Павло, добрый день!
У меня есть опыт разработки парсеров для e-commerce и мониторинга цен с ежедневным автоматическим обновлением данных.
Для точной оценки хотел бы уточнить несколько моментов:
- ссылка на сайт поставщика;
- пример артикула;
- какие типы доставки нужно учитывать;
- список складов, которые нужно исключить.
…
После короткого анализа смогу предложить оптимальный вариант реализации, сроки и точную стоимость.
Возможна реализация как через API (если доступно), так и через парсинг сайта с автоматическим ежедневным обновлением, сохранением истории цен и экспортом в Excel/Google Sheets.
-
3392 84 0 Готов взять на себя. Но важно увидеть, что за сайт. Нужно уточнить детали заказа, пишите! Использую python, uv, github, docker.
-
716 4 0 Я лучше всех выполню этот проект, потому что у меня есть глубокий опыт создания стабильных парсеров для e-commerce с защитой от банов, работой с динамическим контентом и большими объемами данных. Моя архитектура гарантирует точность: уникальность артикулов, корректный выбор склада по цене и типу доставки, исключение нежелательных площадок. Вы получаете не просто скрипт, а надежную систему с логированием, обработкой ошибок, гибкой настройкой расписания и удобным экспортом для анализа. Код будет чистым, документированным и готовым к масштабированию, а поддержка обеспечит стабильную работу месяцами.
План работы:
Анализ сайта поставщика: определение метода доступа (API или HTML-парсинг), изучение структуры ответа, параметров складов, ограничений.
Проектирование архитектуры: выбор стека (Python, requests/Scrapy, SQLite/MySQL), разработка схемы базы данных для артикулов, цен, дат и параметров складов.
Реализация ядра парсера: поиск по артикулу, фильтрация складов, исключение запрещенных названий, выбор минимальной цены с нужным типом доставки.
Система сохранения: логика добавления новых артикулов без дубликатов, накопление истории цен по датам, валидация данных.
Интеграция с Excel: экспорт сводных таблиц через pandas/openpyxl, импорт из базы по запросу, форматирование для анализа.
Автоматизация: настройка планировщика (cron/Celery), запуск в заданное время, ротация прокси, лимиты запросов для избежания блокировок.
… Тестирование и сдача: проверка на 100+ артикулов, отладка обработки ошибок, инструкция по развертыванию и поддержке.
-
1328 35 1 Здравствуйте. Хотелось бы увидеть донора. Обращайтесь, обсудим все детали
-
1251 35 1 3 Приветствую Павел, готов выполнить. Присылайте в личку откуда нужно парсить, обговорим детальней.
-
1490 28 0 Скиньте пожалуйста сайт поставщика для ознакомления, спасибо.................................
-
3411 32 0 Привет! Выполнял уже похожее задание, сайт с авторизацией, разные склады и наличие. Предоставьте ссылку на сайт в личные сообщения для оценки сложности работы.
-
420 2 0 Добрый день! Быстро выполню ваше задание. Предоставьте ссылку на сайт поставщика для анализа и проверки, есть ли API. Пишите в личные сообщения.
-
2632 153 1 2 Здравствуйте.
Большой опыт парсинга различных сайтов и работы с API поставщиков.
Ставка приблизительная - нужно сначала обсудить более детально.
Обращайтесь.
-
320 1 0 Здравствуйте! Задание понятное. Я готов разработать для вас автономный парсер, который будет собирать и структурировать цены, учитывая все ваши логические фильтры (типы доставки, исключения складов, самая низкая цена).
Техническое решение, которое я предлагаю:
Двигатель парсинга (Python + Playwright/Requests): * Если у поставщика есть API — это приоритет (скорость и безопасность).
Если API нет — реализую имитацию действий пользователя с использованием прокси-серверов и ротации User-Agent для защиты от блокировок.
Логика выбора цены: * Скрипт будет автоматически фильтровать склады по вашему "черному списку" и по типам доставки.
… Из оставшихся вариантов будет выбираться минимальная цена.
База данных (SQLite/PostgreSQL): * Хранить 10 000 позиций с ежедневной историей в самом Excel небезопасно (файл станет нечитаемым через месяц).
Я настрою базу данных, где данные будут храниться структурировано, а вы сможете в один клик выгружать нужный отчет в Excel (формат: Артикул | Дата 1 | Дата 2 ...).
Автоматизация (Cron/Task Scheduler): * Система будет работать по расписанию (например, в 03:00 каждую ночь) без вашего участия.
Работа с новыми артикулами: * Реализую функцию импорта списка новых артикулов через текстовый файл или отдельную вкладку Excel. Система сама проверит их на дубликаты.
-
10063 117 0 Здравствуйте.
Разрабатываю парсеры на NodeJS. Готов взяться. Пишите, обсудим.
-
1788 20 0 Готов разработать мониторинг цен, парсеры пишу и размещаю на своих серверах с дальнейшей поддержкой их работы. Как вариант реализации, все товары, для которых нужен мониторинг, будут находиться в гугл таблице, и там же будете добавлять и удалять ненужные.
Для оценки нужно осмотреть сайт на предмет защиты и более детально поинтересоваться, как получать данные. Пишите, обсудим детали.
-
417 2 0 Сначала тихо проверяю, как сайт отдает данные (через официальный «внутренний» запрос, не «кликами»), потом один раз настраиваем правила: какие склады и какие типы доставки учитываем. Каждое утро автоматически собирается самая низкая цена по каждому вашему артикулу и сохраняется в историю; в Excel вы сразу видите таблицу «артикулы × даты». Новые позиции просто добавляете в список — без дубликатов, они подхватываются на следующий день. На выходе: ежедневная картина цен по всем товарам без ручной работы.
-
3340 147 4 1 Доброго дня.
Могу выполнить ваш проект.
Уже есть универсальный готовый парсер на node js.
Если у вас есть вопросы, можете написать мне.
-
6811 164 1 Добрый день, готов обсудить с вами детали проекта. Пишите в личку. Заранее спасибо
-
1476 14 1 Парсинг цен с учетом уникальных складов и автоматическое ежедневное обновление — это именно то, что я делал. Имею опыт работы с большими объемами данных и оптимизации запросов, чтобы избежать блокировок. Какова структура сайта поставщика — есть API или придется парсить HTML? Это поможет подобрать лучшее решение.
-
623 5 0 Добрый день! Задание понятное. У меня есть опыт работы с большими объемами (10к+ товаров), поэтому настрою парсинг через API или прокси, чтобы избежать банов и обеспечить скорость.
Реализую автоматическое отсеивание ненужных складов и ежедневное формирование отчета в Excel (с историей цен по датам). Система будет работать автономно по расписанию.
Подскажите, о каком поставщике идет речь? Хочу проверить техническую возможность подключения к API.
Жду вас в ЛС для обсуждения деталей.
Актуальные фриланс-проекты в категории Базы данных и SQL
Устранить проблему неполного импорта данных из Excel-файлов спецификаций Новой Почты в 1С:
2000 UAH
Цель: Есть обработка в 1с по загрузке спецификации Новой почти. По непонятнім причинам перестало подгружать некоторіе табличніе данніе Нужно найти причину и Устранить проблему неполного импорта данных из Excel-файлов спецификаций Новой Почты в 1С: Малый Бизнес. Текущее… Администрирование систем и сетей, Базы данных и SQL ∙ 1 день 4 часа назад ∙ 14 ставок |
Система учета, планирования и продажи для грибной фермы
27 000 UAH
Это полный, финальный текст Технического задания (ТЗ). Он объединяет все ваши требования: 16 камер, 20 контрагентов, расписание по дням, учет тары, расчет рентабельности и обязательное деление на три сорта грибов. Вы можете полностью скопировать этот текст и отправлять… Базы данных и SQL, Управление клиентами и CRM ∙ 3 дня 8 часов назад ∙ 55 ставок |
Внешний отчет 1С 8.3 — прогноз остатков товаров
1000 UAH
Нужен внешний отчет (.erf) для 1С:Предприятие 8.3 (конфигурация уточняется). Что должно делать: Извлекать остатки товаров из базы Анализировать историю продаж за последние 30 дней Считать средний темп продаж по каждому товару Определять через сколько дней товар закончится… Базы данных и SQL, Управление клиентами и CRM ∙ 3 дня 8 часов назад ∙ 13 ставок |
Аудит безопасности веб-приложения и базы данных для пользовательской CRM — специалист по BaaS / Database-as-API (пентест)Обзор проекта Мы управляем индивидуально разработанной платформой управления взаимоотношениями с клиентами (CRM), которая обслуживает два сервисных бизнеса на одной системе. Это современное веб-приложение на JavaScript, поддерживаемое базой данных как сервис (BaaS) и развернутое… Базы данных и SQL, Тестирование и QA ∙ 3 дня 21 час назад ∙ 10 ставок |
Синхронизация баз данныхСинхронизация программ Microsoft Access и CRM SalesDrive. Передача данных из CRM в Microsoft Access на первом этапе (изменение статуса воронки). Передача данных из Microsoft Access в CRM на втором этапе (изменение статуса в программе). Базы данных и SQL ∙ 4 дня 2 часа назад ∙ 12 ставок |