Сделать парсер товаров с другого сайта и отправить в Google Sheets для загрузки на Хорошоп

Привет, Павел Бережный!

Разрабатывать буду на Python+Playwright+Docker compose+gpt+SQLite3.
Добавление новых сайтов нужно будет писать на каждый новый сайт скрипт, потому что у каждого сайта своя структура. Можно разве что сделать, чтобы парсилась вся страница, а AI будет вытягивать из парсенной страницы все то, что вам нужно, тогда можно будет добавлять для парсинга другие сайты.

Пишите, обсудим подробно.

Показать оригинал

Перевести

Здравствуйте, я Data Engineer с опытом более 4-х лет. У меня уже есть готовые шаблоны для построения пайплайна под часть ваших задач.
Что касается ваших просьб по отзывам:
1) Python + Scrapy + RMQ + MySQL
2) Опыт более 4 лет, в том числе большой опыт работы с интернет-магазинами.
3) Да, есть.
4) Да, есть.
5) Реализация будет путем выделения модификации как отдельного товара, или расширения его как объекта записи БД.
6) Реализация через скрапинг страниц (или внутреннего API сайта при наличии).
7) Есть уже готовые шаблоны для подобных задач.
… 8) Есть несколько вариантов, можно будет рассмотреть.
9) Есть несколько вариантов, которые нужно будет обсудить.
10) Будет сделана архитектура для масштабирования проекта.
11) Описанные выше пункты от 7 до 14 дней, в зависимости от согласованных деталей.
12) Все будет зависеть от ресурса, который вы захотите обрабатывать следующим. (Здесь индивидуально нужно обсуждать каждый ресурс.)
13) Да.

В целом, если вы хотите качественный ETL пайплайн - обращайтесь. Опыт и навыки есть, все сделаю!

Показать оригинал

Перевести

Доброго дня.
Это бесплатно.
Сделал https://docs.google.com/spreadsheets/d/16YbQ5G16yJzLJw8iu-5rWvbxuabqzYkx1tZIjBQDKK0/edit?hl=ru&gid=625179625#gid=625179625
Возможно, вам подойдет. По хлебным крошкам, можете делать сортировку по категориям и другое.

Показать оригинал

Перевести

Здравствуйте! Могу закрыть вашу задачу за справедливую цену. В профиле можете увидеть примеры работ. После завершения проекта предоставлю документацию, а также помогу с развертыванием на сервере для работы 24/7.

Показать оригинал

Перевести

Добрый день. Готов выполнить данный проект, имею большой опыт разработки приложений.

Показать оригинал

Перевести

Здравствуйте!
У меня есть опыт в разработке парсеров и работе с Google таблицами.
1) Стек технологий зависит от типа хостинга, который вы будете использовать, от этого будет зависеть технический стек. Можно построить на NodeJS + зависимости. Могу написать на Go.
2) У меня есть опыт с парсингом hotline. Казахстанский сайт по продаже недвижимости квартир и парсинг данных в CRM. Парсинг новостей с китайских ресурсов.
3) Да, есть опыт подготовки в CSV для импорта.
4) Да, у меня есть опыт работы с API Google Sheets.
7) Фото будут собираться по ссылкам, затем скачиваться, привязываясь к конкретному товару.
9) Будет добавлена команда, которая будет делать запрос к сайту и проверять конкретно цену; если она изменилась, будет вызываться другая программа, которая будет отвечать за обновление цены.
10) Не понял, что имели в виду.
… 11) 12 дней, цена 1200 долларов США.
12) Зависит от:
структуры сайта
anti-bot
количества вариантов товаров
сложности категорий
1-3 дня
500 долларов США.
13) Да, возможно, если подготовить данные и преобразовать в CSV с структурой под конкретный товар.
Более детально можем обсудить, можем создать митинг и обсудить. Также можем разбить все работы на этапы при необходимости.

Показать оригинал

Перевести

У меня есть опыт разработки парсеров e-commerce сайтов и построения ETL-пайплайнов (scraping → нормализация → Google Sheets / API → дальнейшая автоматизация).

Для реализации я буду использовать Python (requests / BeautifulSoup / Scrapy при необходимости), Google Sheets API и модульную архитектуру, чтобы систему можно было масштабировать под другие сайты производителей или конкурентов без переписывания логики.

Парсинг будет построен с учетом:
— сбора всех товаров, вариаций и цен по размерам
— агрегации фото в структурированные массивы
— исключения дублей и логирования ошибок
— возможности повторного запуска и обновления цен
…
Данные будут сразу приводиться к вашей структуре Google Sheets, чтобы их можно было использовать для AI-обработки описаний и дальнейшего импорта в Horoshop.

Стек: Python + Scrapy/BS4 + Google Sheets API + (опционально) Celery/cron для автоматизации.

Сроки первой версии под Come-For — 7–12 рабочих дней.
Бюджет — $700–1000 в зависимости от сложности вариаций и стабильности структуры сайта.
Далее адаптация под другие сайты — значительно быстрее, поскольку архитектура будет модульной.

Показать оригинал

Перевести

Приветствую Павел, напишу парсер согласно ТЗ.
Пишите в личку с радость готов выполнить.

Готова обсудить детали работы в лс. Работаю быстро и качественно
Партнёр Хорошоп

Добрый день, готов реализовать ваш проект, имею большой опыт с парсерами. Пишите в личку, обсудим детали.

Показать оригинал

Перевести

Добрый день.
Предлагаю обсудить выполнение данного проекта в личных сообщениях.
Напишите для уточнения всех деталей.

Показать оригинал

Перевести

Добрый день. Разработаю скрипт для сбора товаров и модификаций с помощью Nodejs и Typescript с автоматической выгрузкой в вашу Google таблицу. Настрою генерацию описаний через AI и прямую интеграцию с API Хорошоп для публикации каталога. Цену и сроки предлагаю обсудить в личных сообщениях.

Показать оригинал

Перевести

Здравствуйте, у меня большой опыт написания парсеров различной сложности. Пишу на Python, парсер можно реализовать с помощью requests/Playwright для сбора информации + multiprocessing для параллелизации работы. Если нужен запуск по расписанию - Celery. Прям универсального решения вам никто не сделает, но можно реализовать кодовую базу, на основе которой будет проще реализовывать другие парсеры (именно таким был один из моих проектов на сотни парсеров). Что касается AI обработки, вы уже тестировали свой промпт? Его можно забрать в код и делать запросы на OpenAI, например, чтобы сразу записывать в Google таблицу.

Сроки и цену указал за полный пакет - парсер + загрузка в Google Sheet + деплой на выделенный сервер + AI.

Показать оригинал

Перевести

1. js
2. так можете посмотреть в отзывах
3. сделаю максимально как нужно
4. так могу реализовать все полностью на google app script
5. каждая модификация отдельная строка, но со связкой
6. можно как в отдельный столбец, так и вместе, а можно и в отдельную таблицу по связке
7. на гугл диск, а ссылка в ячейку
8. будет реализовано отдельно и отмечаться, что уже обработалось, а что нет
9. можно в комментариях к ячейке вести историю
… 10. теоретически можно будет, но цена без учета этого пункта, есть варианты, можем обсудить отдельно
11. 200$, если не горит
12. в зависимости от сайта, например 100
13. ну так вся суть в этом

Показать оригинал

Перевести

Занимался похожим задание, парсинг, ИИ, Гугл таблица, хорошоп в нужные категории. Пишите для обсуждения подробностей.

Добрый день, веб-программировании уже более 9 лет
Работаю с rest api, фреймворками и cms такие как django, laravel, yii2, wp, opencart, codegnither и т.д. Готов выполнить задачу.

Здравствуйте!
Разработаю инструмент с админ-панелью через телеграм-бота или с GUI интерфейсом, все будет сохраняться по вашему шаблону в гугл таблице.

Пишите в личные сообщения, обсудим все подробнее.

какой стек будете использовать; - python, подробнее в личные сообщения
есть ли опыт парсинга интернет-магазинов; - большой опыт
есть ли опыт подготовки импортов для Хорошоп; - да
есть ли опыт работы с Google Sheets API; - да
… как будет реализована структура под модификации товара; - с новой строки, разные артикулы, подробнее в личные сообщения
как будут собираться цены по размерам; - с новой строки, разные артикулы, подробнее в личные сообщения
как будут собираться все фото; - сохранятся ссылки через "," или ";" или каждое с новой строки в одной ячейке
как будет работать AI обработка описаний или подготовка к ней; - AI я должен настроить и добавить к данному инструменту или у вас уже есть готовый вариант?
как будет реализовано обновление цен; - каждый новый парсинг будет обновлять цены, можно настроить запуск по расписанию
можно ли будет добавлять другие сайты конкурентов; - под них отдельный парсер, если бы это был маркетплейс - можно
срок и стоимость разработки первой версии под Come-For; - если только парсер, который соберет все товары 2-5 дней, если с интерфейсом или телеграм-ботом + 1-3 дня, стоимость только парсера 8000-10000 грн, с оберткой GUI или телеграм + 2000-3000 грн
срок и стоимость адаптации под следующий сайт; на какой платформе сайт? примерно 1-3 дня
возможна ли дальнейшая загрузка товаров на Хорошоп. - да

Примечание:
Для загрузки товаров на Хорошоп действует главное правило платформы: каждый размер (модификация) должен быть прописан как отдельная строка в таблице, и каждая строка должна иметь свой уникальный артикул.

Показать оригинал

Перевести

Здравствуйте! сайт донор сделан на opencart, можно реализовать вашу задачу на laravel добавить возможность проставлять нужные теги классы для того чтоб парсер находил товары и данные, сделать превью, ну и сделать чтоб сначала грузило в базу данных и после успеха выгружало уже в гугл таблицу по нужным столбикам

Добрый день! 👋

Ознакомился с вашим ТЗ — задача понятна, и её можно реализовать как полноценную систему для автоматического сбора, обработки и подготовки товаров под Хорошоп.

Вижу, что вам нужен не просто “парсер”, а масштабируемая архитектура, которую в будущем можно будет подключать к другим производителям и сайтам конкурентов. Именно так и предлагаю реализовать проект.

Что предлагаю по реализации:

🔹 Стек:
…
* Python
* Playwright / Requests + BeautifulSoup
* Google Sheets API
* OpenAI API для AI-обработки
* SQLite/PostgreSQL для логов и истории изменений
* Docker (при необходимости для простого запуска)

🔹 Опыт:
✔️ Есть опыт парсинга интернет-магазинов
✔️ Есть опыт работы с Google Sheets API
✔️ Есть опыт построения структур под модификации товаров
✔️ Есть опыт подготовки данных под импорт в CMS и маркетплейсы
✔️ Работал с автоматизацией обновления цен и контента

Как будет работать система:

✅ Парсер собирает:

* все товары;
* все фото отдельными ссылками;
* характеристики;
* описание;
* категории;
* цены;
* все размеры и модификации;
* URL товара.

✅ Модификации:
Если товар имеет размеры/варианты — каждый вариант будет формироваться как отдельная модификация товара со своими:

* ценой;
* параметрами;
* названием модификации;
* оставаясь привязанным к основному товару.

✅ Фото:
Все фото будут собираться отдельными URL. При необходимости можно реализовать:

* загрузку в Google Drive;
* подготовку отдельного листа с медиа.

✅ Google Sheets:
Данные будут записываться строго в вашу структуру Google Sheets без нарушения колонок, поскольку дальше у вас идет AI pipeline и импорт в Хорошоп.

✅ AI-обработка:
Можно реализовать:

* автоматический запуск OpenAI;
* генерацию SEO-описаний;
* переписывание текстов;
* генерацию meta title/meta description;
* подготовку описаний именно под Хорошоп.

✅ Обновление цен:
Будет отдельный режим:

* обновление цен;
* проверка изменений;
* логирование старых/новых цен;
* повторный запуск без дублирования товаров.

✅ Архитектура:
Система будет модульной:

* отдельный модуль парсера;
* отдельный модуль AI;
* отдельный модуль Google Sheets;
* отдельный модуль Хорошоп.

Поэтому добавление нового сайта займет значительно меньше времени.

Что получите в результате:
✔️ Рабочий парсер
✔️ Выгрузку в Google Sheets
✔️ Подготовку данных под AI
✔️ Подготовку под Хорошоп
✔️ Логи ошибок
✔️ Защиту от дублей
✔️ Инструкцию запуска
✔️ Исходный код
✔️ Возможность масштабирования

Показать оригинал

Перевести

Здравствуйте.

Разрабатываю парсеры на NodeJS. Готов взяться. Пишите, обсудим.

1. NodeJS + MongoDB.
2. Да.
3. Да.
4. Да.
5. Будут использоваться модели для БД.
… 6. Во время парсинга.
7. Также во время парсинга.
8. Можно делать запросы к ChatGPT.
9. Цены можно изменять в гугл таблице.
10. Под каждый сайт нужно дорабатывать парсер.
11. 3-5 дней, 4500 грн.
12. Зависит от сайта.
13. Да.

Показать оригинал

Перевести

Добрый день!

Разработаю модульный парсер для Come-For на Python (Scrapy + Playwright) с интеграцией в Google Sheets API. Парсер будет собирать все товары, модификации (размеры), цены по размерам, фото, характеристики, описания, категории и записывать данные строго в структуру вашего Google Sheets файла для дальнейшей AI-обработки и импорта в Хорошоп.

Предусмотрю:
поддержку модификаций товаров;
сбор всех фото и цен;
исключение дублей;
лог ошибок;
… повторный запуск;
отдельный режим обновления цен;
возможность легко добавлять другие сайты производителей/конкурентов.

Есть опыт парсинга интернет-магазинов, работы с Google Sheets API и подготовки импортов для Хорошоп;

Срок MVP под Come-For: 5–9 дней.
Следующие сайты — значительно быстрее благодаря модульной архитектуре.

Показать оригинал

Перевести

Добрый день!

Готов разработать эффективный парсер для сайта Come-For согласно вашему ТЗ. Имею опыт парсинга интернет-магазинов, работы с Google Sheets API, а также подготовки данных для импорта на платформы.

* **Стек:** Python (Scrapy/BeautifulSoup, Pandas, Google API Client).
* **Модификации:** Будут реализованы как отдельные строки в Google Sheets с ссылкой на основной товар, с заполнением соответствующих полей.
* **Цены за размерами:** Будут собираться и отображаться в специализированном поле для модификаций.
* **Фото:** Все фото будут собираться в виде отдельных ссылок.
* **AI обработка:** Парсер подготовит данные в необходимой структуре для дальнейшей AI обработки.
… * **Обновление цен:** Реализую режим обновления цен.
* **Новые сайты:** Структура парсера будет расширяемой для добавления других сайтов.
* **Срок и стоимость:** Обсуждается после детализации.
* **Загрузка на Хорошоп:** Возможна.

Предоставлю полный исходный код, лог ошибок и подробную инструкцию по запуску.

Показать оригинал

Перевести

Здравствуйте! Готов помочь с вашим проектом. Имею большой опыт разработки и смогу реализовать все необходимые компоненты согласно вашей документации. Гарантирую качественное выполнение в оговоренные сроки.

Показать оригинал

Перевести

Парсер для Come-For с расширяемой архитектурой для новых источников. Делал похожую систему для мебельного ритейлера - 12k товаров, фото, размеры-цены, выгрузка в Sheets с последующим импортом в CMS. Знаю тонкости: динамические каталоги, пагинация, ограничения по IP, структура модификаций для Хорошоп.

Вопрос: отдаёт ли Come-For размеры-цены на фронте сразу, или подгружает через AJAX? Это повлияет на выбор инструмента - httpx или Playwright. Если готовы, начну с аудита их каталога и тестового парсинга 50 товаров по вашей структуре Sheets. После проверки - полное развертывание и документация для добавления новых сайтов.

Показать оригинал

Перевести

У нас уже практически готовое похожее решение для парсинга товаров, Google Sheets, AI описаний и подготовки импорта, можем обсудить здесь, я на связи =)
по первой версии под Come-For ориентировочно 48000 грн и 18 рабочих дней.
стек - Python, Playwright или requests, lxml, Google Sheets API, OpenAI API для AI описаний, лог ошибок в файл и отдельный лист.
под следующий сайт адаптация обычно 12000-25000 грн и 3-7 дней, если структура не очень экзотическая.
дальнейшая загрузка на Хорошоп возможна отдельным этапом - через импортный лист или через Хорошоп API, если API доступен.
смотрите, тут нюанс - в Come-For вижу открытый XML comefor_ua.xml, поэтому базовые товары, цены, категории, описания, фото и характеристики лучше взять из него, а страницы товаров использовать как резерв для проверки фото и модификаций.
модификации сделал бы через родительский товар и дочерние строки по размеру - одна модель, много размеров, отдельная цена, отдельный статус обработки.
цены по размерам собираются из XML и страницы товара, дубликаты снимаются по ссылке, названию модели, размеру и SKU, хотя артикул в ваш импорт не генерируем.
AI обработку можно запустить с вашего BASE_PROMPT в таблице - описание будет брать бренд и модель из строки, результат писать в описание для маркетплейсов и AI статус.
… для обновления цен сделаю режим запуска без перезаписи описаний и фото - только цена, наличие, дата обновления, ошибки и отчет.
> https://business.ingello.com/prime-eva - похоже по производству, товарам, учету и интеграциям.
> https://business.ingello.com/eva - похоже по товарным данным и маркетплейсной логике.
> https://business.ingello.com/vorfahr - близко по AI генерации контента для каталога.
> https://systems-fl.ingello.com/ua
для старта нужен доступ к Google Sheets с правом редактирования, пример финального импорта Хорошоп и, если есть, доступ к админке или документации API.
уточню 2 вещи.
> нужно ли в первой версии только подготовить импортный лист для Хорошоп, или еще делать фактическую загрузку на сайт.
> AI описания генерируем внутри этого этапа или оставляем подготовленные данные и статусы для вашего отдельного запуска.

Показать оригинал

Перевести

Разберу структуру come-for.com, соберу все товары с фото, ценами, характеристиками и модификациями по размерам. Запишу строго в вашу структуру Google Sheets. Инструмент будет модульным — добавить новый сайт можно будет без переписывания ядра. Добавлю лог ошибок, защиту от дублей и режим обновления цен.

Скажите: категории для Хорошопа нужно мапить вручную или есть готовый перечень соответствий?

Показать оригинал

Перевести