Пасинг, добавление товара, база данных
Task:
There is a website OS 2.3
There are suppliers, price lists, and supplier websites.
Objective:
1. Add and update (if a new product appears from the supplier) products from suppliers exclusively based on the price lists provided by the supplier.
2. Enable updating products based on the supplier's price lists. (prices, stock)
3. Set up exports to marketplaces (Rozetka, Prom, others). And export the products.
Price lists in Excel, there is also part in xml, yml
Important:
1. configure up to 5 main characteristics when parsing products from each supplier, as there will be a garland
2. make a manual format for matching categories. As there will be intersections of products by categories (the client will do this)
One of the options for an extended technical specification. Or your options
Technical requirements (if needed)
- Proxy https://proxy2.webshare.io/
- Hosting for script placement
- Windows server for parsing websites that block such parsing
Terminology
- Task structure
- Design and elements - this is the visible part, usually a page.
- Functions - in contact with the user: deletion \ creation \ import.
- Automation - everything that is under the hood and works independently of the user.
- Separate additions - third-party dependencies for task implementation.
Tasks and scope of work
Loading the Ibis arm excel catalog
Design and elements
- Field for uploading the excel catalog
- Time of the last upload
- Column settings fields: title, wholesale price, retail price, stock, article, availability
- Button to save settings
- Link to the last converted xml
- Functions
- Conversion of excel to xml for further processing and detection of changes in products (retail price, wholesale price, availability, quantity)
- Link to the xml catalog of products processed from excel
Loading the Ibis fish excel catalog xml, xls
Design and elements
- Field for uploading the excel catalog
- Time of the last upload
- Column settings fields: title, wholesale price, retail price, stock, article, availability
- Button to save settings
- Link to the last converted xml
- Functions
- Conversion of excel to xml for further processing and detection of changes in products (retail price, wholesale price, availability, quantity)
- Link to the xml catalog of products processed from excel
Loading the Stvol excel catalog
Design and elements
- Field for uploading the excel catalog
- Time of the last upload
- Column settings fields: title, wholesale price, retail price, stock, article, availability
- Button to save settings
- Link to the last converted xml
- Functions
- Conversion of excel to xml for further processing and detection of changes in products (retail price, wholesale price, availability, quantity)
- Link to the xml catalog of products processed from excel
Parser Stvol xls, xml
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to specify a list of categories to exclude from parsing
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser Google Sheets Navionica xls
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Block for setting sheet parameters: Sheet name, product name column, product stock column, product availability column, article column, retail price column, wholesale price column
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser website Navionica xls
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to specify a list of categories to exclude from parsing
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser xml catalog Atlant market xml
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser xml catalog kievopt xml
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser website Control (no price lists)
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to specify a list of categories to exclude from parsing
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser website Optics pro (no price list)
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to specify a list of categories to exclude from parsing
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Parser website Skinandskin(xls)
Design and elements
- Field for link
- Time of the last parsing completion
- Enable \ Disable monitoring
- Ability to specify a list of categories to exclude from parsing
- Ability to set the frequency of parsing in minutes
- Functions
- Link to the xml catalog of products from the last parsing
- Automation
- Automatic start of parsing from the moment of completion
Dashboard - Products
Design and elements
- Page in the form of a table with the following columns:
- ID
- Product name
- Price
- Availability
- Internal article
- Creation date
- Update date
- Supplier name
- Supplier article
- Supplier availability
- The dashboard should show related products with exported products
- Ability to manage properties (price, availability, stock) of the product on export platforms
- Ability to disable \ enable product updates (prices, availability) for any of the export platforms
- Products should be displayed in the context of each of the export platforms by categories
- Ability to go to the product to view the connection of the product with the products of export catalogs
- Functions
Automation
- Page in the form of a table with the following columns:
Section - Products
Design and elements
- Page in the form of a table with the following columns:
- Product status
- Product name
- Category
- Model also sku
- Ean (supplier name)
- Price
- Quantity
- Availability
- Update switch Enabled \ Disabled
- Manufacturer
- Modal window for uploading excel with new products
- Modal window for checking attributes
- Modal window for checking category filter options with the ability to add a new one
- Auto-translate button
- Mass deletion button
- Button for managing photo watermark removal
- Functions
- Mass deletion of records
- Ability to import new products and edit each of the imported products, making the following edits with saving:
- Title
- Description
- Category
- Model
- Ean
- Price, Wholesale, Availability
- Manufacturer
- Attributes
- Photo (url)
- The automatic translation function should be triggered by a button and open a modal window for selecting the translation language, from which we translate and to which we translate. Confirmation in the modal window starts the translation, which will last until completion. The more products, the longer it takes.
- Automation
Separate additions
- Page in the form of a table with the following columns:
Section - Categories
Design and elements
- Page in the form of a table with the following columns:
- Name
- Identifier
- Creation date
- Update date
- Mass deletion button
- Functions
- Mass deletion of records
- Ability to go to the category and edit:
- Name
- Connection, relationship to parent
- Page in the form of a table with the following columns:
Section - Proxy
Design and elements
- Page in the form of a table with the following columns:
- Identifier
- Proxy
- Status (active\ inactive)
- Creation date
- Update date
- Mass deletion button
- Proxy check button
- Functions
- Mass deletion of records
- Update the proxy list by importing from a txt file or link for import https://proxy2.webshare.io
- Ability to activate the status check of proxy activity
- Page in the form of a table with the following columns:
Section - Attributes
Design and elements
- Page in the form of a table with the following columns:
- Name
- Identifier
- Creation date
- Update date
- Mass deletion button
- Functions
- Ability to go to the attribute and edit:
- Name
- Mass deletion of records
- Page in the form of a table with the following columns:
Section - Filter options
Design and elements
- Page in the form of a table with the following columns:
- Name
- Identifier
- Category
- Creation date
- Update date
- Mass deletion button
- Functions
- Ability to go to the option and edit:
- Name
- Relationship to category or categories
- Mass deletion of records
- Automation
Separate additions
- Page in the form of a table with the following columns:
Modules for exporting products:
Design and elements
Functions
- Category dependency settings
- Enable / Disable updates
- Set update frequency in minutes
- Link to the catalog being exported
- Automation
- Update products (availability, price)
- Create new products and link them with system products
- Separate additions
Design and elements
Functions
- Category dependency settings
- Enable / Disable updates
- Set update frequency in minutes
- Link to the catalog
-
Добрый день. Готов рассмотреть Ваш проект. Обладаю всеми необходимыми навыками для выполнения. Буду рад сотрудничеству.
-
Привет, я работал над проектом "Интеграция прайсов и обновление товаров", где обновлял 5+ поставщиков, обрабатывал до 1000 товаров в день.
Как вы планируете организовать автоматическое обновление товаров – через API или парсинг файлов?
Предлагаю связаться, я бесплатно проконсультирую вас с технической стороны и составим план разработки + расскажу о моей команде!
-
1506 6 0 Добрый день!
Меня заинтересовал ваш проект, и я готов взяться за его выполнение. У меня большой опыт в разработке подобных платформ и админпанелей к ним - с радостью готов помочь.
Открыт к коммуникации и обсуждению деталей.
-
3336 101 4 3 насколько я вижу у вас все источники данных это прайсы, вам не нужен парсинг, вам нужно просто забирать товары у поставщика из прайсов, это немного другая задача и более "белая", для этого не нужны прокси.
Я делал такое не на опенкарт.
Нужно понять как к нам попадают прайсы поставщиков, это важно, почта или вы руками будете загружать, потом привязать товары, по артикулам или иным способом.
а дальше мигрировать товары, скажем раз в сутки.
выгрузка пром и розетка это довольно типовая задача и не сильно пересекаеться с прогрузкой из фидов, тоже можно сделать
-
316 1 0 Моя ниша, специалист по веб-скрапингу и автоматизации!
Я тот кто Вам нужен, обращайтесь!
-
655 6 1 Добрый день! Готов подробно обсудить сроки, разбить задачи на этапы и начать работу после согласования.
-
172 1 1 Здравствуйте! Готов выполнить данный проект есть большой опыт разработки различных приложений
-
631 5 0 Добрый день.
Заинтересовало ваше задание, готова выполнить, обращайтесь.
--------------------------
-
720 6 1 Здравствуйте,
Имею опыт работы с парсингом товаров с маркетплейсов. Работал над проектом системы синхронизации каталогов товаров через API поставщика и клиента.
Имею углубленные знания в сфере разработки back-end части веб-приложений. Планирую реализовывать на Python.
Смогу реализовать микросервисную архитектуру, которая гарантирует простое и быстрое масштабирование.
Хотелось бы больше узнать о технических требованиях и получить ссылки на сайты для парсинга. После этого смогу четко определить сроки и стоимость выполнения вашего заказа.
Жду вашего ответа.
Актуальные фриланс-проекты в категории Парсинг данных
Спарсит телеграмм группы
700 UAH
Нужно спарсить телеграммы группы и отсортировать их по папкам. Необходимы публичные и частные группы. Все, что есть в Польше Парсинг данных, Разработка ботов ∙ 11 часов 33 минуты назад ∙ 16 ставок |
Исследование премиум-сегмента КиеваИсследование премиум-сегмента Киева Необходимо провести поиск открытых публичных каналов связи с представителями премиум-сегмента в Киеве. Что нужно собрать: открыто опубликованный email или телефон для связи, если он размещен в публичном источнике. Кого ищем: представители… Парсинг данных, Поиск и сбор информации ∙ 21 час 37 минут назад ∙ 13 ставок |
Требуется специалист по продвижению в Telegram.
1287 UAH
Задачи: инвайт реальных пользователей по базе юзернеймов в новые чаты и рассылка сообщений по целевой базе. Интересует только качественный трафик и работа с живой аудиторией — исполнителей, использующих ботов, накрутку или некачественные методы, просьба НЕ БЕСПОКОИТЬ. Работа… Парсинг данных, Продвижение в социальных сетях (SMM) ∙ 3 дня 16 часов назад ∙ 8 ставок |
Сбор B2B базы данных компаний в Германии
1801 UAH
Цель: Получение списка потенциальных работодателей (клиентов) для B2B рассылки. Регион: Мюнхен (München) + радиус 50 км. Требуемые ниши: Строительные компании (Bauunternehmen) Пищевые предприятия (Lebensmittelhersteller, мясокомбинаты, пекарни) Логистика и складские… Парсинг данных, Продажи и генерация лидов ∙ 3 дня 18 часов назад ∙ 34 ставки |
Консультация по парсингу подписчиков Instagram-аккаунтовЗдравствуйте. Необходимо провести предварительную оценку возможности выполнения следующей задачи. У меня есть список Instagram-аккаунтов. Цель — получить контактные данные (в первую очередь email-адреса) пользователей, которые подписаны на эти аккаунты. Ранее мне встречались… Парсинг данных ∙ 7 дней 11 часов назад ∙ 13 ставок |