Техническое задание на агрегатор товарных фидов в различных форматах от различных поставщиков в один фид

Цель

получение унифицированного YML-фида с товарами от различных поставщиков для дальнейшего использования в интернет-магазинах (в частности на базе Хорошоп).

Технологии

Стек применяемых технологий не является принципиальным, но нужна возможность развертывания на дешевом shared-хостинге или локальном веб-сервере.

Требования и функциональные особенности

1. Вход/Регистрация. Нужен базовый функционал входа по логину (email) и паролю. Новых пользователей добавлять может только залогированный пользователь. Возможности самостоятельной регистрации нет. Форма входа защищена через reCAPTCHA/Cloudflare (если приложение развернуто не локально).

2. Настройка выходного фида. Нужен интерфейс, который позволяет:

   1. Установить структуру (шаблон) будущего YML-файла (с возможностью редактирования и сохранения этой структуры).

   2. Также в этом же разделе веб-приложения должна быть возможность устанавливать структуру (дерево) категорий товаров, их редактирования и сохранения.

3. Настройка источников / входных фидов (поставщиков).

   1. Мы должны иметь возможность создавать произвольное количество поставщиков, и для каждого из них устанавливать фид.

   2. Фид может быть в различных форматах XML/YML/XLSX.

   3. Фид может быть доступен по открытому ссылке и загружаться автоматически, так и прикрепляться менеджером вручную (через веб-интерфейс).

   4. Должна быть возможность предварительного просмотра фида от поставщика (как в структурном формате, так и в формате таблицы), для настройки дальнейших связей:

      1. Установить связь между категориями поставщика и категориями выходного файла (которые установлены в п.2.b)

      2. Получить перечень названий всех атрибутов (характеристик) товара и установить название для каждого из них в выходном фиде. (например: Название, Цена, Артикул, Наличие, Описание, Бренд, Цвет, Страна производитель, …), а также возможность установить игнорирование этого атрибута (не включать атрибут в результирующий фид).

      3. Установить уникальный идентификатор товара для этого фида (id или другой атрибут, например “Артикул”). По этому полю мы будем в дальнейшем отслеживать дубли товаров от различных поставщиков.

      4. Если фид в формате XLSX, то в одной ячейке могут быть все атрибуты товара или, например, все изображения товара. Поэтому важно предусмотреть возможность пост-обработки таких ячеек и разбития по разделителю. (например, для изображений разделителем является “,”, а для характеристик “;”, где в свою очередь название атрибута и его значение разделены комбинацией “:␣”).

      5. Все перечисленные выше настройки для источника (фида поставщика) должны сохраняться.

      6. Перед каждым процессингом входного фида должна происходить проверка с сохраненными настройками на выявление новых атрибутов, для которых не установлена связь. Если такие атрибуты найдены - отправить уведомление на электронные адреса всех зарегистрированных пользователей.

4. Настройка процессинга.

   1. На основе сохраненных настроек каждого источника/поставщика, нужно сформировать список всех атрибутов и если этот атрибут повторяется, то дать возможность устанавливать приоритетность источников. Например, если для условного товара Описание установлено приоритет: Поставщик_2, Поставщик_3, Поставщик_1, тогда при формировании результата проверяем, есть ли этот Описание у Поставщика_2, если есть - выводим, если нет, тогда проверяем у Поставщика_3 и т.д.

   2. Цена формируется на основе характеристики “Наличие”: среди всех поставщиков, у которых товар есть в наличии, выбираем наименьшую цену.

   3. Процессинг входных фидов от поставщиков должен выполняться в фоновом режиме, с заданным через настройки интервалом (Cronjob).

   4. Процессинг входных фидов можно запустить вручную в любой момент.

   5. В случае ошибок в процессе генерации результата - отправлять email всем пользователям.