Технічне завдання на агрегатор товарних фідів у різних форматах від різних постачальників у один фід

Мета

отримання уніфікованого YML-фіда з товарами від різних постачальників для подального використання в інтернет-магазинах (зокрема на базі Хорошоп).

Технології

Стек застосовуваних технологій не є принциповим, але потрібна можливість розгортання на дешевому shared-хостингу чи локальному веб-сервері.

Вимоги і функціональні особливості

1. Вхід/Реєстрація. Потрібний базовий функціонал входу за логіном (email) і паролем. Нових користувачів додавати може лише залогований користувач. Можливості самостійної реєстрації немає. Форма входу захищена через reCAPTCHA/Cloudflare (якщо апку розгорнуто не локально).

2. Налаштування вихідного фіда. Потрібен інтерфейс, який дозволяє:

   1. Встановити структуру (шаблон) майбутнього YML-файлу (з можливістю редагування і збереження цієї структури). 

   2. Також в цьому ж розділі веб-додатку має бути можливість встановлювати структуру (дерево) категорій товарів, їх редагування і збереження.

3. Налаштування джерел / вхідних фідів (постачальників). 

   1. Ми маємо мати можливість створювати довільну кількість постачальників, і для кожного з них встановлювати фід.

   2. Фід може бути у різних форматах XML/YML/XLSX.

   3. Фід може бути доступний за відкритим посиланням і завантажуватись автоматично, так і прикріплюватись менеджером вручну (через веб-інтерфейс).

   4. Має бути можливість попереднього перегляду фіда від постачальника (як у структурному форматі, так і форматі таблиці), для налаштування подальних зв’язків:

      1. Встановити зв’язок між категоріями постачальника, і категоріями вихідного файлу (які встановлені в п.2.b)

      2. Отримати перелік назв усіх атрибутів (характеристик) товару і встановити назву для кожного з них у вихідному фіді. (наприклад: Назва, Ціна, Артикул, Наявність, Опис, Бренд, Колір, Країна виробник, …), а також можливість встановити ігнорування цього атрибута (не включати атрибут в результуючий фід).

      3. Встановити унікальний ідентифікатор товару для цього фіда (id або інший атрибут, наприклад “Артикул”). За цим полем ми будемо в подальшому відслідковувати дублі товарів від різних постачальників.

      4. Якщо фід у форматі XLSX то в одній клітинці можуть бути всі атрибути товару чи наприклад всі зображення товару. Тому важливо передбачити можливість пост-обробки таких клітинок і розбиття за роздільником. (наприклад для зображень роздільником є “,” а для характеристик “;”, яких в свою чергу назва атрибута і його значення розділені комбінацією “:␣”).

      5. Всі перераховані вище налаштування для джерела (фіда постачальника) мають зберігатись.

      6. Перед кожним процесингом вхідного фіда має відбуватись перевірка зі збереженими налаштуванням на виявлення нових атрибутів, для яких не встановлений зв'язок. Якщо такі атрибути знайдено - надіслати повідомлення на електронні адреси всіх зареєстрованих користувачів.

4. Налаштування процесингу.

   1. На основі збережених налаштувань кожного джерела/постачальника, потрібно сформувати список усіх атрибутів і якщо цей атрибут повторюється, то дати можливість встановлювати пріоритетність джерел. Наприклад, якщо для умовного товару Опис встановлено пріоритет: Постачальник_2, Постачальник_3, Постачальник_1, тоді при формуванні результату перевіряємо чи при є цей Опис у Постачальник_2, якщо є - виводимо, якщо немає, тоді перевіряємо у Постачальник_3, і т.д.

   2. Ціна формується на основі характеристики “Наявність”: серед усіх постачальників, у яких товар є в наявності вибираємо найменшу ціну.

   3. Процесинг вхідних фідів від постачальників має виконуватись фоново, з заданим через налаштування інтервалом (Cronjob).

   4. Процесинг вхідних фідів можна запустити вручну в будь-який момент.

   5. У випадку помилок в процесі генерації результату - надсилати email усім користувачам.