Zautomatyzowany Parser Produktów dla Shopify z AliExpress

Opis projektu:
Opracowano uniwersalny parser do zbierania danych o produktach z AliExpress w celu ich dalszego importu do Shopify. Projekt obsługuje kilka trybów pracy, które pozwalają na przetwarzanie zarówno pojedynczych produktów, jak i grupowych zapytań, co znacznie upraszcza proces tworzenia katalogu dla sklepu internetowego.

Główne funkcjonalności:

Parsowanie jednego produktu:

Przyjmowane jest łącze do pojedynczego produktu.
Wynik jest zapisywany w formacie określonym w szablonie.

Parsowanie zapytania wyszukiwania:

Użytkownik ustawia limit liczby produktów do parsowania.
Z strony wyników wyszukiwania tworzona jest lista produktów w określonym formacie, ale z kilkoma wpisami.
Parsowanie listy łączy:

Przyjmowany jest plik CSV z listą łączy do produktów, oddzielonych przecinkami.
Dla każdego łącza przeprowadzane jest parsowanie, a wyniki są formułowane w tym samym formacie, co dla jednego produktu, ale są wyświetlane jako zestaw danych.

Formaty plików wyjściowych:

Dla każdego trybu parsowania generowane są trzy typy plików:
CSV – podstawowy raport z danymi produktów.
JSON – alternatywny format dla wygody pracy z danymi.
Shopify CSV – wypełniony plik do załadowania do Shopify, zgodny z oficjalnymi wymaganiami.

Ładowanie zdjęć:

Dla każdego produktu zdjęcia są ładowane na hosting.
Automatycznie tworzony jest osobny folder dla każdego produktu, którego nazwa jest generowana jako unikalny ID.
W obrębie folderu tworzone są podfoldery do oddzielania głównych zdjęć i zdjęć z recenzji.
Ograniczenie – do 250 zdjęć na produkt, przy czym używane są tylko główne fotografie (zdjęcia z recenzji również są ładowane, ale umieszczane są osobno).
Inne ważne wymagania:

Interfejs projektu jest ukierunkowany na użytkowników.
Pliki zawierają instrukcje dotyczące zgodności pól z pliku parsowania dla poprawnego przeniesienia danych do pliku.

Parsowanie i przetwarzanie danych:
Zrealizowane za pomocą Pythona z wykorzystaniem bibliotek do pracy z zapytaniami HTTP i parsowaniem HTML.

Generowanie raportów: Automatyczne tworzenie plików w formatach CSV i JSON dla wygodnej dalszej analizy i ładowania danych.
Integracja z Shopify: Tworzenie pliku do ładowania produktów do Shopify zgodnie z oficjalnym szablonem, który zapewnia podstawową strukturę do dalszych ręcznych zmian.
Automatyzacja ładowania zdjęć: Zdjęcia z opisu produktu automatycznie ładowane są na hosting i organizowane w osobnych folderach, co ułatwia zarządzanie obrazami.

Realizacja tego projektu pozwala na automatyzację procesu zbierania danych o produktach z AliExpress i ich dalszy import do Shopify. Dzięki elastyczności trybów parsowania (jeden produkt, zapytanie wyszukiwania, lista łączy) i wsparciu dla zapisywania danych w kilku formatach, system znacznie ułatwia tworzenie i zapełnianie katalogu produktów. Projekt demonstruje zdolność do integrowania różnych technologii w celu tworzenia efektywnych narzędzi automatyzacji, co jest szczególnie istotne w nowoczesnym e-commerce.