Аудит парсерів та їхніх налаштувань — OpenCart

Бюджет: 3000 UAH Срок: 1 день

Здравствуйте!

Ознакомился с описанием задачи. Насколько понимаю, цель заключается не просто в устранении текущих дублей категорий, фильтров и атрибутов, а в поиске первопричины их появления и подборе решения, которое исключит повторное возникновение проблемы.

Перед тем как предлагать реализацию, считаю правильным провести аудит текущей схемы импорта: проанализировать настройки SimplePars, логику работы парсеров и подпарсеров, проверить механизм формирования категорий, фильтров и атрибутов, а также оценить, действительно ли проблема связана с ограничениями самого парсера или причина находится в существующей конфигурации.

По результатам аудита смогу предложить наиболее рациональное решение с объяснением, почему именно оно будет оптимальным в вашем случае, и при необходимости оценить реализацию.

Для точной оценки стоимости и сроков мне необходимо уточнить несколько технических деталей в личной переписке.

Бюджет: 12000 UAH Срок: 3 дня

Бюджет 1000 грн для такой задачи, скорее всего, не покроет даже нормальный аудит - тут проблема не в одном фильтре, а в логике импорта, маппинге категорий, атрибутов и правилах очистки перед записью в OpenCart.

МОгу сделать аудит SimplePars и структуры каталога - за 2-3 дня проверим настройки парсеров, дубли фильтров, лишние категории, правила автозамен и точки, где данные загрязняются повторно. По итогу дам не просто список ошибок, а решение - что править в настройках, где нужен модуль по крону, а где лучше нормализовать данные до попадания в каталог.

Смотрите, тут нюанс - если парсеры уже разбиты на подпарсеры и автозамены не срабатывают, то разовая чистка почти бессмысленна. Нужно делать слой правил - эталонные категории, словарь атрибутов, проверку дублей, логи изменений и безопасное обновление без пересоздания мусора. В целом нормальная история, просто лечить надо причну, а не симптомы =)

Уточню 2 момента
> сколько источников сейчас парсится через SimplePars
> есть ли доступ к админке OpenCart, настройкам SimplePars и базе данных для анализа

Похожие задачи по опыту Ingello
> https://business.ingello.com/prime-eva - e-commerce и системная работа с товарными данными
> https://business.ingello.com/eva - ритейл, автоматизация процессов и масштабирование каталожной логики
> https://business.ingello.com/forma-crm - пример подхода к учетным системам, ролям и данным

Главная страница по системной разработке - https://systems-fl.ingello.com Развернуть

Бюджет: 1000 UAH Срок: 4 дня

Дубли в фильтрах у вас почти наверняка не из-за настроек, а из-за того, что Симплпарс пишет значения атрибутов в базу как есть, без нормализации. Поставщик в фиде отдаёт "черный", "Чёрный" и "black" - для OpenCart это три разных значения фильтра, и каждый прогон парсера плодит новые. То же с категориями: фид меняет структуру, маппинг в подпарсерах остаётся старым, и в меню вырастают лишние ветки. Ваш программист прав в главном - автозамены на этапе парсинга это не разрулят, обрабатывать надо после импорта, а не во время.

Что я сделаю в рамках аудита. Сначала сниму реальную картину по базе: SQL-запросами найду все задублированные значения фильтров, осиротевшие категории и битые привязки, посчитаю масштаб мусора в цифрах. Дальше разберу настройки самих парсеров и подпарсеров - где именно маппинг разошёлся с фидом поставщика. На выходе вы получите разбор с конкретными причинами и примерами из вашей базы, плюс архитектуру фундаментального решения: модуль постобработки по крону, который после каждого прогона нормализует значения через таблицу соответствий (все варианты "чёрного" схлопываются в одно каноническое с переносом привязок товаров), удаляет пустые фильтры и чистит мусорные категории. Это стандартная, решаемая задача на OpenCart, а не вечная борьба.

Программирую с 2013 года, несколько лет веду собственный магазин на OpenCart с Journal3, так что кухню категорий, фильтров и импорта знаю изнутри - в том числе как парсеры ломают структуру каталога.

Один вопрос для оценки объёма: сколько сейчас примерно значений фильтров и категорий в системе? От этого зависит, хватит ли разовой чистки или сразу закладывать инкрементальную обработку после каждого парсинга.

Напишите - обсудим детали. Для аудита достаточно минимальных доступов: чтение базы и админка.

Бюджет: 20000 UAH Срок: 21 день

Могу провести аудит связки OpenCart + SimplePars: проверить подпарсеры, правила распределения товаров, создание категорий, фильтров и атрибутов, автозамены, cron-задачи и работу с базой данных, чтобы определить конкретный источник дублей и сброса структуры.

Правильно понимаю, что вам нужна не разовая очистка текущих дублей, а система, которая после каждого парсинга сохраняет утверждённую структуру категорий и атрибутов и не создаёт повторные или лишние значения?

Бюджет, сроки и вариант фундаментального решения — в личной переписке после просмотра админки OpenCart, настроек и логов SimplePars, списка подпарсеров, структуры базы, примеров проблемных товаров, текущих cron-задач и наличия резервной копии или тестового окружения.

Бюджет: 1000 UAH Срок: 2 дня

Работаю с модулем SimplePars с его разработки и по сей день... Реализовывал множество разных задач, обращайтесь.

Бюджет: 2000 UAH Срок: 1 день

Здравсвуйте. Я писал специальный скрипт который удалял, дубли мусор и т.п в уже наполненной базе. Обращайтесь, запустим посмотрим что исправится. По поводу симплы, если парсеров много это закономерный итог. Или переписывать все отдельными парсерами либо исправлять то что есть.

Бюджет: 3500 UAH Срок: 3 дня

Здравствуйте.

Заинтересовала задача. Проведу аудит OpenCart и настроек SimplePars: проверю логику распределения товаров по категориям, создание фильтров и атрибутов, подпарсеры, автозамены и причины появления дублей.

По результату предоставлю:

— точную причину проблемы;
— безопасный план очистки дублей и лишних категорий;
— фундаментальное решение, чтобы данные повторно не создавались;
— рекомендации по cron-модулю, если он действительно необходим;
— отдельную оценку реализации. Развернуть

Бюджет: 6000 UAH Срок: 3 дня

у нас уже есть почти готовая схема под похожее решение с аудитом импорта, нормализацией каталога и проверкой дублей, ее можно быстро адаптировать под ваш Опенкарт и SimplePars.
по сроку - аудит займет 3 дня, бюджет этапа 6000 грн.
по описанию видно, что узкое место скорее всего не только в парсере, а в правилах сопоставления категорий, фильтров и атрибутов до записи в каталог или после нее по крону.
МОжно не усложнять - сначала нужно найти, где именно рождаются лишние сущности, а уже потом решать, нужен ли отдельный модуль, справочник нормализации или правка схемы импорта.
также проверю настроки SimplePars, структуру категорий, фильтры, атрибуты, текущую логику автозамен и дам план, как убрать повторение проблемы, а не просто почистить последствия =)
нужно уточнить, дубли появляются после каждого запуска парсера или накопились из старых правил.
еще важно понять, есть ли доступ к админке, настройкам SimplePars и 2-3 примера товаров, где категория, фильтр или атрибут попали неправильно.
https://business.ingello.com/prime-eva - близко по e-commerce логике, данным товаров и системной работе с каталогом.
https://business.ingello.com/eva - пример работы с ритейлом и сложными процессами вокруг товарных данных.
наш профиль по таким задачам для Freelancehunt - https://systems-fl.ingello.com
на связи здесь на бирже, можем обсудить детали и выбрать самый короткий путь к нормальному решению. Развернуть

Бюджет: 1000 UAH Срок: 1 день

Доброго дня. Готов настроить. На форуме я официальный разработчик модулей и настраиваю симпл парс.

Бюджет: 1000 UAH Срок: 1 день

Привет, Ярослав! Заинтересовал ваш проект, готов помочь решить проблемы с дублированием подкатегорий, фильтров и атрибутов в OpenCart. Сначала проанализирую текущую структуру, выполню файлы парсера SimpleParser, буду ждать, чтобы выявить файл-конфигурацию с лишними записями, затем создам модуль, который будет исправлять названия, категории и атрибуты, и в конце настрою крон-запуск, чтобы задача была автономной.

Моя практика работы с OpenCart и SimpleParser показывает, что именно таким подходом исправляются другие подобные ошибки, поэтому подход готов работать именно так. Предлагаю выполнить аудит и подстройку за 1000 грн, срок – один рабочий день, после чего отправлю результаты и предлагаю еще один приятный бонус – короткую инструкцию по настройке крона без лишних перезапусков.

Бюджет: 1000 UAH Срок: 1 день

Доброго дня, готов выполнить ваше задание быстро и качественно. У меня большой опыт в создании различных парсеров. Напишите в личные сообщения, обсудим детали. С удовольствием помогу)