Збір бази інтернет-магазинів
Я рекомендую .
Добрый день. Вам нужны все магазины площадок или же магазины в определенных сферах?
Понял. Объем будет большим, поэтому собирать буду в базу данных, с которой потом можно сделать выгрузку в любом удобном виде в любое время. 5 коп \ позиция +- будет стоить
А какой ориентировочный объем без дублей? Можете сориентировать?
Разные источники разную инфо дают кто-то упоминает 3-4К, а кто-то гооврит о 10-12К.
На основе некоторого опыта в сборе данных ИМ скажу, что это будет больше 50 000.
Задача большая, поэтому идеально было бы её разбить на этапы. Например по количеству позиций. Проект 1: например первые 10 000 контактов и т.д.
Дубли ваши учтем и вычтем с новой базы. Я так понял их относительно немного :)
Да, по состоянию на сейчас - база порядка 500 шт., может чуть больше.
Ого) 50 000 ИМ.
Да, разбивать на составляющие - хорошая идея.
Контакт я подразумеваю формат данных 1 ИМ (название, емейл, телефон, специфика) - то есть 1 ИМ - 5 коп.,верно?
Да, каждый контакт будет включать в себя:
- название ИМ
- сфера деятельности или категория ИМ
- телефоны
- емейл
- ссылка на ИМ
50 коп :) но если будем делать большой объем , то будет скидка ;)
Ок, давайте запустим тогда сбор 10 000 уникальных контактов. По 0, 45 коп. - и по рукам?)
Сможете выгрузить и xls и при сsv, при необходимости?
Какие сроки и условия оплаты?
Сроки, расценки? Достаточно большой объем работы. Хотелось бы немного конкретики. Необходим конкретный сегмент или полностью все? Готова обсудить. Мой e-mail: [email protected]
Необходима база всех ИМ Украины. Без сегментирования.
По срокам и стоимости - давайте обсуждать.
10К - это кол-во без дублей?
Часть информации у меня уже есть, я перешлю Вам чтоб не дублироваться, если сойдемся по цене. Ваше предложение за контакт?
То есть Вам бесплатно надо проверить контакты? Я так поняла за то, что у Вас есть, Вы же платить не будете? А может, у Вас процентов 80 есть) По-одесски) всегда проще начать с нуля, чем переделывать чьи-то труды) все контакты с нуля, без дублей 500 у.е. Работу сдам за 2 недели.
Нет, у меня есть уже порядка 300 - 500 контактов.
По поводу переделывать, согласна, проще с нуля. Я предложила как вариант - возможно Вам проще будет так..я же не знаю детального алгоритма работы)
Пока бюджет за 1 ИМ с вышеперечисленными контактными данными (имейл, тел., ссылка на сайт и специализация) - 1 -гривна.
Спасибо, не интересует. Просмотрела аналитику маркетплейса за последние 2 года, овчинка выделки не стоит. Вы самостоятельно это можете собрать, там не много. Чистыми ИМ получится где-то 5-6 тысяч. Самая сложность будет убрать дубляжи. По сути пром и бигль это один проект, продавцы на 80% дубляж. Просто пром - это по старому В2В, а бигль - это В2С. Вся разница. Удачи)
думаю около 40-60 тыс уникальных адресов получится
удалить дубликаты будет не просто
Вся суть как раз в отсутствии дубликатов.
Данные адреса нужны для коммуникаций по проектам и дублировать - не комильфо(
Є діюча production-платформа з каталогом та автоматичним оновленням зовнішніх пропозицій і цін. Стек: — Node.js / TypeScript; — PostgreSQL; — існуючий сервіс оновлення цін і cron; — окремий готовий Python-модуль валідації та вибору пропозицій; — staging і production. Необхідно точково доопрацювати існуючий pipeline оновлення цін без повного переписування backend. ОБОВ'ЯЗКОВИЙ СКОП 1. Інтеграція Python-модуля — Python-модуль залишається окремим компонентом; — повертає структурований результат: offers, selected offer, statuses та risk flags; — Node.js валідує результат і виконує запис у БД; — передбачити обробку помилок і partial/failed runs; — legacy pipeline не відключається до завершення QA. 2. Запуск оновлення за списком Додати запуск: — по одному slug/id; — по переданому списку slug/id. Допустимо CLI або існуючий службовий API. Новий користувацький інтерфейс не потрібен. 3. Shadow Mode Нові результати повинні записуватися окремо і не впливати на production до QA. Потрібні shadow-поля: — price; — selected offer ID; — direct URL; — offer status; — risk/QA flags; — checkedAt; — engineVersion. 4. Розширення існуючої таблиці offers Додати: — source; — external_offer_id; — last_seen_at; — last_checked_at; — engine_version; — risk flags або зберігання в існуючому JSON; — unique constraint для захисту від дублів. Нову паралельну систему пропозицій створювати не потрібно, якщо існуючу таблицю можна безпечно розширити. 5. UPSERT, STALE і транзакція БД Замінити поточну схему DELETE → CREATE: — UPSERT існуючих і нових пропозицій; — відсутні в повному успішному snapshot пропозиції переводяться в STALE; — при API error, partial result або незавершеному snapshot активні пропозиції не повинні ставати STALE; — оновлення пропозицій, metadata вибраної пропозиції та shadow fields по одній моделі виконується всередині однієї транзакції БД; — при помилці виконується повний rollback. 6. Canonical-safe refresh Оновлення цін не повинно змінювати: — brand; — reference; — model; — collection; — name/title; — slug; — descriptions; — images; — SEO fields. Оновлюються тільки offer, price і shadow data. 7. Збереження поточної cron-логіки Зберегти: — existing cron; — rolling batches; — cooldown; — перевірку PRICE_REFRESH_MIN_DAYS до виклику зовнішнього API; — legacy production pipeline до завершення Shadow QA. 8. Audit output Достатньо одного варіанту: — shadow-колонки в існуючій admin table; або — CSV export. Мінімальні дані: — model/reference; — production price; — shadow price; — delta; — production/shadow URL; — status; — risk flags; — checkedAt; — engineVersion. Новий складний dashboard не потрібен. 9. Staging і QA — DB migrations; — staging deployment; — smoke test на 5 переданих моделях; — потім Shadow Mode приблизно на 50 моделях; — виправлення технічних помилок, виявлених під час цих прогонів; — коротка документація контракту Python → Node.js та rollback procedure. ОПЦІОНАЛЬНО ОЦІНИТИ ОКРЕМО Простий технічний promotion без нового UI: — promotion однієї моделі по slug; — promotion списку slug; — перенесення підтверджених shadow values в production; — технічна перевірка після rollout. РЕЗУЛЬТАТ — Pull Request; — DB migrations; — робоча інтеграція Python → Node.js; — Shadow Mode; — UPSERT, STALE і транзакційне оновлення; — запуск по slug/id; — staging deployment; — smoke-test results; — коротка документація; — не менше 7 днів виправлення багів по реалізованому scope після приймання. В ОТКЛИКУ УКАЗАТИ 1. Фіксована ціна за обов'язковий scope. 2. Окрему вартість механізму promotion. 3. Термін. 4. Оцінку годин. 5. Коли готові почати. 6. Досвід з PostgreSQL transactions, migrations та ingestion pipelines. 7. Які питання потрібно уточнити до початку. 8. Включені чи staging, QA, migrations та період виправлення помилок. Шаблонні відповіді без конкретної оцінки розглядатися не будуть. Доступ до production на першому етапі не надається. Робота починається з обмеженого code review та staging.
Потрібно розробити централізовану серверну систему збору та зберігання даних із Planfix, 1С, Meta Ads і Google Ads, а також веб-дашборд для їх відображення та аналізу. Усі дані, історія змін, розрахунки та агреговані показники повинні зберігатися виключно в серверній базі даних. Дашборд не повинен зберігати або дублювати бізнес-дані. Він має отримувати необхідну інформацію із серверної бази через API відповідно до запитів користувача та відображати її у вигляді KPI, графіків, таблиць і деталізованих звітів.
Щукаємо для підтримки проекта на базі Yii , треба вносити правки та доопрацювання бази , частково є звязок з попереднім виконавцем .....................
Потрібно зробити міграцію бази з CRM G-PLUS на MyChatBot Обєм бази - 26 тис. лідів 2 воронки - Кол центр та Відділ продажу зі своїми вирвами Картки лідів (крім імені та номеру) мають багато різних полів Ліди також мають голосові записи дзвінків. Їх також потрібно перенести Від кандидата очікую орієнтовну суму та терміни реалізації
Створити дашборд для моніторингу та аналізу ефективності мережі локацій (філій) компанії у Google Business Profile (GBP). через офіційний Google Business Profile API. Обробкачерез Скрипт на базі Google Apps Script (підв'язати до Google Таблиці). Запис даних у Google Таблиця (яка виступає як база даних для Looker Studio). Оновлення: Щодня (з індикацією дати останнього оновлення).Створити сервісний акаунт Google Cloud Скрипт раз на добу (тригер о 03:00 ночі) надсилає запит до GBP API. Отримує метрики за вчорашній день по кожній локації (locationId). Записує дані в таблицю в плоскому форматі (рядок = унікальне поєднанняДата + ID Філії + Метрики). Картки ключових показниківНазва карткиМетрика GBPФормат динамікиПерегляди профілюImpressions (Search + Maps)Відсоток %, Sparkline (синій)ДзвінкиLocal Services Phone CallsВідсоток %, Sparkline (зелений)Переходи на сайтWebsite ClicksВідсоток %, Sparkline (фіолетовий)Побудова маршрутівDirection RequestsВідсоток %, Sparkline (помаранчевий)Середній рейтингAverage Review RatingАбсолютна зміна (наприклад, +0.1), Sparkline (жовтий)Нові відгукиNew Reviews CountВідсоток %, Sparkline (бірюзовий)