Поиск дублей; совмещение базы

Нужна поддержка программы самотуру, серверов каталогизаторов баз данных и сервера онлайн. Серверов баз данных 5 шт.

База клиентов собиралась несколько лет из разных источников, поэтому телефоны записаны в разных форматах, один клиент существует под несколькими ID, города введены вручную разными языками, область почти нигде не заполнена. Из-за этого невозможно нормально сегментировать базу. Что нужно сделать: 1. Аудит базы (оплачивается отдельно, первый этап). Сколько карточек, сколько телефонов вне формата, сколько дублей, сколько уникальных написаний городов. По результатам — уточненная оценка остальных работ. 2. Стандартизация телефонов. Все номера привести к формату +380XXXXXXXXX. Номера, которые невозможно однозначно распознать, — не удалять и не угадывать, а вынести в отдельный список. 3. Слияние дублей. Правило: один номер телефона = один ID клиента. При этом одному клиенту может принадлежать неограниченное количество номеров. История заказов, email, адреса, теги и кастомные поля должны сохраниться. 4. Разбор карточек, на которых «навешано» много номеров. 5. Города и области. Названия населенных пунктов — из единого справочника на украинском (API Новой Почты или КАТОТТГ). Область должна заполняться всегда, чтобы одним фильтром можно было выгрузить всех клиентов Киева и области, а не отдельно Бровары, отдельно Ирпень и т.д. 6. Защита от повторного засорения: нормализация телефона и города на входе (формы сайта, интеграции, ручной ввод) + регулярная фоновая проверка новых записей. Требования: — практический опыт работы с API SIMLA / RetailCRM (v5): выгрузка, обновление, объединение карточек, лимиты запросов; — опыт задач с дедупликацией данных; — понимание украинских адресных справочников. Условия работы: полный бэкап до любых изменений; сначала dry-run с отчетом о запланированных изменениях на согласование, и лишь потом запуск на боевой базе; лог всех операций с возможностью отката. Без безвозвратных удалений без согласования. В отзыве напишите: — сроки и стоимость

Необходимо собрать большую и актуальную базу контактов украинских ученых, преподавателей, научных сотрудников, докторантов и аспирантов, используя только открытые источники. Результат должен быть в формате Excel или CSV и содержать как минимум ФИО, email, место работы (университет или научное учреждение), должность и ссылку на источник, откуда получен контакт. Необходимо максимально избегать дубликатов и, по возможности, проверять актуальность email-адресов. Для сбора данных можно использовать официальные сайты университетов и научных учреждений, профили преподавателей, страницы кафедр, институциональные репозитории, журналы на платформе OJS, ORCID, OpenAlex, Google Scholar, ResearchGate, Crossref, PDF научных статей, а также другие открытые академические ресурсы. Приветствуется использование автоматизации (парсинг, API, Python и т.д.), если это не нарушает правила соответствующих сервисов. Основная цель — собрать максимально полную базу контактов из открытых источников.

Необходимо разработать централизованную серверную систему сбора и хранения данных из Planfix, 1С, Meta Ads и Google Ads, а также веб-дашборд для их отображения и анализа. Все данные, история изменений, расчеты и агрегированные показатели должны храниться исключительно в серверной базе данных. Дашборд не должен хранить или дублировать бизнес-данные. Он должен получать необходимую информацию из серверной базы через API в соответствии с запросами пользователя и отображать ее в виде KPI, графиков, таблиц и детализированных отчетов.

Ищем для поддержки проекта на базе Yii , нужно вносить правки и доработки базы, частично есть связь с предыдущим исполнителем .....................