Парсинг миллиона записей

Бюджет: 5000 UAH Срок: 3 дня

Здравствуйте.

Разрабатываю ботов и парсеры на NodeJS. Готов взяться. Пишите, обсудим.

Бюджет: 5000 UAH Срок: 3 дня

реализую без проблем, цена с условием что не будет никаких блоков, обращайтесь реализую в удобном для вас стеке

Бюджет: 1600 UAH Срок: 3 дня

Добрый день. Не проблема так сделать, но все же хотел бы сначала посмотреть на таблицу и на JSON. Опыт работы можете посмотреть в истории отзывов.

Бюджет: 3000 UAH Срок: 3 дня

Здравствуйте! 👋

У меня есть опыт разработки систем обработки больших объемов данных (миллионы записей), включая импорт CSV, работу с JSON, оптимизацию MySQL и автоматическое обновление данных по расписанию. Смогу реализовать стабильный процесс обработки вашего файла с ассортиментом и фотографиями.

Как я это реализую:

импорт оригинального CSV (200k записей) в таблицу MySQL с сохранением структуры + поле дата обновления;

обработка JSON по ссылке и извлечение URL всех фото;

запись фото в отдельную таблицу (до 4 млн записей) с привязкой к товару;

оптимизация структуры БД (индексы, пакетные вставки, обработка чанков);

автоматическое обновление данных 5 раз в день через cron;

система логирования, проверки корректности импорта и контроля ошибок;

оптимизация скорости обработки больших объемов данных.

Работал с задачами, где нужно обрабатывать миллионы записей и большие массивы данных, поэтому уделяю особое внимание производительности и стабильности процесса.

Готов обсудить детали структуры CSV и JSON, после чего смогу оценить сроки и бюджет. Развернуть

Бюджет: 3000 UAH Срок: 3 дня

Здравствуйте. Есть опыт с парсингом csv и json. Готов сделать структурированную бд, но сначала хотелось бы увидеть структуру csv, также смогу предоставить скрипт, если в csv с этой структурой будет добавляться информация.

Бюджет: 5000 UAH Срок: 2 дня

Добрый день, Дмитрий
У меня углубленные знания MySQL и работы с подобным парсингом.
Обращайтесь, помогу сделать решение, которое работает быстро и надежно.
Жду обратной связи.

Бюджет: 700 UAH Срок: 2 дня

Готов взять на себя.
Но нужно уточнить детали заказа, пишите!
Реализую скриптом на python.

Бюджет: 5000 UAH Срок: 3 дня

Здравствуйте, Дмитрий. У меня есть соответствующий опыт для реализации данного проекта.

Бюджет: 3000 UAH Срок: 3 дня

Здравствуйте! 🚀

У меня есть опыт работы с большими объемами данных: импорт CSV на сотни тысяч записей, обработка JSON по ссылкам, загрузка миллионов строк в MySQL, построение стабильных ETL/парсинг pipeline с обновлением по расписанию, логированием, механизмом повторной попытки и контролем целостности данных. Для вашей задачи я могу реализовать быструю систему загрузки ассортимента, вынесение фото в отдельную таблицу, обновление 5 раз в день.

Стек, который я буду использовать:

Backend: Python, MySQL, asyncio / aiohttp, multiprocessing
Интеграции: CSV импорт pipeline, JSON парсинг, cron / планировщик, логирование, повторная попытка / мониторинг
Инфраструктура: Docker, VPS / сервер, Redis (по необходимости), CI/CD

Готов обсудить детали проекта в личных сообщениях и готов приступить к работе.

С уважением, Андрей! Развернуть

Бюджет: 1500 UAH Срок: 2 дня

Добрый день. Буду рад сотрудничеству. У меня хороший опыт в парсинге данных из файлов.

Бюджет: 3000 UAH Срок: 2 дня

Доброго дня, Дмитрий!

У нас есть опыт работы с большими массивами данных — парсинг Google Maps на 200K+ записей с обработкой JSON-ответов, загрузка в PostgreSQL с дедупликацией и инкрементальным обновлением.

По вашей задаче:
1. Импорт CSV (200K строк, 10+ колонок) в MySQL с индексами для быстрого поиска + колонка даты обновления
2. Парсинг JSON с ссылок → отдельная таблица фото (2-4 млн записей) с FK на основную таблицу
3. Автоматическое обновление 5 раз/день по расписанию (cron) с логированием и проверкой целостности

Для быстрой обработки миллионов записей используем batch-insert (LOAD DATA / bulk insert), параллельную обработку JSON и мониторинг процесса.

Готовы показать пример подхода после просмотра CSV и JSON. Предлагаем работу через Сейф. Развернуть

Бюджет: 4000 UAH Срок: 1 день

Добрый день. Готов выполнить данный проект, имею большой опыт разработки приложений.

Бюджет: 1500 UAH Срок: 3 дня

Добрый день. У меня есть опыт выполнения подобных задач по обработке csv и json. Желательно посмотреть образец данных. Буду рад помочь.

Бюджет: 3000 UAH Срок: 3 дня

Здравствуйте. Большой опыт работы с базами данных mysql. Весь проект сделаю на пхп, обращайтесь

Бюджет: 1000 UAH Срок: 3 дня

Добрый день!

У меня значительный опыт работы с проектами, которые требуют быстрой обработки миллионов записей, включая эффективный парсинг данных из API и работу с MySQL. Готов реализовать ваше задание по обновлению ассортимента и фото.

Напишите мне в личные сообщения, уточним детали.

Бюджет: 3000 UAH Срок: 2 дня

Добрый день
Заинтересовал ваш проект.
Хотелось бы обсудить все более детально.

Бюджет: 3000 UAH Срок: 2 дня

Здравствуйте! Более 3 лет занимаюсь парсингом данных. Реализовывал похожий проект, но там вместо изображений мы работали с архивами.

Смогу реализовать все быстро и качественно! Как только обсудим детали - начинаю работать.