Нужен разработчик для завершения и интеграции проекта по автоматическому сбору и обработке данных

Бюджет: 27000 UAH Срок: 28 дней

Приблизительно вижу бюджет от 130000 грн и срок от 4 недель. 700 грн здесь, кажется, не покрывают даже техническую проверку текущего парсера - задача шире, так как есть сервер, браузерная автоматизация, импорт в базу, защита от дублей и закрытая часть сайта =/

Я бы разделил работу на 2 этапа. Сначала технический аудит и стабилизация парсера на Windows-сервере, запуск по расписанию, журналы, сохранение и передача файлов через FTP или SFTP. Затем - обработка CSV/JSON на стороне сайта, справочники, основная таблица, права доступа, фильтры, поиск, сортировка и пагинация.

> Уточнение 1 - на чем сейчас работает сайт - PHP, Laravel, WordPress, другой движок или собственная разработка
> Уточнение 2 - нужно только импортировать новые записи или также обновлять старые записи при изменении данных

Имеем опыт в похожих системах, где важна не просто разработка экрана, а стабильная обработка данных и логика работы
> https://business.ingello.com/forma-bpm - автоматизация бизнес-процессов и работа с данными
> https://business.ingello.com/platforma - корпоративная платформа с ролями, кабинетами и прикладной логикой
> https://business.ingello.com/iks - CRM/ERP под реальные операционные процессы

Главный профиль Ingello для биржи - https://systems-fl.ingello.com/ua

Для старта нужны текущие скрипты, примеры CSV/JSON, описание таблиц или доступ к базе, доступ к тестовому сайту и параметры Windows-сервера. После просмотра материалов дам более точную оценку по этапам - можно не усложнять, но архитектуру импорта лучше сделать нормально с первого раза, так как скупой платит дважды. Развернуть

Бюджет: 5000 UAH Срок: 7 дней

Доброго дня.

Можу взяти проект у роботу та довести його до повної інтеграції.

З опису бачу, що основний парсер уже реалізований, тому задача більше не в написанні всього з нуля, а в стабільному розгортанні, автоматизації та підключенні до сайту.

Що зроблю:
— перенесу готові скрипти на віддалений Windows-сервер;
— налаштую Microsoft Edge / браузерну сесію для роботи через CDP;
— налаштую запуск за розкладом через Task Scheduler;
— додам або перевірю логування;
— налаштую збереження CSV/JSON та передачу копій на FTP/SFTP;
— реалізую обробку файлів на стороні сайту;
— зроблю перевірку дублів і запис даних у базу;
— підтримаю довідники та основну таблицю;
— розроблю закриту частину сайту для авторизованих користувачів;
— додам таблицю, фільтри, пошук, сортування та пагінацію.

Також зможу спочатку швидко переглянути поточні скрипти, структуру CSV/JSON і сайт, щоб не переписувати те, що вже працює, а акуратно інтегрувати готову логіку.
Після перегляду коду та структури даних зможу точніше підтвердити обсяг. Развернуть

Бюджет: 700 UAH Срок: 7 дней

Добрый день, Alexandr!

Я вижу, что другие уже откликнулись на Ваш проект, но постараюсь добавить ясности.

Несколько кейсов:
- ⭐689% прироста трафика за 3 месяца!⭐
- ⭐Рост трафика на 4854% за 15 месяцев⭐

Пока что воздержусь от предложения, так как нет полной картины для конкретики.

Для лучшего понимания Ваших целей, пожалуйста, уточните:
- Сроки завершения интеграции?
- Есть ли детальное ТЗ?
- Какова цель конечного продукта?
- Есть ли готовые скрипты для обработки данных?
- Вы рассматриваете уникальный дизайн или шаблон?

На стоимость и сроки влияют:
1. Настройка парсера на сервере.
2. Интеграция и обработка данных.
3. Разработка закрытой части сайта.
4. Автоматизация процессов.
5. Наличие технического задания.

Важно сформировать итоговое видение интеграции и автоматизации системы. Я отдаю предпочтение формированию такого видения на основе анализа существующих решений и Ваших пожеланий. Это позволит понять, какие решения уже реализованы, и как их улучшить.

Следующий шаг - обсудить проект и понять, насколько мы подходим друг другу. Давайте зафиксируем детали в переписке или на встрече, чтобы лучше понять ваши потребности.

Ваш проект по автоматизации сбора и обработки данных имеет потенциал для повышения эффективности бизнес-процессов. Имея опыт работы с PHP и веб-программированием, я понимаю важность интеграции и настройки системы для бесперебойной работы и соответствия вашим требованиям. Развернуть

Бюджет: 700 UAH Срок: 1 день

С вашим стеком смогу сделать и запросы, цена 50$, но для более четкой оценки нужно видеть проект и сам парсер.

Бюджет: 7000 UAH Срок: 8 дней

Добрый день! Берусь выполнить под ключ — именно такая связка (готовый парсер → обработка → закрытый кабинет на сайте) у нас профильная, делал подобные интеграции.

Разложу по вашим трём блокам, чтобы было видно, что понял задачу:
1. Парсер на Windows-сервере — перенесу скрипты, настрою Edge-сессию под CDP, запуск по расписанию через Task Scheduler, логирование и выгрузка результатов на FTP/SFTP.
2. Обработка на стороне сайта — прием файлов с FTP/SFTP, разбор CSV/JSON, проверка на дубликаты, запись в БД с справочниками и основной таблицей.
3. Закрытая часть — авторизация, таблица данных с фильтрами по нескольким параметрам, поиск, сортировка, пагинация.

Ориентировочно весь объем — около 7000 грн, срок примерно 8 рабочих дней. Точную цифру дам после того, как гляну ваши скрипты и структуру данных. Стартовать могу с деплоя парсера, чтобы данные пошли как можно быстрее.

Два уточнения, чтобы оценка была честной: на каком стеке сейчас сайт, куда встраивать закрытую часть, и будет ли доступ по RDP к Windows-серверу для настройки парсера?

У меня есть живые демо наших ботов и веб-кабинетов — могу скинуть в чат, чтобы вы посмотрели качество работы. Развернуть

Бюджет: 27000 UAH Срок: 30 дней

У нас уже есть почти готовое похожее решение - браузерный сбор через живую сессию, обработка CSV/JSON, импорт в базу и закрытый кабинет с таблицами, поэтому можем быстро адаптировать под ваш сервер и сайт, можем обсудить детали здесь на бирже, я на месте ))
Бюджет 700 грн не соответствует такому объему, даже если часть парсера уже готова.
По стоимости - предварительно от 120000 грн за полный объем, реальнее считать после просмотра скриптов, структуры файлов и кода сайта.
По срокам - 25-35 рабочих дней, если текущий парсер стабильный и не нужно переписывать его логику с нуля.
Вижу реализацию так - сначала стабилизируем Windows-сервер, Microsoft Edge, расписание, логи и FTP/SFTP, далее делаем импорт с проверкой дублей, справочники и основную таблицу, после этого закрытый раздел с правами, фильтрами, поиском, сортировкой и пагинацией.
От вас понадобятся доступы к Windows-серверу, текущему сайту, FTP/SFTP, примеры CSV/JSON и текущие скрипты.
- Есть ли уже готовая база сайта и технология сайта, например PHP, Laravel, WordPress или другое?
- Нужно ли только показывать импортированные данные, или еще редактировать их в кабинете?
Схожие примеры:
- https://business.ingello.com/platforma - корпоративная система с отделами, ролями и данными
- https://business.ingello.com/forma-bpm - процессы, справочники, таблицы и управление бизнес-данными
- https://business.ingello.com/vorfahr - автоматизация, SaaS и сложная обработка данных
Наш профиль для FLH - https://systems-fl.ingello.com/ua Развернуть

Бюджет: 8000 UAH Срок: 8 дней

Могу сделать.

Для адекватной оценки нужно посмотреть, как сейчас сделан сайт, все задачи довольно типовые, но нужны подробности.

Что логировать, как обрабатывать данные на стороне сайта и другое. Возможно, эти вопросы отпадут после просмотра того, что есть на данный момент.

Бюджет: 777 UAH Срок: 1 день

Добрый день.
Наша команда имеет многолетний опыт в разработке ERP, CRM, CMS и специализированного программного обеспечения для бизнеса. Мы создаем эффективные цифровые решения, которые помогают автоматизировать процессы, повышать продуктивность и масштабировать компании.

Работаем с современными технологиями — от ботов и скриптов до AI-агентов и аналитических систем. Разрабатываем сайты различной сложности. В нашем портфолио — реализованные ERP-решения для гостиничного бизнеса, а также для компаний, занимающихся импортом и продажей товаров, а также собственный продукт XFitness — ERP-система, созданная специально для фитнес-клубов.

Готовы реализовать ваш проект и предложить лучшее решение именно для ваших потребностей.
Наше портфолио: Freelancehunt

Мы специализируемся в таких сферах:
-Разработка ERP Систем
-Разработка CRM Систем
-Разработка Веб-Сайтов любой сложности
-Разработка CMS Систем
-Поддержка Веб-Сайтов
-Разработка OpenCart
-Поддержка OpenCart
-Модификация OpenCart
-Доработка OpenCart
-Разработка WordPress
-Поддержка WordPress
-Модификация WordPress
-Доработка WordPress
-Разработка ECommerce
-Поддержка ECommerce
-Модификация ECommerce
-Доработка ECommerce
-Разработка Веб-Приложений
-Поддержка 1С Серверов
-Поддержка Веб-Серверов
-Разработка мобильных приложений
- Парсинг данных
-Разработка ботов
-Разработка AI-агентов

и на таких технологиях:
- Python
-PHP
-Laravel
-Symfony
-Yii2
-JS
-NodeJS
-jQuery
-TypeScript
-MySQL
-HTML
-CSS
-Vue
-Nuxt.js
-React
-React Native
-C++ Развернуть

Бюджет: 700 UAH Срок: 2 дня

Работал с подобными вещами: управление браузером через CDP, обход антибот-защиты через живую сессию, всё это знакомо. Судя по описанию, основная трудность сейчас скорее всего в стабильности сессии и корректной обработке собранных данных перед тем, как они куда-то уходят дальше. Куда в итоге должны попадать данные: в базу, в Excel, в какую-то систему или дальше по API?

Бюджет: 700 UAH Срок: 1 день

Добрый день!

Посмотрел задание — основную часть (сам парсер) у вас уже сделано, так что здесь скорее доработка и интеграция, чем разработка с нуля. Это как раз мой набор: деплой автоматизации + обработка данных + закрытая веб-часть. Разложу по тому, что осталось:

1. Парсер на удаленном Windows-сервере. Перенесу скрипты, настрою Edge и браузерную сессию (CDP), запуск по расписанию через Task Scheduler, логирование, сохранение результатов и передача копий на FTP/SFTP. Здесь работы немного — парсер готов, нужно корректно "посадить" его на сервер и автоматизировать.

2. Обработка данных на стороне сайта. Забор файлов с сервера/FTP, парсинг CSV/JSON, проверка и устранение дублей, запись в базу, поддержка справочников и основной таблицы. Поскольку данные уже приведены к структуре — это упрощает.

3. Закрытая часть сайта. Авторизация, таблица с данными, фильтры по нескольким параметрам, поиск, сортировка, пагинация, удобное отображение. Это основной объем новой работы.

Чтобы дать точную цифру (а не «с потолка»), мне важно знать: на чем сайт и какая база, сервер уже есть с доступом, и приблизительный объем данных. От этого зависит и цена, и срок — нарочно не завышаю, посчитаю под реальный объем.

С чего удобнее стартовать — с деплоя парсера на сервере или сразу с обработки данных и закрытого интерфейса?
Детали по проекту сможем обсудить в личных сообщениях) Развернуть

Бюджет: 7000 UAH Срок: 10 дней

Добрый день, Александр.

Парсер работает через живую сессию Edge по CDP — сайт ловит прямые HTTP-запросы, поэтому так и сделано. Перед тем как сразу переносить на Windows-сервер, посмотрю на текущие скрипты: есть шанс переписать под Playwright с stealth-режимом на обычном Linux-VPS (~4$/мес вместо ~12$). Если сработает — проще и дешевле. Если нет — разворачиваем на Windows как есть.

Что сделаю:

разберусь с текущими скриптами, проверю, можно ли упростить подход;
настрою запуск по расписанию, логирование, сохранение результатов и передачу на FTP/SFTP;
обработка данных: забор с FTP/SFTP, разбор CSV/JSON, проверка дублей, запись в БД, поддержка справочников и основной таблицы;
закрытая часть сайта: авторизация, таблица с фильтрами по нескольким параметрам, поиск, сортировка, пагинация.
Стоимость: 7 000 грн.
Срок: 7–14 дней.

Готов посмотреть файлы и скрипты — уточним детали. Развернуть

Бюджет: 10000 UAH Срок: 7 дней

Здравствуйте!

Из описания вижу, что основная часть сбора данных уже реализована, а ключевое задание сейчас - довести весь процесс до стабильной автоматизированной системы: от запуска парсера и обработки файлов до сохранения данных и удобного интерфейса для работы пользователей.

Работал с PHP-проектами, интеграциями, автоматизацией обработки данных, работой с базами данных и серверной настройкой. Могу подключиться к проекту, разобраться в текущей реализации и аккуратно завершить отсутствующие части без необходимости переписывать уже готовый функционал.

Бюджет: 700 UAH Срок: 2 дня

Здравствуйте! У меня есть профиль в скрейпинге данных, также я разработал не один парсер, могу показать для примера: на scrapper, playwright, selenium и т.д. Обращайтесь, сначала составим более четкое ТЗ проекта и обещаю в дальнейшем сделать все в срок и в полном объеме.

Бюджет: 700 UAH Срок: 7 дней

Привет! Могу выполнить задание. Разрабатывал подобную штуку на Rust + Chrome driver. Сохранял данные в CSV, json также читал и писал в эти форматы + работа с базой. Имею опыт работы с разными языками и технологиями. Также писал расширения для парсинга данных с сайта.

Бюджет: 3000 UAH Срок: 5 дней

Здравствуйте! Специализируюсь именно на парсерах через живую сессию браузера по CDP — когда антибот режет прямые запросы, управляю вкладкой Edge через DevTools Protocol, как у вас и сделано. Подниму готовые скрипты на Windows-сервере с расписанием, логами и выгрузкой на FTP — сделаю. Закрытая часть сайта с таблицей, фильтрами и поиском — отдельный блок, его тоже беру. Только 700 грн выглядит как цена за один этап, а тут три — это бюджет за весь объем или поэтапно? Распишем по шагам.

Бюджет: 4002 UAH Срок: 18 дней

Как я вижу работу по блокам

1. Windows-сервер (парсер)
Переношу скрипты, настраиваю Edge с CDP (обычно Edge в headless или с постоянной сессией — зависит от того, как сайт держит антибот). Task Scheduler для запуска по расписанию, ротация логов, сохранение CSV/JSON в стабильную папку, отправка копий на FTP/SFTP. После настройки — 2–3 тестовых прогона и короткий runbook, чтобы можно было перезапустить без меня.

2. Импорт на стороне сайта
Скрипт/cron, который забирает файлы (с сервера или FTP), парсит CSV/JSON, проверяет дубликаты (по ключу, который согласуем — дата + ID записи или хеш строки), обновляет справочники и основную таблицу. Ошибочные файлы — в отдельную папку + запись в лог, чтобы не сломать всю базу.

3. Закрытая часть сайта
Логин для авторизованных, таблица с данными, фильтры, поиск, сортировка, пагинация. Без лишнего — чтобы конечный пользователь мог быстро найти нужное, а не листать тысячи строк.

Бюджет: 700 UAH Срок: 3 дня

Здравствуйте. Вы уже используете конкретный фреймворк для бэкенда сайта или планируете выбрать его в процессе?

Детали по срокам и бюджету сообщу в личной переписке.

1. Я перенесу скрипты на Windows-сервер и настрою стабильную сессию Microsoft Edge через DevTools Protocol.
2. Я реализую обработку CSV/JSON, проверку на дубликаты и запись в базу сайта с поддержкой справочников.
3. Я разработаю закрытый интерфейс с таблицей, фильтрами, поиском, сортировкой и пагинацией.

Спасибо за рассмотрение моего предложения. Я с нетерпением жду возможности сотрудничества с вами!

Бюджет: 10000 UAH Срок: 7 дней

Обращайтесь, сделаю
-----------------------------------------------------

Бюджет: 5000 UAH Срок: 3 дня

Здравствуйте. Хотелось бы больше деталей, а именно что за донор? То как сделан парсер у вас сейчас это баловство. Нужно понять действительно ли донор не возможно парсить обычными get запросами. Обращайтесь.

Бюджет: 1000 UAH Срок: 2 дня

Мы имеем опыт работы с CDP и автоматизацией браузерных сессий для обхода антибот-защиты. Реализуем интеграцию через стабильное управление сессией Edge, обеспечив корректную обработку данных и их передачу в целевую систему. Готовы оперативно завершить текущие скрипты и настроить их взаимодействие.