Бюджет: 500 USD Срок: 20 дней
Здравствуйте.
Я NodeJS разработчик. Готов взяться. Пишите, обсудим.
Разработать автоматизированную систему парсинга с автоаукциона Copart, которая будет сохранять данные в централизованную реляционную базу данных PostgreSQL и предоставлять API для сайта-каталога.
Язык и фреймворк: Python 3.10+, Django Rest Framework
Парсинг: Selenium + Undetected ChromeDriver, Requests, BeautifulSoup
Фоновые задачи: Celery + Redis
Хранение данных: PostgreSQL
Докеризация: по желанию (Docker + docker-compose)
Логирование: JSON-логи + отчёты об ошибках
Авторизация: при необходимости (в аукционах)
Прокси: обязательны
Антикапча: поддержка 2Captcha или аналога
| Поле | Описание |
|---|---|
| Марка и модель | Например: "Toyota Camry" |
| Год выпуска | 2019, 2020 и т.д. |
| Пробег | В милях или километрах |
| Цена продажи | В долларах или AED |
| VIN | Уникальный идентификатор автомобиля |
| Состояние | Битый / целый / повреждения |
| Локация | Страна / город / склад |
| Топливо | Бензин / дизель / электричество и т.д. |
| Трансмиссия | Автомат / механика |
| Дата продажи | Уточняется из источника |
| Фото (5+) | Ссылки на изображения |
| Ссылка на лот | Прямая ссылка на источник |
Работа по расписанию (cron/Celery Beat)
Многопоточность и масштабируемость
Возможность повторного запуска (например, manage.py parse --source copart)
API-эндпоинты:
/api/cars/ — список
/api/cars/<vin>/ — карточка
Фильтрация: марка, модель, год, пробег, тип топлива и т.д.
Документация API (Swagger/OpenAPI)
Документированная структура базы данных
Возможность расширения на новые аукционы
Возможность ручного запуска задач
Защита от дубликатов (VIN + дата продажи)
Уведомления о сбоях (опционально — Telegram, email)
✔ Рабочий парсер
✔ Данные ежедневно сохраняются в PostgreSQL
✔ API-эндпоинты с фильтрацией
✔ Документация и инструкция по запуску
Бюджет: 500 USD Срок: 20 дней
Здравствуйте.
Я NodeJS разработчик. Готов взяться. Пишите, обсудим.
Бюджет: 500 USD Срок: 30 дней
Здравствуйте!
Ознакомился с вашим техническим заданием по разработке парсера для автоаукциона IAAI и построению API на Django REST Framework. Задача хорошо проработана, и я готов реализовать её в полном соответствии с требованиями.
Что сделаю:
Парсер с использованием Selenium, Requests и BeautifulSoup для сбора всех необходимых данных с автоаукциона.
Организацию фоновых задач через Celery + Redis с поддержкой расписания (Celery Beat).
Хранение данных в PostgreSQL с учётом защиты от дубликатов (VIN + дата продажи).
REST API с фильтрацией по основным параметрам, документацией Swagger/OpenAPI.
Поддержку прокси и антикапчу (2Captcha или аналог).
Возможность расширения на другие аукционы и ручной запуск задач.
Логирование в формате JSON и уведомления о сбоях (Telegram/email по желанию).
Опциональную докеризацию (Docker + docker-compose).
Технологии: Python 3.10+, Django REST Framework, PostgreSQL, Celery, Redis, Selenium.
Сроки и бюджет:
Ориентировочно 3–4 недели на полный цикл разработки с тестированием. Стоимость обсуждается в зависимости от деталей и объема.
Готов обсудить детали, предоставить план работы и этапы.
Бюджет: 500 USD Срок: 30 дней
Здравствуйте!
Мы очень заинтересованы вашим проектом. Наша команда, состоящая из опытных разработчиков и UI/UX дизайнеров, имеет богатый опыт в создании крупных и масштабируемых платформ. Мы специализируемся на разработке надёжных, высокопроизводительных и интуитивно понятных решений, соответствующих самым современным стандартам.
Мы используем передовые технологии:
Фронтенд: React и Next.js
Бэкенд: Java, Spring Boot, Microservices
Дизайн: Наш UI/UX дизайнер гарантирует эстетику и удобство использования.
Прочее: PostgreSQL, MongoDB, Redis, AWS/GCP/Azure, Docker, Kubernetes.
Мы успешно реализовали ряд сложных проектов в финтехе, e-commerce, SaaS, создавая высоконагруженные и масштабируемые системы. Готовы показать релевантные кейсы при личном общении.
Уверены, наш опыт и комплексный подход помогут успешно реализовать ваш проект. Будем рады обсусить детали и стоимость!
Бюджет: 500 USD Срок: 7 дней
Привет! У меня уже есть опыт работы с аукционом copart и я готов выполнить проект для вас!
Похожий проект: Дописать метод C# WinForms, сохранения в текстовый файл
Бюджет: 500 USD Срок: 40 дней
Добрый день
Сделаю парсер Copart и интегрирую его в среду структуры базы данных которая будет подключена в финальную версию сайта интегрирующую между собой 3 парсера на 3 разных сайта а также сам сайт
Спасибо
Бюджет: 500 USD Срок: 15 дней
Добрый день. Имею большой опыт в создании парсеров, а также в использовании django/drf. Обращайтесь.
Бюджет: 500 USD Срок: 13 дней
Привет! Мы, компания SolidWay, готовы помочь с разработкой автоматизированной системы парсинга с автоаукциона Copart и созданием базы данных. У нас есть опыт в реализации подобных проектов, включая использование Python, Django и работы с PostgreSQL, что позволит эффективно решить поставленные задачи.
Мы хорошо разбираемся в парсинге с помощью Selenium и других библиотек, а также в организации фоновых задач с Celery и Redis. Наша команда сможет внедрить API для вашего сайта-каталога и обеспечить надежное хранение данных.
Мы обсудим все детали проекта, чтобы определить временные рамки и бюджет после того, как проясним задачи более подробно. Будем рады сотрудничать!
Здравствуйте, Раман. У меня вопрос по некоторым расходам на тестирование и разработку ПО. Аренда сервера, оплата сервиса по решению капчи и покупка прокси трафика. Как будут оплачиваться эти расходы? Например, корпоративные прокси с ротацией стоят в районе $0.6/GB, а мобильные уже 6$/GB.
Нужна поддержка программы самотуру, серверов каталогизаторов баз данных и сервера онлайн. Серверов баз данных 5 шт.
База клиентов собиралась несколько лет из разных источников, поэтому телефоны записаны в разных форматах, один клиент существует под несколькими ID, города введены вручную разными языками, область почти нигде не заполнена. Из-за этого невозможно нормально сегментировать базу. Что нужно сделать: 1. Аудит базы (оплачивается отдельно, первый этап). Сколько карточек, сколько телефонов вне формата, сколько дублей, сколько уникальных написаний городов. По результатам — уточненная оценка остальных работ. 2. Стандартизация телефонов. Все номера привести к формату +380XXXXXXXXX. Номера, которые невозможно однозначно распознать, — не удалять и не угадывать, а вынести в отдельный список. 3. Слияние дублей. Правило: один номер телефона = один ID клиента. При этом одному клиенту может принадлежать неограниченное количество номеров. История заказов, email, адреса, теги и кастомные поля должны сохраниться. 4. Разбор карточек, на которых «навешано» много номеров. 5. Города и области. Названия населенных пунктов — из единого справочника на украинском (API Новой Почты или КАТОТТГ). Область должна заполняться всегда, чтобы одним фильтром можно было выгрузить всех клиентов Киева и области, а не отдельно Бровары, отдельно Ирпень и т.д. 6. Защита от повторного засорения: нормализация телефона и города на входе (формы сайта, интеграции, ручной ввод) + регулярная фоновая проверка новых записей. Требования: — практический опыт работы с API SIMLA / RetailCRM (v5): выгрузка, обновление, объединение карточек, лимиты запросов; — опыт задач с дедупликацией данных; — понимание украинских адресных справочников. Условия работы: полный бэкап до любых изменений; сначала dry-run с отчетом о запланированных изменениях на согласование, и лишь потом запуск на боевой базе; лог всех операций с возможностью отката. Без безвозвратных удалений без согласования. В отзыве напишите: — сроки и стоимость
Необходимо разработать централизованную серверную систему сбора и хранения данных из Planfix, 1С, Meta Ads и Google Ads, а также веб-дашборд для их отображения и анализа. Все данные, история изменений, расчеты и агрегированные показатели должны храниться исключительно в серверной базе данных. Дашборд не должен хранить или дублировать бизнес-данные. Он должен получать необходимую информацию из серверной базы через API в соответствии с запросами пользователя и отображать ее в виде KPI, графиков, таблиц и детализированных отчетов.
Ищем для поддержки проекта на базе Yii , нужно вносить правки и доработки базы, частично есть связь с предыдущим исполнителем .....................
Необходимо сделать миграцию базы из CRM G-PLUS на MyChatBot Объем базы - 26 тыс. лидов 2 воронки - Кол центр и Отдел продаж со своими воронками Карточки лидов (кроме имени и номера) имеют много различных полей Лиды также имеют голосовые записи звонков. Их также нужно перенести От кандидата ожидаю ориентировочную сумму и сроки реализации