Изменение парсеров - Python
1061 UAH
Здравствуйте.
Есть парсеры сайтов rebuy.de и momox.de используя АПИ, написанные на Python.
Они сделаны 1 год назад. Парсили в xls файл.
Задачи:
1. Проверить работоспособность сайтов и если они не работают - исправить ошибки и привести в рабочее состояние.
2. Изменить на парсинг в БД MySQL вместо ексель файла. Структуру БД предоставлю.
Главная цель - достичь скорости парсинга 400-500 товаров/минута на обоих сайтах при стоимости прокси не более 50$/месяц.
Сейчас используются Backconnect Rotating proxies(40 потоков), раньше на них парсеры давали требуемую скорость.
Приложения 1
Отзыв заказчика о сотрудничестве с Владимиром Назаровым
Изменение парсеров - PythonОчень рад сотрудничеству! Задача выполнена согласно моему ТЗ в полном объёме. Была задержка по времени, но исполнитель всегда был на связи и вносил правки по первому требованию. Рекомендую! Обязательно буду работать в дальнейшем!
Отзыв фрилансера о сотрудничестве с Олександром Л.
Изменение парсеров - PythonХороший заказчик, объяснял и помогал во время процесса разработки.
-
Победившая ставка2 дня1061 UAH
555 35 1 3 Победившая ставка2 дня1061 UAH
Привет, готов проверить api сайтов, Провести тесты, выяснить почему причину медленной скорости и решить ее.
-
3 дня2700 UAH
114 11 1 3 дня2700 UAH
То чувство, когда годно написан код. Возможно обновить прокси надо, это то что бросается в глаза первым. Пишите обсудим сроки.
-
scrapy использовать критично?
-
Нет, главная задача достичь скорости парсинга 400-500 товаров в минуту.
-
мощности сервера?
-
Напишите требуемую
-
Сейчас это Убунту сервер, 4CORES, 12GB RAM
-
Актуальные фриланс-проекты в категории Python
Построить модель классификации клиентов1. Есть данные клиентов в Mongo/SQL (примерно 20 000 записей с сырыми данными). 2. Необходимо на их основе построить фичи и модель классификации клиентов на поведенческие группы. 3. Проект выполнить на Python. AI и машинное обучение, Python ∙ 1 день 15 часов назад ∙ 31 ставка |
ИТ Автоматизация ведения VAT-отчетности
10 000 UAH
Необходимо разработать систему для автоматизации переноса данных о продажах из CRM в бухгалтерскую систему Wafeq. Система должна импортировать банковские и платежные отчеты, автоматически сверять платежи с инвойсами, формировать инвойсы для VAT-отчетности и минимизировать ручную… AI и машинное обучение, Python ∙ 1 день 21 час назад ∙ 41 ставка |
Инструмент сверки счетов с банком, картами и бухгалтеромТехническое задание: инструмент сверки счетов с банком, картами и бухгалтеромОбщая цель Нужен локальный инструмент (скрипт/небольшое приложение на Python), который запускается вручную раз в 1-2 месяца на моём компьютере и делает сверку между: Счетами, которые я выставил клиентам… Python, Десктопные приложения ∙ 2 дня 9 часов назад ∙ 41 ставка |
Автоматическая публикация видео в социальные сети по расписаниюТехническое задание (ТЗ) Автоматическая публикация видео в социальные сети по расписаниюОписание проекта Нужен скрипт/бот (Python предпочтительно, либо любое другое решение на ваш выбор — главное стабильность и простота поддержки), который автоматически публикует видео из папки… Python, Разработка ботов ∙ 2 дня 21 час назад ∙ 59 ставок |
Бот по прийому/пошуку анкет
1250 UAH
Если коротко: Создать бот в котором можна будет создать и найти анкету, бот должен иметь реферальные ссылки, и т д, Всё ниже расписал Бот со стороны клиента: перед кнопкой /старт текст в центре чата: What can this bot do? Добро пожаловать в Sugar Secret Agency! -Сервис… Python, Разработка ботов ∙ 2 дня 23 часа назад ∙ 63 ставки |
Харьков