Парсер досок объявлений
Здравствуйте.
Нужен парсер ОЛХ (разные страны) и АВИТО. В идеале сбор всей информации (фото, текст, ссылка, контакты) с объявлений. Мы ему ссылку на рубрику любого вида - он нам таблицу ексель в удобочитаемом виде.
Интересует приложение с интерфейсом. Идеальнее, если будет работать на сервере в многопотоке с админкой. Интересует возможность работать с скриптом нескольким сотрудникам, по логину и паролю.
В админке мы хотим иметь возможность создавать личные кабинеты пользователей и удалять их. А также ограничивать по количеству или времени парсинга. Например: дали доступ сотруднику и ограничили его на использование: например, не более 10 000 объявлений. Он зашёл, смог установить по своему направлению парсинг, получил результат и ничего своего парсить не может. Чтобы сотрудник не мог парсить данные, которые не нужны нам и продавать их.Ограничение на аккаунт. Ссылок может быть несколько. Аккаунт остаётся активным, но не может работать.
Соответственно нужна админка глобальных администраторов, в которой сможем открывать доступ к парсингу аккаунтам сотрудников через установку лимита.
Итого мы должны получить:
1. Парсер OLX
2. Парсер Avito
3. Панель управления с оговоренным ранее функционалом
- Панель администратора для отслеживания данных парсинга и управления аккаунтами пользователей.
- Панель пользователей для создания задач по парсингу.
Если поняли, о чём мы, и сможете сделать, ответьте пожалуйста.
Если есть ещё вопросы, задайте их.
-
Цифры и желания запредельные.
У меня есть готовый под олх и недоделанный авито (заказчик отказался), только не с такими характеристиками по объёму и многопоточности.
-
Запредельные, исходя из чего?) Из Вашего опыта и знаний)
Пришлите пожалуйста в ЛС подробное описание того, что у вас есть готовое
-
Актуальные фриланс-проекты в категории Парсинг данных
Нужен парсер интернет-магазина https://www.lcsc.com/нужно регулярно (1 раз в месяц, или по запуску скрипта) получать актуальную информацию о товарах в наличии магазина https://www.lcsc.com/ из каталога всех разделов… Парсинг данных ∙ 1 час 2 минуты назад ∙ 17 ставок |
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 17 часов 29 минут назад ∙ 43 ставки |
Перенести программу - слетел сервер, где была программа (официальный разрешенный парсинг гос данных)
2066 UAH
Добрый! У меня у клиента произошел данный кейс описанный ниже. Нужно помочь перенести на новый сервер и оттестировать программу. Лучше программист, который разбирается в парсинге. Настройка ПО и серверов, Парсинг данных ∙ 21 час 22 минуты назад ∙ 25 ставок |
Парсинг и классификация большого массива изображенийНеобходимо реализовать проект по сбору и структурированию большого массива архитектурных изображений из открытых веб-источников.Задача включает: автоматизированный сбор изображений; загрузка файлов в максимально доступном качестве; классификацию изображений по категориям:… Python, Парсинг данных ∙ 21 час 50 минут назад ∙ 30 ставок |
Парсинг сайтаТребуется реализация 4 парсеров (сайты каталоги) Есть тз, есть пример кода как референс . В задачи входит: Написать парсер Прикрутить прокси Логика дедубликации (перенести логику из примера) Логика хешированя по 3 полям Парсер должен работать как пайплайн с логикой что… Парсинг данных ∙ 2 дня 13 часов назад ∙ 42 ставки |
Одесса