Создать парсер
1500 UAHЗадача:
Необходимо спарсить все магазины с маркетплейса : aliexpress.com
Особености:
Парсер должен уметь загружать прокси из текстового файла
Работать в минимум 500 потоков
или же необходимо сделать парсер так что бы его можно было запускать на разных серверах - на каждую суб категорию свой сервер
Параметры для структурирования БД :
(поля)
Категория
Суб-категория
Название магазина
Ссылка на продавца
Дата регистрации
Адрес
Рейтинг
Процент
После прочтения ТЗ большая просьба оценить срок и стоимость разработки заполнив форму : https://forms.gle/m8FnKAquhnu2ksYg6
Алгоритм парсинга :
Открываем таблицу : https://docs.google.com/spreadsheets/d/1NNMMm6w4FqCsWWK79pKbN1DnODru-XDy5iYgzvbGto8/edit?usp=sharing
Берем из нее список категорий и суб категорий
Переходим на страничку суб категории
Переходим на страницу товара
Переходим на страницу продавца
Забираем там все остальные параметры
Переходим на страничку магазина :
Где взять параметры :
Параметр название магазина
Параметры :
дата
адрес
рейтинг
процент 
Актуальные фриланс-проекты в категории Парсинг данных
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 16 часов 5 минут назад ∙ 42 ставки |
Перенести программу - слетел сервер, где была программа (официальный разрешенный парсинг гос данных)
2066 UAH
Добрый! У меня у клиента произошел данный кейс описанный ниже. Нужно помочь перенести на новый сервер и оттестировать программу. Лучше программист, который разбирается в парсинге. Настройка ПО и серверов, Парсинг данных ∙ 19 часов 58 минут назад ∙ 25 ставок |
Парсинг и классификация большого массива изображенийНеобходимо реализовать проект по сбору и структурированию большого массива архитектурных изображений из открытых веб-источников.Задача включает: автоматизированный сбор изображений; загрузка файлов в максимально доступном качестве; классификацию изображений по категориям:… Python, Парсинг данных ∙ 20 часов 26 минут назад ∙ 30 ставок |
Парсинг Резюме Work.ua та Rabota.uaНеобходимо загрузить в формате Excel базу актуальных резюме с Work.ua и Работа.ua. Желательно, чтобы файл Excel содержал следующие столбцы: Имя Номер телефона (в формате +380...) Электронная почта Должность (профессия) Должности, которые рассматривает Категория сферы… Поиск и сбор информации, Парсинг данных ∙ 1 день 20 часов назад ∙ 18 ставок |
Парсинг сайтаТребуется реализация 4 парсеров (сайты каталоги) Есть тз, есть пример кода как референс . В задачи входит: Написать парсер Прикрутить прокси Логика дедубликации (перенести логику из примера) Логика хешированя по 3 полям Парсер должен работать как пайплайн с логикой что… Парсинг данных ∙ 2 дня 12 часов назад ∙ 42 ставки |
Харьков