Создать парсер
34 USDЗадача:
Необходимо спарсить все магазины с маркетплейса : aliexpress.com
Особености:
Парсер должен уметь загружать прокси из текстового файла
Работать в минимум 500 потоков
или же необходимо сделать парсер так что бы его можно было запускать на разных серверах - на каждую суб категорию свой сервер
Параметры для структурирования БД :
(поля)
Категория
Суб-категория
Название магазина
Ссылка на продавца
Дата регистрации
Адрес
Рейтинг
Процент
После прочтения ТЗ большая просьба оценить срок и стоимость разработки заполнив форму : https://forms.gle/m8FnKAquhnu2ksYg6
Алгоритм парсинга :
Открываем таблицу : https://docs.google.com/spreadsheets/d/1NNMMm6w4FqCsWWK79pKbN1DnODru-XDy5iYgzvbGto8/edit?usp=sharing
Берем из нее список категорий и суб категорий
Переходим на страничку суб категории
Переходим на страницу товара
Переходим на страницу продавца
Забираем там все остальные параметры
Переходим на страничку магазина :
Где взять параметры :
Параметр название магазина
Параметры :
дата
адрес
рейтинг
процент 
Current freelance projects in the category Data Parsing
OpenCart — rental catalog of special equipment
135 USD
OpenCart — Equipment Rental Catalog Need to launch an equipment rental catalog on OpenCart. Theme: excavators cherry pickers forklifts generators cranes scaffolding other construction equipment. It is preferable that you already have a ready-made template or developments… Web Programming, Data Parsing ∙ 14 hours 59 minutes back ∙ 42 proposals |
Transfer the program - the server where the program was located has crashed (officially permitted parsing of government data)
47 USD
Hello! My client has encountered the case described below. We need help transferring to a new server and testing the program. It would be better to have a programmer who understands parsing. Software & Server Configuration, Data Parsing ∙ 18 hours 52 minutes back ∙ 23 proposals |
Parsing and classification of a large array of imagesIt is necessary to implement a project for collecting and structuring a large array of architectural images from open web sources.The task includes: automated collection of images; uploading files in the highest available quality; classification of images by categories:… Python, Data Parsing ∙ 19 hours 20 minutes back ∙ 30 proposals |
Parsing Resumes from Work.ua and Rabota.uaIt is necessary to download a database of current resumes from Work.ua and Rabota.ua in Excel format. It is preferable that the Excel file contains the following columns: Name Phone number (in the format +380...) Email Position (profession) Positions considered Category of… Information Gathering, Data Parsing ∙ 1 day 18 hours back ∙ 18 proposals |
Website parsingImplementation of 4 parsers (directory websites) is required. There is a technical specification, and there is a code example as a reference. The tasks include: Writing a parser Integrating a proxy Deduplication logic (transfer the logic from the example) Hashing logic based… Data Parsing ∙ 2 days 11 hours back ∙ 42 proposals |
Kharkiv