Исправить ошибки парсера Python
Здравствуйте.
Есть парсер сайта rebuy.de написанный на Python3, который использует Scrapy, Splash и работает в docker container.
Есть ошибки, которые предыдущий разработчик отказывается исправлять:
1) Ошибка кодировки в данных. Пример:
Вместо слова "Bücher" вставляется "B\u00fccher", вместо символа "<" в логе вставляется "\u003c" и т.д.
Ошибка появилась после последних 2х дней правок, раньше такого не было.
2) Ссылки категорий, заданные для парсинга, имеют параметры/фильтры типа "&priceMin=0&priceMax=10".
При работе парсер использует только первую ссылку с фильтрами из списка, все последующие парсит, отбрасывая фильтры, что приводит к потере товаров, и как следствие - данных.
Current freelance projects in the category Data Parsing
Creation of automatic video shorts
45 USD
What exactly do I need I need to create a light AI agent or content factory 1. This is idea creation Reference https://youtube.com/shorts/omgVX00yaD8?is=1Gz_TUUlftZnkxQv 2. This is text creation 3. This is background creation + text 3. Animating the background while keeping the… AI & Machine Learning, Data Parsing ∙ 3 hours 29 minutes back ∙ 4 proposals |
Parsing company emails from a specific industry
113 USD
Find contacts (e-mail, phone number) of companies engaged in the specified business mentioned in this Google document https://docs.google.com/document/d/1_d-iLxLSL3gjRvo1GmUpWNm0Pm5YoKGcEvaiDc_2I0g/edit?usp=sharing The result should be in the form of a table with the following… Data Parsing ∙ 12 hours 30 minutes back ∙ 25 proposals |
Need a parser for the online store https://www.lcsc.com/It is necessary to regularly (once a month, or upon script launch) obtain up-to-date information about the products available in the store. https://www.lcsc.com/ from the catalog of all sections.… Data Parsing ∙ 1 day 17 hours back ∙ 42 proposals |
OpenCart — rental catalog of special equipment
135 USD
OpenCart — Equipment Rental Catalog Need to launch an equipment rental catalog on OpenCart. Theme: excavators cherry pickers forklifts generators cranes scaffolding other construction equipment. It is preferable that you already have a ready-made template or developments… Web Programming, Data Parsing ∙ 2 days 10 hours back ∙ 58 proposals |
Transfer the program - the server where the program was located has crashed (officially permitted parsing of government data)
46 USD
Hello! My client has encountered the case described below. We need help transferring to a new server and testing the program. It would be better to have a programmer who understands parsing. Software & Server Configuration, Data Parsing ∙ 2 days 14 hours back ∙ 29 proposals |
Kharkiv