Спайдер на Scrapy
Сделать простейший спайдер на scrapy
Спайдеру передается адрес сайт и css селектор для страниц, которые необходимо найти
Спайдер обходит все страницы сайта, на каждой странице находит все ссылки на этот же сайт.
Все ссылки пишет в базу mysql ( или в ту, которую вы считаете оптимальной для этой задачи)
Если на странице есть указанный css селектор, страница сохраняется.
Все выполняется до полного обхода сайта.
Релизовать необходимо на последних стабильных версиях python и scrapy
Помочь развернуть и запустить проект на windows 8
-
2 days22 USD
231 4 0 2 days22 USD
Добрый день.
Имею огромный опыт в разработке парсеров / пауков на python с использованием scrappy в том числе. Готов реализовать данный проект.
-
1 day44 USD
1825 26 1 1 1 day44 USD
Здравствуйте, могу реализовать на scrapy и сделать небольшой мануал как запустить на виндовс, также я б предложил использовать postgresql в качестве базы.
-
3 days22 USD
143 3 days22 USD
готов обсудить, есть опыт работы с python/scrapy, c виндовсом не работал, но думаю проблем не составит, помогу запутить на виндовс, обращайтесь
Current freelance projects in the category Python
Creation of a multifunctional bot in Telegram
22 USD
(I will provide all materials in private messages) Here is a detailed project description: After pressing the button /start The bot sends a text with rules and terms of use (under the text, the button ‘acknowledged’) After pressing the button, the next message is… Python, Bot Development ∙ 2 days 1 hour back ∙ 92 proposals |
Find a product feed (Google Merchant XML) for a website on OpenCart
16 USD
It is necessary to find a direct link to the active product feed (XML) of a competitor for Google Merchant Center Platform (CMS): OpenCart / ocStore Find the original feedRequirements for the result: Working link to the XML file Python, Data Parsing ∙ 4 days 14 hours back ∙ 25 proposals |
Development of a TikTok farm (content factory)It is necessary to develop a system for centralized management of multiple TikTok accounts with automatic content publishing, using individual proxies and simulating natural account activity. Functional Requirements1. Account Management Adding and removing TikTok accounts.… Python, Bot Development ∙ 5 days 1 hour back ∙ 19 proposals |
Improve the performance of Claude Code and work on software development.I am currently developing CRM and Analytics software. I am using Claude Code, but I understand that the results are not the best in terms of changes. There are 2 tasks - Need help creating a preset for skills, MD, and so on to improve quality. Take verified ones that have been… AI & Machine Learning, Python ∙ 5 days 8 hours back ∙ 26 proposals |
OCR systemA system for recognizing text on postal envelopes (index for whom - only numbers). The text can sometimes be handwritten. Recognition of stamps (counting quantity and denomination) Python ∙ 5 days 11 hours back ∙ 28 proposals |
Kyiv