Python+Scrapy программист
Вам нравится писать спайдеры на Scrapy, которые легко понять и адаптировать к изменениям на сайте. У вас аналитический склад ума. Вы думаете не только о happy path scenario. Хотите поработать для стартапа?
Конкретно в этой задаче нужно написать один спайдер для конкретного сайта Debenhams.com. Мы дадим вам заготовку scrapy crawler'a и предопределенный item class, который нужен на выходе. Ваша задача:
1. Написать нужный код для сбора данных о продуктах с Debenhams.com
2. Верно обрабатывать разные типы продуктов (например собирать цветовые вариации для косметики, а вариации объема для духов.
3. Написать базовые тесты проверка, что получив html определенного формата, на выходе получаем верный item.
О вас:
- Дружите с Python 3, Scrapy, git, принципами тестирования и написания maintanable code ;
- любите быть на связи и вовремя сообщаете о проблемах
О нас: Мы распределенная команда из Латвии, России и Украины. Cочетаем .NET/Python, используем git. Общение происходит в Slack.
В заявке ответьте на след. вопросы:
- Ваш опыт в написании спайдеров на Scrapy? Есть какой-то, которым особенно гордитесь?
- Как можно научить scrapy обрабатывать сайты, html которых динамически формируется на javascript? (ссылка на стр или название инструмента)
- Ваш любимый фильм?
- Ваш github (Если есть)
Current freelance projects in the category Python
Automation of processes through API and PythonBelow I described the current process and the result I would like to achieve. I also attach files of the real process to better understand how it looks in reality Current process Currently, the entire process is performed manually: uploading/downloading files, transferring… AI & Machine Learning, Python ∙ 23 minutes back ∙ 11 proposals |
A bot needs to be created in Telegram for subscription payment.
45 USD
A bot needs to be created in Telegram where users can subscribe for access to the webcams located in the yard. Organize payment for two types of subscriptions (monthly and daily) in the bot. The bot should automatically check the payment and then provide access links. Python, Bot Development ∙ 13 hours 9 minutes back ∙ 64 proposals |
Parsing and classification of a large array of imagesIt is necessary to implement a project for collecting and structuring a large array of architectural images from open web sources.The task includes: automated collection of images; uploading files in the highest available quality; classification of images by categories:… Python, Data Parsing ∙ 20 hours 9 minutes back ∙ 30 proposals |
Business logic of the platform: class confirmation, attendance control, and lesson history (DjangoRefinement of the business logic of the educational platform: lesson confirmation, attendance control, and lesson history (Django + React) A complete system for lesson confirmation, attendance control, and storage of confirmation history needs to be implemented. Important… Python ∙ 3 days 1 hour back ∙ 29 proposals |
Improvement of the administrative panel of the educational platform (Django + React)Improvement of the administrative panel of the educational platform (Django + React) Project description: There is an existing educational platform (marketplace, similar to Preply), developed on Django + React. It is required to enhance the existing administrative panel and… Python, Web Programming ∙ 4 days 22 hours back ∙ 58 proposals |
Latvia