Разместите свой проект бесплатно и начните получать предложения от фрилансеров-исполнителей уже спустя минуты после публикации!

Спайдер на Scrapy

истекло время актуальности


Сделать простейший спайдер на scrapy

Спайдеру передается адрес сайт и css селектор для  страниц, которые необходимо найти


Спайдер обходит все страницы сайта, на каждой странице находит все ссылки на этот же сайт. 

Все ссылки пишет в базу mysql ( или в ту, которую вы считаете оптимальной для этой задачи)

Если на странице есть указанный css селектор, страница сохраняется. 

Все выполняется до полного обхода сайта.


Релизовать необходимо на последних стабильных версиях python и scrapy

Помочь развернуть и запустить проект на windows 8



  1. 3 дня1 000 ₴
    Євгеній Оношко
     205 

    готов обсудить, есть опыт работы с python/scrapy, c виндовсом не работал, но думаю проблем не составит, помогу запутить на виндовс, обращайтесь

    Украина Киев | 31 октября 2018 |
  2. 1 день2 000 ₴
    Алексей Белов
     1643   19  1   1

    Здравствуйте, могу реализовать на scrapy и сделать небольшой мануал как запустить на виндовс, также я б предложил использовать postgresql в качестве базы.

    Украина Киев | 31 октября 2018 |
  3. 2 дня1 000 ₴
    Андрей Когут
     312   4  0

    Добрый день.
    Имею огромный опыт в разработке парсеров / пауков на python с использованием scrappy в том числе. Готов реализовать данный проект.

    Украина Тернополь | 5 ноября 2018 |