Спайдер на Scrapy
Сделать простейший спайдер на scrapy
Спайдеру передается адрес сайт и css селектор для страниц, которые необходимо найти
Спайдер обходит все страницы сайта, на каждой странице находит все ссылки на этот же сайт.
Все ссылки пишет в базу mysql ( или в ту, которую вы считаете оптимальной для этой задачи)
Если на странице есть указанный css селектор, страница сохраняется.
Все выполняется до полного обхода сайта.
Релизовать необходимо на последних стабильных версиях python и scrapy
Помочь развернуть и запустить проект на windows 8
-
2 dni82 PLN
231 4 0 2 dni82 PLN
Добрый день.
Имею огромный опыт в разработке парсеров / пауков на python с использованием scrappy в том числе. Готов реализовать данный проект.
-
1 dzień163 PLN
1825 26 1 1 1 dzień163 PLN
Здравствуйте, могу реализовать на scrapy и сделать небольшой мануал как запустить на виндовс, также я б предложил использовать postgresql в качестве базы.
-
3 dni82 PLN
143 3 dni82 PLN
готов обсудить, есть опыт работы с python/scrapy, c виндовсом не работал, но думаю проблем не составит, помогу запутить на виндовс, обращайтесь
Aktualne zlecenia dla freelancerów w kategorii Python
Znaleźć feed produktowy (Google Merchant XML) dla strony na OpenCart
57 PLN
Konieczne jest znalezienie bezpośredniego linku do działającego pliku z danymi produktowymi (XML) konkurenta dla Google Merchant Center Platforma (CMS): OpenCart / ocStore Znajdź oryginalny plik z danymiWymagania dotyczące wyniku: Roboczy link do pliku XML Python, Parsowanie danych ∙ 2 dni 10 godzin temu ∙ 22 oferty |
Rozwój farmy Tik-Tok (fabryka treści)Konieczne jest opracowanie systemu do centralnego zarządzania wieloma kontami TikTok z automatycznym publikowaniem treści, wykorzystaniem indywidualnych proxy oraz symulacją naturalnej aktywności kont. Wymagania funkcjonalne1. Zarządzanie kontami Dodawanie i usuwanie kont… Python, Tworzenie chatbota ∙ 2 dni 22 godziny temu ∙ 19 ofert |
Poprawić działanie Claude Code i prace związane z pisaniem oprogramowaniaObecnie rozwijam CRM i analitykę, oprogramowanie. Robię to przez Claude Code, ale rozumiem, że wyniki nie są najlepsze pod względem zmian. Mam 2 zadania - Potrzebuję pomocy w stworzeniu presetów dotyczących umiejętności, MD itd., aby poprawić jakość. Wziąć sprawdzone, z którymi… AI i uczenie maszynowe, Python ∙ 3 dni 4 godziny temu ∙ 24 oferty |
System OCRPotrzebny jest system rozpoznawania tekstu na kopertach pocztowych (indeks - tylko liczby). Tekst czasami może być ręcznie napisany. Rozpoznawanie znaczków (liczenie ilości i nominałów) Python ∙ 3 dni 7 godzin temu ∙ 25 ofert |
Stworzenie Human AI Assistant dla grup Telegram### 1.1. Kluczowa koncepcja systemuSystem powinien pełnić dwie główne funkcje:#### 1. Analiza komunikacji z klientemAsystent AI ma automatycznie analizować całą komunikację w grupach Telegram i rozumieć kontekst rozmowy.W szczególności system powinien:- określać istotę zapytania… AI i uczenie maszynowe, Python ∙ 4 dni 19 godzin temu ∙ 43 oferty |
Kijów