Parzer strony internetowej
1 . Url (http / HTTPS)
2. metoda (GET, POST, PUT i tak dalej)
3. parametry do zapytania (jeśli istnieje) na przykład: var1 = 1&var2=2 lub masywne (jak będzie wygodniejsze).
Cztery Słowo kluczowe lub link, który znajdzie się na danej stronie
5 . Ustawienia do połączenia z proxy
Trzeba pracować z użyciem selenium. Przegląd Google Chrome.
W rezultacie należy zwrócić następujące:
1 . Słowo kluczowe / fraza lub link znaleziono lub nie znaleziono
2 . Wszystkie nagłówki odpowiedzi z serwera (jeśli zostały przekierowane, nagłówki do przekierowania i nagłówki po przekierowaniu).
3 . Archiwum HAR z pełnym domkiem całego wyniku weryfikacji. Archiwum należy przechowywać na dysku. Nazwa jest randomizowana. Wszystkie pozostałe dane muszą być przechowywane w tabeli w BD MySQL. w formacie JSON
Wersja Python 3.10
-
1664 100 5 3 Dobry wieczór . Ciekawy projekt . Napisz, chętnie będę z Tobą współpracował!
-
97 Mogę spróbować zrealizować. Doskonale dobrze rozumiem parsing, aż do utworzenia asynchronicznych parsers (możesz to sprawdzić za pośrednictwem linku w opisie na StackOverflow na temat pytań/odpowiedzi). Ostatni duży projekt liczył 7 asynchronnych parzerów i pracował z MySQL BD z 10 milionów zapisów.
W większości pracowałem bezpośrednio z requests/aiohttp, ale z selenium ostatni raz pracowałem około roku temu, ale pamiętać, myślę, że nie będzie trudne. Istnieje jeszcze kilka pytań, zwłaszcza o krople na stronie, które warto parzyć witryny, i bd mysql, ale zadania są jasne, już wpadł w głowę przykładowy algorytm pracy.
Czas: do 3 dni (myślę, że uda mi się szybciej, ale zabieram z zapasem)
Cena 2000-3000 zł, w zależności od szczegółowego TZ.
Aktualne zlecenia dla freelancerów w kategorii Python
Specjalista ds. Excela / automatyzacji procesów (Excel + mile widziane programowanie)Szukamy specjalisty z ZAAWANSOWANYMI umiejętnościami Excel do optymalizacji istniejącego pliku i automatyzacji procesów. Wielką zaletą będzie, jeśli masz również umiejętności programowania / VBA / Power Query / Power Automate lub doświadczenie w tworzeniu złożonej logiki w… Python, Bazy danych i SQL ∙ 2 godziny 15 minut temu ∙ 19 ofert |
Automatyzacja procesów przez API i PythonaPoniżej opisałem aktualny proces i to, do jakiego wyniku chciałbym dojść. Dołączam również pliki rzeczywistego procesu, aby lepiej zrozumieć, jak on wygląda w rzeczywistości Aktualny proces Obecnie cały proces wykonywany jest ręcznie: ładowanie/wyładowanie plików,… AI i uczenie maszynowe, Python ∙ 3 godziny 16 minut temu ∙ 29 ofert |
Należy stworzyć bota w tg do płatności subskrypcyjnej.
164 PLN
Trzeba stworzyć bota w Telegramie, gdzie użytkownik będzie mógł wykupić subskrypcję na dostęp do kamer internetowych znajdujących się na podwórku. Organizować w bocie płatność dwóch rodzajów subskrypcji (na miesiąc i na jeden dzień). Bot powinien automatycznie sprawdzać płatność… Python, Tworzenie chatbota ∙ 16 godzin 3 minuty temu ∙ 71 ofert |
Parsowanie i klasyfikacja dużej liczby obrazówNależy zrealizować projekt zbierania i strukturyzacji dużej ilości architektonicznych obrazów z otwartych źródeł internetowych.Zadanie obejmuje: automatyczne zbieranie obrazów; ładowanie plików w maksymalnie dostępnej jakości; klasyfikację obrazów według kategorii: Exterior;… Python, Parsowanie danych ∙ 23 godziny 3 minuty temu ∙ 30 ofert |
Logika biznesowa platformy: potwierdzenie zajęć, kontrola obecności i historia lekcji (DjangoRozbudowa logiki biznesowej platformy edukacyjnej: potwierdzenie zajęć, kontrola obecności i historia lekcji (Django + React) Wymagana jest pełnoprawna system potwierdzania lekcji, kontroli obecności i przechowywania historii potwierdzeń. Ważne Przed rozpoczęciem prac należy… Python ∙ 3 dni 4 godziny temu ∙ 29 ofert |