Parsera OnliFans

Parsowanie danych, Python — podano nieprawidłowe kategorie?

Zlecenie jest tłumaczone automatycznie. Zaloguj się lub zarejestruj się, żeby zobaczyć oryginał Zadanie techniczne (TZ) do tworzenia parsera.1 .Opis projektu : Tworzenie parsera w języku Python do gromadzenia treści medialnych (foto i wideo) z stron internetowych w modelach xh.Parzer musi być w stanie automatycznie dokonywać wejścia na strony modeli, pobierać treść i strukturalnie przechowywać ją w magazynie MinIO.2 .Wymagania 2.1 Źródło danych: Parser pobiera dane z stron internetowych modeli hhh: hhh.2.2 Wymagania funkcjonalne: - Parser musi wyciągnąć linki do modelu OnlyFans z tabeli Airtable.- Algoritm pracy parsera: 1.Odbiór linków z Airtable.2 .Przejście po otrzymanej linku.3 .Automatyczna autoryzacja w koncie hhh.CzteryWyszukaj treści zdjęć i wideo na stronie modelu.5 .Pobieranie zdjęć i treści wideo.Pobierane obrazy muszą mieć format jpg, a wideo mp4.2.3 Niefunkcjonalne wymagania: Aktualne wydarzenia i błędy w pracy parsera muszą być zapisywane w pliku logowym.- Parzer powinien mieć możliwość wykonywania asynchronicznego w celu optymalizacji prędkości pobierania.• Asynk2.4 Struktura przechowywania danych: - Dane muszą być przechowywane w obiektowym magazynie MinIO.- Struktura papaków: - "Nazwa sieci społecznościowej" (na przykład, hhh) - "Nazwa modelu" (nazwa modelu lub nickname) - "Fotografia" (dla obrazów) - "Wideo" (dla wideo) 3.Eksport danych: - Pobrane treści medialne będą przechowywane w MinIO z uwzględnieniem powyżej opisanej struktury folderów.CzteryObsługa pracy z proxy i ReCaptcha: - Parser musi wspierać korzystanie z zewnętrznych proxy w celu zapewnienia anonimowości i zablokowania.- Mechanizm korzystania z proxy musi być realizowany i dostosowany zgodnie z wymaganiami klienta.- Jest potrzeba przeglądu ReCaptcha, konieczne jest stworzenie automatycznego mechanizmu do jego przetwarzania.5 .Autoryzacja na stronie hhh: - Parser powinien mieć możliwość automatycznej autoryzacji na stronach modeli OnlyFans.- W tym celu parser musi przyjąć login i hasło lub użyć przechowywanych danych do autoryzacji.6.Tymczasowy algorytm parsingu: - Parser powinien mieć możliwość regularnego przeglądu nowych linków z tabeli Airtable (dziennie).W przypadku odnalezienia nowych linków, parser musi automatycznie rozpocząć gromadzenie treści z odpowiednich stron w modelach xh.- Musisz mieć mechanizm do okresowego przekształcania istniejącego treści z nowym (tygodniowo).7 .Dodatkowe szczegóły: - W razie konieczności korzystania z płatnych narzędzi do przepływu kropli, ich wybór i wykorzystanie należy zgodzić się z klientem.Cały kod parsera powinien być dobrze zorganizowany, dokumentowany i komentowany, aby zapewnić zrozumienie jego logiki i funkcjonalności.- Dokumenty powinny zawierać instrukcje dotyczące konfiguracji i uruchomienia pojemnika Docker z parzerem oraz opis algorytmu pracy i użytkowania.- Możliwe, że parzer jest oparty na selenium web driver, pod warunkiem, że będzie działać w pojemniku docker.Konieczne jest, aby pobrane treści nie powtarzały się.

Oferty 2

Vadym Riabchenko

5 1

Zlecenia 6
Ocena -
Ranking 200

Budżet: 2500 UAH Termin: 2 dni

Gotowy do realizacji Twojego projektu, jakościowo, mam duże doświadczenie w parsingu i znam wszystkie biblioteki dla niego.

W liście nie są widoczne oferty ukryte przez zleceniodawcę lub freelancerów z profilem Plus, a także oferty, które naruszają regulamin

Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych

API Reddit

Programowanie stron internetowych 24 oferty 30 lipca

Nie podano
Parsowanie strony, obejście ochrony Akamai

Python 39 ofert 30 lipca

Nie podano
Парсинг маркетплейсу

Tworzenie chatbota 31 ofert 30 lipca

144 PLN
Automatyczny import cen z cenników dostawców w formacie Google Sheets CSV na HOSZOP

Programowanie stron internetowych 66 ofert 29 lipca

424 PLN
Znaleźć i dodać linki do zdjęć do 900 samolotów.

Obróbka danych 33 oferty 28 lipca

169 PLN

Vladislav K.
Ukraina

Zleceń 18
Ocena 5.0
Ranking 890

Vadym Riabchenko

Aktualnie brak ofert

Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych

API Reddit

Parsowanie strony, obejście ochrony Akamai

Парсинг маркетплейсу

Automatyczny import cen z cenników dostawców w formacie Google Sheets CSV na HOSZOP

Znaleźć i dodać linki do zdjęć do 900 samolotów.