Tworzenie skryptów do pobierania plików z 2 stron
HTTPS://desirefx.me/author/3dfox/page/50/ 103 strony na 30 sztuk
W sumie około 14000 modeli + przesyłek obrazu modelu, aby wreszcie wyglądało tak: archiwum - przesyłek (nazwa plików jest już wyznaczona podczas pobierania, więc nazwa archiwum i obrazy spotykają się) Pobieranie odbywa się za pośrednictwem wymiany plików hot4share.lub hitfile(jeśli nie działa za pośrednictwem hot4share), (konto udostępniam do ustawienia)
Algoritm pracy skryptów jest taki (w moim rozumieniu, ale jeśli można go bardziej zoptymalizować, to jestem tylko za): 1) otwiera się strona z modelami.I w kolejności (lub przypadkowo, nie ma znaczenia) 2) skrypt otwiera każdy model oddzielnie, 3) przechowuje obraz tego modelu i dalej 4) otwiera link hot4share, 5) gdzie naciska na tworzenie link do pobrania (w hitfile od razu link do pobrania bez tego punktu), a na następnej stronie 6) pobiera model na link i przechowuje go w folderze z skryptem, lub w jakimś określonym folderze, nie widoczne.Skrypt powinien przesyłać pliki z opóźnieniem 10-15 sekund, aby możliwe, że strona nie zaczęła mnie blokować.1)
2) 3 ) 4
5 )
6)
To jest konieczne, aby gdy pojawią się nowe strony, to pobrać konkretnie nowe, a nie stare.
Еще должна быть возможность указать до какой страницы скачивать или количество страницы которые нужно скачать.
Это нужно для того что когда появятся новые страницы то скачать конкретно новые, а не старые
1) Zasadniczo muszę pobrać modele tylko raz teraz, ale za pół roku pojawią się nowe strony i muszę je pobrać (ale to już będzie mały objętość stron i modeli) (można o tym porozumieć się później)
2) Wymiany plików są ograniczone do 40 GB dziennie, program może pobierać znacznie więcej, a za to są zabronione pobieranie na dzień. Dlatego będzie łatwiejsze, jeśli powoli, ale prawidłowo stopniowo je samodzielnie z twoją scenariuszem, ponieważ nie wiem, ile wagi w sumie waży jedzenie modeli.
Спрашивают нужна ли сама программа или подойдет одноразоваое скачивание.
1) Впринципе мне нужно скачать модели только один раз сейчас, но через пол года-год появятся новые страницы и мне нужно будет скачать и их (но это уже будет малый объем страниц и моделей) (об этом можно будет договориться потом)
2) У файлообменников есть ограничение в 40 гб в день, программа может выкачать намного больше, а за это дают бан скачивания на день. Поэтому будет проще если я медленно но верно постепенно их выкачаю самостоятельно с вашим скриптом, так как я не знаю сколько всего весят єти модели в сумме.
Opinia zleceniodawcy o współpracy z Maksim S.
Tworzenie skryptów do pobierania plików z 2 stronMaxim doskonale zrozumiał zadanie, zaproponował rozwiązania i wykonał je w możliwie najszybszym czasie.
Liczba plików jest dokładnie taka, jaka się okazała.
Zdecydowanie polecam współpracę
Opinia freelancera o współpracy z Andrii Tomilin
Tworzenie skryptów do pobierania plików z 2 stronWszystko jest świetne. Dziękuję za współpracę
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Cennik towarów części samochodowych od dostawców dla stron internetowych z częściami samochodowymi na bazie PromuSpecyfikacja techniczna Projekt Ustawienie zawartości i synchronizacji dwóch sklepów Prom.ua z dostawcami części samochodowych. Zadanie Wymagana jest realizacja załadunku i aktualizacji produktów od dostawców części samochodowych dla dwóch sklepów internetowych na… Parsowanie danych ∙ 3 godziny 43 minuty temu ∙ 29 ofert |
Parsowanie bazy
168 PLN
Wymagania dotyczące kanałów:1. Język treści:Rosyjski lub ukraiński(dopasowana mieszana treść RU/UA)2. Liczba subskrybentów:Nie mniej niż 500 subskrybentów3. Aktywność:Ostatni post opublikowany nie później niż 32 godziny temu4. Komentarze:Na kanale muszą być otwarte komentarze… Bazy danych i SQL, Parsowanie danych ∙ 5 godzin 2 minuty temu ∙ 26 ofert |
Sparsować bazę i dodać do czatu w TGWydobyć bazę z List ua i dodać według numerów do czatu na Telegramie. Czat na temat remontu i designu wnętrz. Parsowanie danych, Praca z klientami ∙ 22 godziny 37 minut temu ∙ 27 ofert |
Należy opracować bota Telegram do monitorowania samochodów z aukcji w USA (Copart, IAAI)Należy stworzyć bota Telegram do automatycznego wyszukiwania i monitorowania samochodów "BUY IT NOW" na aukcjach w USA (Copart, IAAI). Bot powinien działać w trybie automatycznym i wysyłać powiadomienia o nowych samochodach, które odpowiadają zadanym filtrom.Podstawowa… Parsowanie danych, Tworzenie chatbota ∙ 1 dzień 6 godzin temu ∙ 89 ofert |
Parsowanie produktów, przygotowanie do importu na WPWydobyć pełny katalog tych stron: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ Wszystkie produkty muszą być połączone w jedną wspólną tabelę do importu do WP. Każdy… Programowanie stron internetowych, Parsowanie danych ∙ 3 dni 22 godziny temu ∙ 60 ofert |