Starszy Inżynier Danych z Amazon z doświadczeniem (Projekt)
Szukamy Senior Data Engineer do budowy zautomatyzowanego systemu zbierania danych.
Główne zadania:
Zautomatyzowanie procesu uzyskiwania raportów Amazon i innych zasobów.
Opracowanie i utrzymanie rozwiązań do automatyzacji przeglądarki z wykorzystaniem Selenium, Playwright i Puppeteer.
Zarządzanie serwerami proxy i metodami odcisków przeglądarek w celu zapewnienia efektywnego zbierania danych.
Praca w chmurowych środowiskach do skalowalnego przetwarzania danych.
Wykorzystanie API do równoległego ładowania danych.
Przechowywanie i zarządzanie uzyskanymi danymi w bazach danych SQL.
Wykorzystanie Requests i BeautifulSoup do efektywnego web scrapingu.
Wymagania:
Doświadczenie w automatyzacji uzyskiwania raportów Amazon.
Wysoka kompetencja w Pythonie do pisania skryptów i automatyzacji.
Praktyczne doświadczenie w pracy z automatyzacją przeglądarki (Selenium, Playwright, Puppeteer).
Głębokie zrozumienie zarządzania serwerami proxy i technologii odcisków przeglądarek.
Doświadczenie w konfigurowaniu harmonogramów zadań i pracy w chmurowych środowiskach.
Ekspercka wiedza na temat integracji API do równoległego uzyskiwania danych.
Dobra znajomość SQL do zarządzania bazami danych.
Znajomość Requests i BeautifulSoup do web scrapingu.
-
33 dni281 PLN
1045 10 0 33 dni281 PLN
Posiadam ogromne doświadczenie w skrapowaniu i wiele zakończonych projektów z wykorzystaniem zapytań (requests, aiohttp) oraz automatyzacji za pomocą przeglądarki (playwright, pyppeteer, selenium), omijania różnych rodzajów zabezpieczeń (akamai, cloudflare, perimeter x) oraz captcha (reCAPTCHA, captcha obrazkowa, captcha ikona geetest, captcha suwak geetest v3/v4, hCAPTCHA, captcha tiktok, funcaptcha, worldfirstcaptcha, captcha cloudflare), wykonywania logowania i zbierania danych pod autoryzacją (używając ciasteczek, tokenów i sesji)
-
Дот нет не підійде?
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Cennik towarów części samochodowych od dostawców dla stron internetowych z częściami samochodowymi na bazie PromuSpecyfikacja techniczna Projekt Ustawienie zawartości i synchronizacji dwóch sklepów Prom.ua z dostawcami części samochodowych. Zadanie Wymagana jest realizacja załadunku i aktualizacji produktów od dostawców części samochodowych dla dwóch sklepów internetowych na… Parsowanie danych ∙ 7 godzin 35 minut temu ∙ 34 oferty |
Parsowanie bazy
168 PLN
Wymagania dotyczące kanałów:1. Język treści:Rosyjski lub ukraiński(dopasowana mieszana treść RU/UA)2. Liczba subskrybentów:Nie mniej niż 500 subskrybentów3. Aktywność:Ostatni post opublikowany nie później niż 32 godziny temu4. Komentarze:Na kanale muszą być otwarte komentarze… Bazy danych i SQL, Parsowanie danych ∙ 8 godzin 55 minut temu ∙ 26 ofert |
Należy opracować bota Telegram do monitorowania samochodów z aukcji w USA (Copart, IAAI)Należy stworzyć bota Telegram do automatycznego wyszukiwania i monitorowania samochodów "BUY IT NOW" na aukcjach w USA (Copart, IAAI). Bot powinien działać w trybie automatycznym i wysyłać powiadomienia o nowych samochodach, które odpowiadają zadanym filtrom.Podstawowa… Parsowanie danych, Tworzenie chatbota ∙ 1 dzień 10 godzin temu ∙ 91 ofert |
Parsowanie produktów, przygotowanie do importu na WPWydobyć pełny katalog tych stron: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ Wszystkie produkty muszą być połączone w jedną wspólną tabelę do importu do WP. Każdy… Programowanie stron internetowych, Parsowanie danych ∙ 4 dni 2 godziny temu ∙ 60 ofert |
Wymagany specjalista ds. promocji w Telegramie.
107 PLN
Zadania: zapraszanie rzeczywistych użytkowników z bazy nazw użytkowników do nowych czatów oraz wysyłanie wiadomości do docelowej bazy. Interesuje nas tylko jakościowy ruch i praca z żywą publicznością — wykonawców korzystających z botów, sztucznego zwiększania lub niskiej… Parsowanie danych, Promocja w sieciach społecznościowych (SMM) ∙ 9 dni 2 godziny temu ∙ 9 ofert |
Kijów