Budżet: 2000 UAH Termin: 3 dni
Dobry dzień .Przepisuję wykwalifikowaną architekturę do prostego odtwarzania z pomocą dokera i mogę tam zapakować wszystko, czego potrzebuję, wiedzę bin, bash, zsh na wysokim poziomie, pewny użytkownik Linux.Dzięki technologii, mam duży background.
W parsing używany proxy, user-agent i przepis różnych headers według potrzeb, potrafię pracować z inspektorem, javascript, dom, potrafię wyciągać dane nawet z ajax i graphql
Główne biblioteki do parsingu: aiohttp, lxml,bs4,scrapy
Automatyzacja sieci Web: Selenium
Tworzenie API, na golang i python, GinGo, Flask, FastAPI, RestfulAPI, Swagger
Mam doświadczenie w pracy z Google Sheets i Google Cloud Console
Możliwość pracy z różnymi bazami sql i nosql.Rozwiązanie kropli anticaptcha.Znajomość strumieni Semaphore, threading, concurrent.future. Umiejętność pracy z numpy i more_itools, a mianowicie chunked do rozbiórki równoległego skręcania na równomiernych strumieniach, co znacznie przyspiesza gromadzenie objętości danych
Podstawowa wiedza do budowy interfejsów internetowych
Również z przydatnych umiejętności, umiejętność dostępu do ukrytych API i pracować z xml
PyQuery do pracy z dokumentami html
Pyppeteer również do automatyzacji