Skraper Twitter
Trzeba opracować/rozwinąć 2 moduły scrapowania Twittera.
1. Powinien wchodzić na wskazany profil użytkownika i pobierać liczbę followersów, liczbę postów tego konta, czy komentarze są włączone na tym koncie.
2. Powinien zwracać napisane posty na tym profilu z ostatniej godziny.
Proszę podać technologie/język, w którym będzie realizowany scraper, oraz czy jest doświadczenie w scrapowaniu Twittera. Bez doświadczenia w scrapowaniu nie przyjmuję.
Jest gotowy skrypt, ale trzeba podłączyć proxy/cookies, aby Twitter nie blokował.
-
261 Witam!
Mam doświadczenie w tworzeniu scraperów dla Twittera (X) z użyciem Pythona i bibliotek takich jak tweepy do obsługi API X oraz selenium/playwright do parsowania stron. Udanie realizowałem projekty zbierania danych o profilach (liczba followersów, postów, ustawienia komentarzy) oraz parsowania postów w określonych okresach czasu. Pracowałem również z konfiguracją proxy i zarządzaniem ciasteczkami, aby obejść blokady, w tym rotacją proxy i symulacją zachowania przeglądarki, aby zminimalizować banowanie ze strony X.
Do realizacji/udoskonalenia modułów proponuję następujący stos technologiczny:
Język: Python
Biblioteki:
playwright do asynchronicznego parsowania stron X (bardziej lekki i nowoczesny odpowiednik Selenium).
… tweepy do obsługi API X (jeśli dostępny klucz API).
aiohttp do zarządzania proxy i zapytaniami.
fake-useragent do generowania losowych User-Agentów.
logging do prowadzenia logów.
Przechowywanie: JSON do zapisywania wyników, SQLite (opcjonalnie) do cache'owania.
Proxy: Integracja z płatnymi serwisami proxy (np. Bright Data, Oxylabs) lub własnym pulą proxy.
Ciasteczka: Zapisywanie i rotacja ciasteczek przez playwright w celu utrzymania sesji.
Będę chętny do współpracy! Czekam na wiadomość od Ciebie, aby omówić szczegóły i udoskonalenie Twojego skryptu! Miłego dnia!
-
344 23 1 Witaj Andrzeju, jesteśmy małym zespołem programistów. Za sobą mamy duże doświadczenie w pracy z Twitterem, potrafimy wszystko, od skryptów po emulację zapytań. Napisz do mnie na priv, omówimy szczegóły projektu.
-
1495 13 0 Witam! Z chęcią mogę dokończyć Twój projekt. Mam doświadczenie z Twitterem, napisz na priv, omówimy wszystkie szczegóły. Będę zadowolony ze współpracy!
-
10130 117 0 Witam.
Jestem programistą NodeJS. Mam doświadczenie z Twitterem. Chętnie się podejmę. Piszcie, omówimy.
-
3217 31 0 Witam. Mam gotowe rozwiązania do pracy z Twitterem. Mogę przygotować osobny skrypt pod Twoje zadanie. Najprościej zrobić to przez bas. Jeśli jest to aktualne - pisz, omówimy.
-
Mam doświadczenie w parsowaniu Netflix, przeprowadzałem emulację aktywności botami na Instagramie. Używam Pythona, Selenium
Porozmawiajmy o współpracy na prywatnej wiadomości
-
1616 8 0 Witam
Jestem programistą w dziedzinie AI/ML i WEB SCRAPING. Mogę zrealizować Twój projekt. Napisz do mnie, omówimy szczegóły.
-
2264 18 3 Dobrego wieczoru, miałem doświadczenie z Twitterem w podobnym funkcjonale, w technologiach Python & Playwright. Jeśli jesteś zainteresowany - pisz, omówimy szczegóły
-
724 4 0 Cześć!
Mam doświadczenie właśnie w scrapowaniu Twittera (za pomocą requests, BeautifulSoup, snscrape, obejścia przez puppeteer/undetected-chromedriver).
🔧 Do tego zadania użyję Pythona, z headless-browserem (Playwright lub Selenium z podłączeniem proxy i cookies).
✅ Otrzymam:
liczbę obserwujących, postów, stan komentarzy
…
posty z ostatniej godziny (za pomocą scrolla lub obejść API)
Będę mógł dostosować Twój gotowy skrypt do stabilnej pracy z proxy (automatyczne odświeżanie przy banie) i cookies.
🔐 Mam doświadczenie — pokażę przykłady na życzenie.
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Newsletter LinkedIn
438 PLN
Newsletter LinkedIn Należy uruchomić newsletter LinkedIn na podstawie podanej bazy. 30 000+ kontaktów Czekamy na propozycje E-mail marketing, Parsowanie danych ∙ 13 godzin 44 minuty temu ∙ 8 ofert |
Parsowanie emaili firm z określonej branży
411 PLN
Znajdź kontakty (e-mail, numer telefonu) firm, które zajmują się określonym biznesem, wskazanym w tym dokumencie Google https://docs.google.com/document/d/1_d-iLxLSL3gjRvo1GmUpWNm0Pm5YoKGcEvaiDc_2I0g/edit?usp=#sharing Wynik ma być w formie tabeli z kolumnami: 1. Telefon w… Parsowanie danych ∙ 1 dzień 13 godzin temu ∙ 31 ofert |
Potrzebny parser sklepu internetowego https://www.lcsc.com/należy regularnie (1 raz w miesiącu, lub przy uruchomieniu skryptu) uzyskiwać aktualne informacje o produktach dostępnych w sklepie https://www.lcsc.com/ z katalogu wszystkich działów… Parsowanie danych ∙ 2 dni 19 godzin temu ∙ 43 oferty |
OpenCart — katalog wynajmu sprzętu specjalistycznego
493 PLN
OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub… Programowanie stron internetowych, Parsowanie danych ∙ 3 dni 11 godzin temu ∙ 58 ofert |
Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)
169 PLN
Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu. Konfigurowanie oprogramowania i serwerów, Parsowanie danych ∙ 3 dni 15 godzin temu ∙ 29 ofert |