Rozwinięcie analizatora dla Chrome Web Store
Witam wszystkich, szukam wykonawcy do napisania parsera.
Następnie ten skrypt będzie rozwijany, być może o inne sklepy z rozszerzeniami, być może o dodatkową funkcjonalność, dlatego liczę na okresową współpracę.
Jeśli robiliście podobne parsery lub macie podobne projekty w portfolio, proszę o informację, będzie to dużym plusem.
Budżet orientacyjny, dlatego proszę podawać swoje orientacyjne prognozy.
Dziękuję!
Oto wstępne specyfikacje, ostateczne już po szczegółowym omówieniu z wykonawcą.
===============
Stworzyć parser dla Chrome Web Store, który będzie parsował wszystkie możliwe dane ze sklepu, takie jak:
Szczegółowe informacje o rozszerzeniu/temacie
Nazwa
Opis
Kategoria
Recenzje
…i wiele innych
Pobranie archiwum rozszerzenia i uzyskanie dodatkowych informacji z niego (dostarczę narzędzie umożliwiające to lub pomogę w konfiguracji)
Zapisanie pliku
Rozmiar pliku
Tłumaczenia rozszerzenia
Dane z manifestu
Kategorie i indeksy według kategorii
Kolekcje i indeksy według kolekcji
Indeksy wyników według kluczowych słów w rozwijanym menu wyszukiwania (słowa kluczowe zostaną wcześniej przekazane skryptowi)
Indeksy wyników według kluczowych słów w wynikach wyszukiwania (słowa kluczowe zostaną wcześniej przekazane skryptowi)
Wymagania techniczne:
Skrypt ma być uruchamiany z konsoli
Obsługa wielowątkowości (ponieważ jest wiele rozszerzeń i danych, konieczna jest optymalizacja parsowania)
Skonfigurowanie zapisu danych w Postgresql i CSV
Parser musi radzić sobie z różnymi blokadami, takimi jak captcha czy blokady IP, za pomocą proxy lub innych narzędzi
Wdrożenie systemu logowania w celu śledzenia stanu parsera podczas działania
Dostarczanie raportów po wykonaniu skryptu (liczba przetworzonych rozszerzeń, kategorii, słów kluczowych, itp.)
Będzie dodatkowym atutem:
Dobra znajomość baz danych i ich optymalizacja w celu zmniejszenia liczby duplikatów danych podczas ponownego parsowania
Parsowanie nie według znaczników, a według zapytań do backendu (ponieważ dla tego partnera będzie to istotne)
Doświadczenie w pisaniu podobnych parserów
-
808 27 2 2 Witam! Mam duże doświadczenie w pisaniu parserów i botów. Dobrze znam możliwości omijania captchy, podmiany IP i User-Agent, stosowania proxy oraz pobierania plików ze stron. Dobrym rozwiązaniem będzie zrealizowanie tego przy użyciu Selenium, można spróbować również zapytań, ale ta opcja ustępuje pod względem omijania blokad. Planujesz używać kont Google czy parsować bez nich? Możemy szczegółowo omówić projekt w wiadomościach prywatnych.
-
8150 63 1 Witam wszystkich! Jestem gotowy podjąć się napisania parsera dla Chrome Web Store. Czekam na możliwość omówienia szczegółów projektu i rozpoczęcia pracy. Dziękuję!
-
2912 44 0 Dzień dobry.
Mogę zrealizować na nodejs
----------------------------------
-
8773 60 0 1 Dzień dobry!
Gotowi stworzyć parser dla Chrome Web Store.
Mamy doświadczenie w tworzeniu podobnych botów.
Piszemy w Pythonie. Zajmujemy 9 miejsce na platformie w tej dziedzinie.
Będziemy zadowoleni z współpracy!
-
5000 грн за розв'язок капчі? 😂 😅
-
Aktualne zlecenia dla freelancerów w kategorii Bazy danych i SQL
Parsowanie bazy
168 PLN
Wymagania dotyczące kanałów:1. Język treści:Rosyjski lub ukraiński(dopasowana mieszana treść RU/UA)2. Liczba subskrybentów:Nie mniej niż 500 subskrybentów3. Aktywność:Ostatni post opublikowany nie później niż 32 godziny temu4. Komentarze:Na kanale muszą być otwarte komentarze… Bazy danych i SQL, Parsowanie danych ∙ 1 dzień 3 godziny temu ∙ 28 ofert |
Należy sprawdzić skrypty i zaktualizować dane w bazie danych postgres.Konieczne jest poprawienie skryptów SQL dla bazy Postgres. Należy sprawdzić skrypty i zaktualizować dane z zewnętrznych tabel Excel oraz między dwoma bazami (różne serwery) Postgres. Uruchamianie skryptów przez program AnyDesk Navicat. Lista danych do sprawdzenia i korekty: 1.… Bazy danych i SQL ∙ 4 dni 6 godzin temu ∙ 18 ofert |
Potrzebny architekt Airtable do zbudowania schematu relacyjnego i nowej czystej bazy AirtablePotrzebna pomoc w przemyśleniu i zbudowaniu czystiej schemy relacyjnej dla wewnętrznego systemu operacyjnego w Airtable. Obecna baza jest już używana przez zespół, ale rozwinęła się organicznie: struktura jest częściowo płaska, część tabel/widoków jest używana aktywnie, część… Bazy danych i SQL, Aplikacje desktopowe ∙ 4 dni 23 godziny temu ∙ 10 ofert |
Platforma edukacyjna dla trenerów koszykówki + niestandardowy CMSPlatforma edukacyjna dla trenerów koszykówki + Custom CMSPrzegląd projektu Poszukujemy doświadczonego zespołu deweloperskiego lub programisty full-stack do zbudowania nowoczesnej platformy edukacyjnej dla trenerów koszykówki. Strona internetowa zapewni trenerom koszykówki dostęp… Bazy danych i SQL, Programowanie stron internetowych ∙ 5 dni 17 godzin temu ∙ 92 oferty |
Integracja Viber w 8.3
839 PLN
Potrzebna integracja Viber w własnym CRM (1C 8.3)O firmieFirma "Domofon System" zajmuje się instalacją i serwisowaniem systemów domofonowych.Baza ponad 40 000 abonentów.Pracujemy na własnym dopracowanym systemie opartym na 1C 8.3.Szukamy specjalisty lub zespołu do… Bazy danych i SQL, Tworzenie chatbota ∙ 5 dni 20 godzin temu ∙ 18 ofert |