Parsowanie danych / automatyzacja zbierania i sprawdzania kompatybilności akumulatorów laptopów
1. Ogólny opis projektu
Konieczne jest opracowanie skryptu Python do automatycznego zbierania informacji o alternatywnych numerach części akumulatorów oraz kompatybilnych modelach laptopów. Dane będą pozyskiwane z witryn dostawców, rynków oraz oficjalnych zasobów producentów. Skrypt powinien weryfikować pozyskane dane, sprawdzać ich zgodność i przechowywać w ustrukturyzowanym formacie.
2. Wymagania funkcjonalne
2.1. Zbieranie danych (Scraping)
Wykorzystanie Selenium / BeautifulSoup / Scrapy do zbierania danych z określonych zasobów internetowych.
Wsparcie dla dynamicznych stron.
Wyszukiwanie i wydobywanie numerów części (PN), kompatybilnych modeli laptopów, specyfikacji akumulatorów (pojemność, napięcie, typ).
Logowanie wszystkich pozyskanych danych do pliku.
2.2. Weryfikacja i przetwarzanie danych
Usuwanie duplikatów i niepoprawnych zapisów.
Wydzielanie niezgodności i wątpliwych zapisów do osobnej listy.
2.3. Przechowywanie danych
Wyjście do Google Sheets (Google Sheets API) lub bazy SQL (PostgreSQL/MySQL).
Format przechowywania: tabela z numerami części, kompatybilnymi modelami, źródłami i datą aktualizacji.
3. Wymagania techniczne
Język programowania: Python 3.x.
Biblioteki: Selenium, BeautifulSoup, Scrapy, Pandas, SQLAlchemy, Google Sheets API.
Baza danych: PostgreSQL lub MySQL.
Logowanie: Zapis do pliku logu wszystkich działań i błędów.
Skalowalność: Możliwość dodawania nowych źródeł bez zmiany głównego kodu.
4. Oczekiwany rezultat
Działający skrypt Python z możliwością rozszerzenia.
Plik z zebranymi, zweryfikowanymi i ustrukturyzowanymi danymi (Excel / Google Sheets / SQL).
Dokumentacja dotycząca uruchamiania i konfiguracji skryptu.
Plik logu z historią zbierania i przetwarzania danych.
1. Загальний опис проекту
Необхідно розробити Python-скрипт для автоматизованого збору інформації про альтернативні партномери акумуляторів та сумісні моделі ноутбуків. Дані будуть отримуватися з веб-сайтів постачальників, маркетплейсів та офіційних ресурсів виробників. Скрипт повинен верифікувати отримані дані, перевіряти їх на відповідність і зберігати у структурованому форматі.
2. Вимоги до функціоналу
2.1. Збір даних (Scraping)
Використання Selenium / BeautifulSoup / Scrapy для збору даних із заданих веб-ресурсів.
Підтримка динамічних сайтів.
Пошук та витягування партномерів (PN), сумісних моделей ноутбуків, характеристик батарей (ємність, напруга, тип).
Логування всіх отриманих даних у файл.
2.2. Перевірка та обробка даних
Видалення дублікатів та некоректних записів.
Виділення невідповідностей та сумнівних записів у окремий список.
2.3. Збереження даних
Вивід у Google Sheets (Google Sheets API) або SQL-базу (PostgreSQL/MySQL).
Формат збереження: таблиця з партномерами, сумісними моделями, джерелами та датою оновлення.
3. Технічні вимоги
Мова програмування: Python 3.x.
Бібліотеки: Selenium, BeautifulSoup, Scrapy, Pandas, SQLAlchemy, Google Sheets API.
База даних: PostgreSQL або MySQL.
Логування: Запис у лог-файл усіх дій та помилок.
Масштабованість: Можливість додавання нових джерел без зміни основного коду.
4. Очікуваний результат
Робочий Python-скрипт із можливістю розширення.
Файл із зібраними, перевіреними та структурованими даними (Excel / Google Sheets / SQL).
Документація щодо запуску та налаштування скрипта.
Лог-файл з історією збору та обробки даних.
-
5 dni369 PLN
402 2 0 5 dni369 PLN
Zainteresował mnie opis Twojego zadania, chciałbym je wykonać. Z parserami pracuję od dwóch lat, mam doświadczenie z całym stosem, podobne ETL pipeline'y już opracowywałem, więc myślę, że nie będzie problemów.
Зацікавив опис Вашої задачі, хотів би виконати її. З парсерами працюю два роки, з усім стеком маю досвід, подібні ETL пайплайни уже розробляв, тому думаю, що проблем не буде.
-
1 dzień184 PLN
5532 76 0 1 dzień184 PLN
Witam.
Jestem programistą NodeJS. Mam doświadczenie w parsowaniu różnych stron. Jestem gotów się tym zająć. Piszcie, omówimy.
Вітаю.
Я NodeJS розробник. Маю досвід з парснгом різних сайтів. Готовий взятися. Пишіть, обговоримо.
-
4 dni277 PLN
598 2 0 4 dni277 PLN
Dzień dobry, Romanie!
Będę zadowolony, mogąc pomóc w realizacji Twojego projektu!
Od dawna pracuję z całym stosem technologii niezbędnych do jakościowego wykonania Twojego projektu.
Mam duże doświadczenie w pracy z parsowaniem danych, Scrapy pomoże w tym najlepiej. Mam również kilka gotowych rozwiązań w tym kierunku, na przykład parser Aliexpress i OLX.
Wszystko to będzie napisane w Pythonie i będzie działać szybko i bezawaryjnie. Szczegóły możemy omówić w wiadomościach prywatnych.
Będę zadowolony ze współpracy!!
Доброго дня, Романе!
Буду радий допомогти в реалізації вашого проєкту!
Давно працюю з всім стеком технологій необхідним для якісного виконання Вашого проекту.
Маю великий досвід роботи з парсингом даних, Scrapy допоможе в цьому краще всього. Також маю деякі готові рішення в цьому напрямку, наприклад парсер Aliexpress та OLX.
Все це буде написано на Python та буде працювати швидко і безперебійно. Детальніше можемо обговорити в особистих повідомленнях.
Буду радий співпраці!!
-
7 dni461 PLN
1048 6 0 7 dni461 PLN
**Parsowanie danych z witryn? Już rozwiązywałem podobne zadania!**
Specjalizuję się w **automatycznym zbieraniu danych za pomocą Selenium** i wiem, jak obejść dynamiczną treść, zabezpieczenia przed botami oraz zoptymalizować szybkość działania skryptu.
🔹 **Moje doświadczenie:**
- Opracowałem **skraper dla Cars.com**, który wyciąga dane o samochodach z dynamicznych stron.
- Stworzyłem **parser produktów dla marketplace**, który działa za pomocą Selenium + BeautifulSoup.
- Realizowałem **automatyczny eksport danych do Google Sheets i PostgreSQL**.
🔹 **Co mogę dla Ciebie zrobić:**
… ✅ **Opracuję skrypt Selenium** do parsowania numerów części i kompatybilnych laptopów.
✅ Zrealizuję **filtrowanie duplikatów i logowanie** wszystkich danych.
✅ Zapewnię **eksport do Google Sheets / SQL** z historią zmian.
✅ Napiszę **dokumentację do uruchamiania i konfiguracji**.
Jestem gotowy do rozpoczęcia pracy! Porozmawiajmy o szczegółach. 🚀
**Парсинг даних із сайтів? Я вже вирішував подібні задачі!**
Я спеціалізуюся на **автоматизованому зборі даних через Selenium** і знаю, як обійти динамічний контент, захисти від ботів та оптимізувати швидкість роботи скрипта.
🔹 **Мій досвід:**
- Розробив **скрапер для Cars.com**, який витягує дані про автомобілі з динамічних сторінок.
- Створив **парсер товарів для маркетплейсу**, що працює через Selenium + BeautifulSoup.
- Реалізовував **автоматичний експорт даних у Google Sheets та PostgreSQL**.
🔹 **Що я можу зробити для вас:**
… ✅ **Розроблю Selenium-скрипт** для парсингу партномерів та сумісних ноутбуків.
✅ Реалізую **фільтрацію дублікатів і логування** всіх даних.
✅ Забезпечу **експорт у Google Sheets / SQL** з історією змін.
✅ Напишу **документацію для запуску та налаштування**.
Готовий почати роботу! Давайте обговоримо деталі. 🚀
-
4 dni184 PLN
1561 35 0 4 dni184 PLN
Gotowy się tym zająć.
Ale trzeba doprecyzować szczegóły zamówienia, piszcie!
Zrealizuję skryptem w pythonie.
Готовий взятися.
Але треба уточнити деталі замовлення, пишіть!
Реалізую скриптом на python.
-
2 dni138 PLN
723 2 0 2 dni138 PLN
Dzień dobry!
Mam ponad 3-letnie doświadczenie w programowaniu w języku python. Wykonałem wiele parserów. Jestem gotów zrealizować Twój projekt, skontaktuj się ze mną
Добрий день!
Маю досвід в програмуванні на мові python понад 3 роки. Виконав безліч парсерів. Готови виконати ваш проект, звертайтеся
-
У Вас є список сайтів під які писати парсери ?
-
Добрий день, у Вас є база даних чи треба підіймати самому?
-
Aktualne projekty freelancerskie w kategorii Bazy danych i SQL
TecdocDzień dobry, potrzebny jest moduł TecDoc, który można zintegrować z next js. Albo rozważę propozycje dotyczące realizacji. Bazy danych i SQL, Programowanie stron internetowych ∙ 9 godzin 24 minuty temu |
Skonfigurować skrypt przesyłania formularza do KeyCRM przez APITrzeba skonfigurować skrypt przesyłania danych klienta z formularza na stronie https://svidotstvo.ok-zmina.com.ua/ w KeyCRM przez API Według instrukcji https://help.keycrm.app/ru/keycrm-api/kak-nastroit-skript-pieriedachi-zaiavok-v-key-crm-chieriez-api Piszcie termin wykonania… PHP, Bazy danych i SQL ∙ 10 godzin 51 minut temu ∙ 15 ofert |
Szukamy programisty do pilnego wsparcia technicznego i dopracowania systemu BAS KUP
184 PLN
Główne zadanie:Należy połączyć kilka raportów w jeden, w tym:"Zestawienie rozliczeń z klientami""Zestawienie rozliczeń z dostawcami""Zysk brutto" Szczegóły realizacji:Za podstawę przyjmuje się raport "Zestawienie rozliczeń z klientami"Dodawane są dane dotyczące zamówień dostawcy… Bazy danych i SQL, Parsowanie danych ∙ 17 godzin 51 minut temu ∙ 1 oferta |
Wsparcie stron na WordPressPotrzebny specjalista do wdrożenia zadań technicznych od menedżera SEO. Jest dwa strony na Divi, dwa na czystym szablonie. Wśród zadań, w szczególności, optymalizacja wszystkich możliwych rekomendacji od PageSpeed Insights, aby wprowadzić strony w zieloną strefę (nie tylko… Układ HTML i CSS, Bazy danych i SQL ∙ 1 dzień 13 godzin temu ∙ 6 ofert |
System ERP dla nieograniczonej przydatnościPoszukujemy rozwiązania do ewidencji pracowników. Powinna być system: Część serwerowa (Baza Danych) + Część użytkownika (PC użytkowników). Co powinno być: 1. Struktura organizacyjna według stanowisk (możliwość dodawania potrzebnych pól, które odpowiadają stanowisku) 2. Karty… Bazy danych i SQL, Aplikacje desktopowe ∙ 1 dzień 14 godzin temu ∙ 9 ofert |
Kijów