Парсинг данных
177-
1500 UAH Парсер телефонов на Python
Парсинг данныхСпарсил 11000 телефонов
на сайте https://www.bazar.club/
Python + selenium, и занес данные в CSV
-
200 UAH Парсер курса валют
Парсинг данных#python #webscraping #requests #beautifulsoup4 #beautifulsoup
Общий описание:
Этот парсер извлекает информацию с сайта НБУ (https://bank.gov.ua/ua/markets/exchangerates) и сохраняет ее в папке "output" (она создается автоматически).
…
Данные сохраняются в таблице формата .csv и имеют следующий вид:
Код валюты,Название валюты,Курс
AUD,Австралийский доллар,27.0946
...
Техническое описание:
Парсер разбит на функции, что делает его модульным и быстрым в разработке.
Ссылка на сайт и папку с результатами вынесены как отдельные константы.
Для запуска нужно установить зависимости командой (лучше делать это в виртуальной среде):
pip install -r requirements.txt
-
26 870 UAH Создание ПО, парсеров, ботов
Парсинг данныхСоздам парсер, бот-тг, ПО по вашим запросам
-
1500 UAH Парсинг сайта cv.ee
Парсинг данныхCvParser - это инструмент для сбора вакансий с сайта cv.ee.
Возможности
- Извлекает ключевую информацию
-
1500 UAH Парсер для сбора списков вакансий с сайта CVKeskus.
Парсинг данныхПарсер для вилучення списків вакансій з сайту CVKeskus.
Функції:
- Отримує та аналізує вакансії з CVKeskus
… - Виводить структуровані дані для подальшої обробки
- Легко налаштовується та розширюється
-
1500 UAH Парсер для извлечения и обработки списков вакансий с сайта
Парсинг данныхПарсер для извлечения и обработки списков вакансий со шведского сайта Arbetsförmedlingen.
Функции
- Получает вакансии с Arbetsförmedlingen
… - Анализирует и структурирует данные о вакансиях
- Выводит результаты в удобном формате
-
Парсер сайта zdorov-info.com.ua
Парсинг данныхПарсер сайта https://zdorov-info.com.ua
#json #beautifulsoup #Парсинг
-
500 UAH Парсер количества подписчиков тг каналов
Парсинг данныхПарсер количества подписчиков тг каналов и возможность писать комментарии
#Telegram #Парсинг
-
1500 UAH Парсинг онлайн-магазинов
Парсинг данныхУ меня есть опыт настройки парсинга для практически любого онлайн-магазина, от небольших специализированных платформ до крупных маркетплейсов. Обеспечиваю сбор необходимых данных, включая информацию о товарах, ценах, наличии, характеристиках, и подготовку этих данных для дальнейшей обработки. Готов выполнить персонализированные требования заказчика — от подготовки данных в удобный для аналитики формат до создания индивидуальных решений, которые интегрируются с внутренними системами бизнеса.
**Фото и видео материалы ограничены NDA
#scrapy #beautifulsoup #selenium #python-scraping
-
1000 UAH Написание парсеров или парсинг товаров из интернет-магазинов
Парсинг данныхПарсинг товаров из интернет-магазинов Excel, XML, Json
Цена от 1000 грн. Окончательная цена зависит от сложности сайта и количества
-
4000 UAH Спарсити сайт Steam
Парсинг данныхСайт https://store.steampowered.com/
Всі ігри на українській та англійській мові (регіон Україна та США), окрім ігор для дорослих (секс контент).
… Саундтреки, програми та інший контент не потрібен, лише ігри.
Кожна категорія містить підкатегорію, наприклад Аркади, Казуальні, Відкритий світ, Стрілянки та багато інших.
Перелік посилань для парсингу відсутній, необхідно зібрати самостійно. На сайті є посилання на всі категорії та різні операційні системи.
1. Дані повинні бути у вигляді файлів json (по 100 мб кожний), щоб можна було скриптом завантажити в mysql базу даних для нашої структури.
2. Перший файл складається з двох підрозділів: "categories" та "apps".
- "categories" містить в собі масив об'єктів, які включають в себе "title" (назва категорії/розділу) та link (повне посилання на категорію/розділ)
- "apps" містить в собі масив об'єктів, які включають в себе всю інформацію про додаток.
Кожен наступний файл вже не містить в собі розділення на "categories" та "apps", бо весь список категорій є в першому файлі. Далі тільки інформація про додатки.
3. Структура об'єктів, які містить масив "apps":
link - Повне посилання на додаток/гру
name_company - Розробник
company_link - Повне посилання на розробника
title - Назва додатка/гри
content - Опис додатка/гри (текст опису та вся технічна інформація. версія, вартість, оновлення, мови і тд)
categories - Всі категорії до яких відноситься додаток/гра, наприклад ['Інді', 'Стратегії']
rated - Вікові обмеження
update - Останнє оновлення додатку/гри
reviews - Кількість відгуків додатку/гри
rating - Рейтинг застосунку
price - Вартість (ціна)
size - Розмір додатку (мегабайт)
compatibility - Сумісність ( Windows, MacOS, Linux, SteamOS тощо), наприклад ['Windows', 'macOS']
logo_image - Посилання на зображення зі сторінки - Логотип застосунку/гри
logo_path - Назва зображення зі сторінки - Логотип застосунку/гри
all_image - Посилання на зображення зі сторінки - “скріншоти” застосунку/гри (перші 3 скріншоти, якщо немає зображень, то таку гру пропускаємо)
all_image_path - Назва зображення зі сторінки - “скріншоти” застосунку/гри
3. До цих файлів нам необхідна папка:
- З картинками (логотип додатка/гри + зображення зі сторінки додатка/гри)
Резюмуючі, нам потрібно мати:
- 1.json, 2.json, 3.json... - файли з усією інформацією про всі категорії та додатки/ігри
- images_1, images_2, images_3... - папки з зображеннями зі сторінок додатків/ігор, можна розділити їх по 5 гб
-
400 UAH Парсинг парсер, скрапинг, список экспонентов CPHI 2024
Парсинг данных#ПарсингCPHI2024
#СборДанныхCPHI
#СписокВыставителейCPHI
#ВебСкрейпингCPHI
… #ДобычаДанныхCPHI
#ИнструментСкрейпингаCPHI
#ДанныеВыставителейCPHI
#АвтоматизацияДанныхCPHI
#ИзвлечениеВебДанныхCPHI
#ИсследованиеВыставителейCPHI
#ДанныеСобытийCPHI
#РешенияПоСкрейпингуCPHI
#АнализДанныхCPHI
#ИнсайтыВыставителейCPHI
#СкрейпингСобытийCPHI
#АналитикаВыставителейCPHI
#УправлениеДаннымиCPHI
#БезопасностьСкрейпингаCPHI
#ВыставкаБезопасности2024
#ОтслеживаниеВыставителейCPHI
#ОбработкаДанныхCPHI
#ОтраслевоеСобытиеCPHI
#АнализДанныхСобытийCPHI
#КонференцияПоБезопасностиCPHI
#МониторингВыставителейCPHI
#СборУрожаяДанныхCPHI
#ВебДобычаДанныхCPHI
#БезопасностьЭссенГермания
#АгрегаторДанныхCPHI
#ИнновацииВОбластиБезопасностиCPHI
#ТехникиСкрейпингаCPHI
#ВизуализацияДанныхCPHI
#КартированиеВыставителейCPHI
#ИнструментыВебСкрейпингаCPHI
#ИзвлечениеДанныхCPHI
#ИсследованиеБезопасностиЭссен
#ПрофилированиеВыставителейCPHI
#СборДанныхCPHI
#ДанныеБезопасностиЭссен