Парсинг данных
177-
B2B база с Prom.ua: 5-шаговый pipeline с обогащением контактов
Парсинг данныхЗадача: собрать B2B базу магазинов Prom.ua по товарным категориям
(спортивные товары, мебель, авто запчасти и др.) с контактами
владельцев для cold outreach.
… Pipeline (5 шагов):
— Шаг 1: Парсинг Prom.ua по категориям → дедупликация
— Шаг 2: Извлечение телефонов (мобильный владельца) и сайтов
— Шаг 3: Обогащение ЕДРПОУ → ФЛП/ООО, ФИО директора
— Шаг 4: Проверка Facebook Pixel на сайтах (авто-скрипт)
— Шаг 5: Экспорт в Google Таблицу (gspread API) + Excel
#парсинг #prom #b2b #python #едрпоу #google_sheets #pipeline
-
Первоначальный публичный релиз `otomoto_parser`.
Парсинг данныхКонфигурируемый скрепер объявлений автомобилей Otomoto.pl с хранилищем SQLite, поиском через CLI, экспортом в CSV/XLSX и резервным вариантом Playwright.
-
Job Scraper - Збір вакансій Python
Парсинг данныхАвтоматизована система для збору вакансій Python-розробників з сайтів працевлаштування з подальшим збереженням у SQLite базу даних.
-
Сбор данных с Google Maps
Парсинг данныхСбор данных с Google Maps в любом городе/области.
Возможность выбора:
- Категории (Кафе, аптека, СТО и т.д...)
- Местоположение (Город или область)
…
Сохранение собранных данных в xlsx-файл.
Технологии
#python
#selenium
#pandas
#beautifulsoup4
#Парсинг #Google_Maps по поисковому запросу "Кафе Чернигова" #Парсинг_Google_Maps
-
Amazon scrapper
Парсинг данныхСкрипт призначений для скрапінга даних з сайту www.amazon.com.
Написаний на Python з використанням бібліотеки Selenium. Для зберігання результатів використовується база даних SQLite.
#Python #Selenium #SQLite
-
2000 UAH Очистка базы от дублей
Парсинг данныхОчистка базы от дублей
-
4478 UAH ПромЮа Автоматический Парсер
Парсинг данныхМы написали парсер с постоянным мониторингом и выгрузкой с сайта PromUA.
Готовы адаптировать его под ваши запросы и потребности.
Сотрудничаем как одноразово, так и с постоянным обновлением данных.
Помогаем с интеграцией в ваше ПО/маркетплейс/CRM.
… Передаем данные в удобном вам формате (CSV, XLSX и другие).
#парсер #Автоматизация #вебскрейпинг #саас #продажи
#автоматизация
#вебпарсинг
#парсер
#скрапер
#saas
#b2b
#itуслуги
#сборданных
#анализданных
#мониторинг
#мониторингцен
#мониторингтоваров
#остаткитовара
#ценообразование
#анализрынка
#данныевреальномвремени
#интеграция
#crm
#erp
#api
#маркетплейс
#электроннаякоммерция
#ecommerce
#интернетмагазин
#каталоги
#товары
#продавцы
#конкуренты
#priceintelligence
#promua
-
4478 UAH OLX/PromUa Партнер
Парсинг данныхМы написали автоматический парсер с постоянным мониторингом сайтов OLX/PromUA. Готовы адаптировать его под ваши запросы и потребности. Сотрудничаем как одноразово, так и с постоянным обновлением данных. Помогаем с интеграцией в ваше ПО/маркетплейс/CRM. Передаем данные в удобном вам формате (CSV, XLSX и другие). #парсер #Автоматизация #вебскрейпинг #саас #продажи
#парсер
#парсинг
#автоматизация
… #вебпарсинг
#сборданных
#анализданных
#мониторинг
#мониторингцен
#olx
#олх
#бизнес
#автоматизациябизнеса
#crm
#маркетплейс
#интеграция
#интеграциясистем
#itуслуги
#saas
#стартап
#лидогенерация
#продажи
#olxautomation
#olxparser
#olxmonitoring
#realtimeparser
#customparser
#datatocsv
#xlsxexport
#api
#crmbridge
#marketplaceautomation
#priceintelligence
#datadriven
-
1500 UAH Парсер интернет-магазина (товары/цены/остатки)
Парсинг данныхСитуация:
Заказчику нужен инструмент для автоматического сбора информации из интернет-магазина: название, фото, цена, описание, остатки, категория.
Что я сделал:
…
написал парсер, который обходит весь каталог
автоматическая загрузка фото
получил цену, характеристики, доступность, SKU
обработка пагинации и сложных HTML-структур
обход антибот-защиты (тайминги, заголовки, динамические задержки)
экспортировал данные в PostgreSQL и Google Sheets
реализовал расписание запусков через cron + отчеты
Результат:
клиент автоматически обновляет цены и товары без людей
экономия ~60 часов работы каждый месяц
возможность импортировать данные на свой сайт/CRM
стабильная работа парсера 24/7
Технологии:
Python, Selenium, BeautifulSoup, lxml, Asyncio, PostgreSQL, GSheets API.
-
Парсер теннисных матчей для Melbet (melbet.com) — сбор данных для
Парсинг данныхРазработал синхронный парсер теннисных матчей с букмекерского сайта Melbet (melbet.com) для дальнейшего использования данных в модели машинного обучения.
Парсер в режиме, приближенном к реальному времени, проходил страницы с теннисными событиями через Selenium WebDriver, последовательно обходил необходимые узлы DOM и забирал структурированные данные: турнир, игроки, время начала, рынки, коэффициенты и т.д. Скорость парсинга регулировалась (настроенные паузы между запросами и переходами между страницами), чтобы обеспечить стабильную работу без перегрузки сайта.
… Полученные данные очищались, проверялись на корректность и сохранялись в MS SQL Server в виде нормализованных таблиц (матчи, турниры, рынки, коэффициенты). После этого реализован экспорт в CSV/табличные файлы в формате, удобном для дальнейшего анализа и обучения ML-моделей прогнозирования результатов/коэффициентов.
Я полностью спроектировал и реализовал решение: схему базы данных, логику синхронного обхода страниц с управлением скоростью, обработку ошибок в Selenium, маппинг в SQL-таблицы и модуль экспорта данных в CSV.
Использованные технологии: C#, .NET, Selenium WebDriver, MS SQL Server, ADO.NET / ORM, CSV-экспорт, подготовка датасета для ML.
-
Парсинг максимального товара Розетки
Парсинг данныхТелеграм-бот для автоматического отслеживания остатков товаров на Rozetka с синхронизацией данных в Google Sheets.
Что делает:
… 1. принимает ссылки на товары и сохраняет их в базу
2. автоматически проверяет наличие и обновляет остатки по расписанию
3. синхронизирует данные с Google Sheets и экспортирует историю
4. поддерживает массовое добавление товаров (до 20 за раз)
5. позволяет вручную проверять остатки и обновлять таблицу
6. хранит историю проверок и формирует отчёты
7. умеет удалять и редактировать товары
8. работает в автоматическом и ручном режимах
9. логирует все операции и перезапускается при ошибках
Бот полностью асинхронный, устойчив к ошибкам, умеет перезапускаться, логировать все операции и обновлять данные по расписанию.
-
1343 UAH Веб-Парсинг
Парсинг данныхВеб-Парсинг (Web Scraping): Превратите Интернет в Вашу Базу Данных
Откройте Двери к Бесконечным Знаниям
Современный бизнес требует актуальных данных. Веб-парсинг — это не просто сбор информации; это стратегический инструмент, который позволяет мгновенно превратить миллионы веб-страниц в чистый, структурированный и готовый к анализу ресурс.
… Что мы делаем?
Мы создаем надежные и быстрые парсеры, которые имитируют действия человека, собирая необходимую информацию с любых веб-сайтов — от открытых данных до динамических страниц, защищенных JavaScript.
Ценовой Мониторинг: Регулярный сбор цен конкурентов, акционных предложений и информации о наличии товаров.
Сбор Контента: Извлечение текстов, описаний продуктов, отзывов и метаданных для SEO-анализа или наполнения вашей платформы.
Лид-Генерация: Сбор контактных данных и информации о компаниях для маркетинговых кампаний.
Ключевые Преимущества:
Чистота и Структура: Мы доставляем данные уже отформатированными в удобные для вас форматы (JSON, CSV, Google Sheets, XML), готовые к прямому импорту.
Устойчивость к Изменениям: Наши парсеры разработаны с учетом защиты от блокировок и автоматически адаптируются к небольшим изменениям в структуре сайта-источника.
Автоматизированный Режим: Настройка регулярных автоматических загрузок данных (ежедневно, ежечасно, еженедельно), чтобы ваша база данных всегда была актуальной.
Работа с Файлами: Возможность автоматической загрузки прикрепленных файлов (PDF, изображений, документов) во время парсинга.
Наш Подход
Анализ Источника: Изучение структуры сайта и его механизмов защиты.
Разработка Специализированного Парсера: Создание уникального инструмента, который работает эффективно и незаметно.
Валидация и Контроль: Многоуровневая проверка качества и полноты собранной информации перед финальной доставкой.
Получите конкурентное преимущество, основываясь на фактах, а не на предположениях.