Розробити парсер для Chrome Web Store
Всем привет, ищу исполнителя для написания парсера.
Далее этот скрипт будет дополняться, возможно другими магазинами экстеншинов, возможно дополнительным функционалом, поэтому рассчитываю на периодическое сотрудничество.
Если делали подобные парсеры, или есть в портфолио похожие проекты, указывайте, это будет большим плюсом.
Бюджет ориентировочный, поэтому указывайте ваши ориентировочные прогнозы.
Спасибо!
Вот предварительное ТЗ, финальное уже после детального обсуждения с исполнителем.
===============
Разработать парсер для Chrome Web Store, который должен парсить все возможные данные из магазина, как например:
Детальная информация по экстеншину/теме
Название
Описание
Категория
Отзывы
…и многое другое
Скачать архив экстеншена и получить дополнительную информацию из него (я предоставлю инструмент который дает такую возможность, или помогу настроить)
Сохранить файл
Размер файла
Переводы экстеншена
Данные из манифеста
Категории и индексы по категориям
Коллекции и индексы по коллекциям
Индексы выдачи по ключевым в поисковом дропдауне (ключевые слова будут предварительно переданы скрипту)
Индексы выдачи по ключевым в результате поиска (ключевые слова будут предварительно переданы скрипту)
Технические требования:
Скрипт должен запускаться с консоли
Поддержка многопоточности (так как экстеншинов и данных много, нужно оптимизировать парсинг)
Настроить сохранение данных в Postgresql и CSV
Парсер должен уметь решать различные блокировки, такие как капча или блокировка по IP, с помощью прокси или других инструментов
Внедрить систему логирования для отслеживания состояния парсера во время выполнения
Предоставлять отчеты после выполнения скрипта (количество обработанных экстеншинов, категорий, ключевых слов и т. д.)
Будет плюсом:
Хорошее знание баз данных, и оптимизация их, чтобы уменьшить количество дублей данных при повторном парсинге
Парсинг не по разметке, а по запросам к бекенду (так как именно для этого партнера это будет важно)
Опыт в написании подобных парсеров
-
786 27 2 2 Привет! У меня большой опыт в написании парсеров и ботов. Хорошо знаком с возможностями обхода капч, подмены IP и User-Agent, применения прокси и загрузки файлов с сайтов. Хорошим вариантом будет реализовать это на Селениуме, можно попробовать через запросы, но этот вариант проигрывает в контексте обхода блокировки. Вы планируете использовать гугл аккаунты или парсить без них? Можем подробно обсудить проект в личных сообщениях.
-
8168 63 1 Привет всем! Готов взяться за написание парсера для Chrome Web Store. Жду возможности обсудить детали проекта и начать работу. Спасибо!
-
2912 44 0 Здравствуйте.
Могу реализовать на nodejs
----------------------------------
-
8867 60 0 1 Good day!
Ready to create a parser for the Chrome Web Store.
Have experience in developing similar bots.
We write in Python. Ranked 9th on the platform in this language.
Looking forward to collaborating!
-
5000 грн за розв'язок капчі? 😂 😅
-
Актуальные фриланс-проекты в категории Базы данных и SQL
Вайбкодин через Claude Code
15 533 UAH
Разработать закрытую веб-платформу для корпоративных мероприятий с персональными приглашениями через уникальные ссылки и QR-коды. После сканирования QR-кода пользователь попадает на персональную страницу приглашения с приветственным сообщением, обращением по имени, фото и… AI в дизайне, Базы данных и SQL ∙ 1 час 20 минут назад ∙ 19 ставок |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 5 часов 11 минут назад ∙ 25 ставок |
Нужен специалист по Power BI для построения управленческой отчетности на базе BAS Бухгалтерия КОРПО компанииМы являемся дистрибьютором международных спортивных брендов в Украине. Учет ведется в BAS Бухгалтерия КОРП.Ищем специалиста, который поможет построить систему управленческой отчетности для руководства компании на базе Power BI.Важно: нас интересует не просто… Базы данных и SQL, Бухгалтерские услуги ∙ 4 дня 5 часов назад ∙ 6 ставок |
Техническое задание: Интеграция чат-бота Telegram с BAS1. Общая информация Необходимо реализовать интеграцию чат-бота с системой BAS для передачи и записи данных о товарах (заказах). 2. Входные данные (что передает чат-бот): ID группы Название товара (с кодом товара) Цена товара 3. Логика работы: При нажатии на кнопку Заказать… Автоматизация управления предприятием, Базы данных и SQL ∙ 4 дня 8 часов назад ∙ 19 ставок |
Розробка аналітичного Power BI дашборду
2000 UAH
Ось такий у нас запит, потрібна людина яка розбирається з Power BI: Экран 1: Strategic Cockpit (Финансовое здоровье завода) Цель: За 5 секунд понять, «где мы теряем деньги и сколько?». KPI Tiles (Верхняя полоса): Общая маржа (Факт vs План) в %. Сумма «упущенной выгоды»… Базы данных и SQL ∙ 7 дней 8 часов назад ∙ 13 ставок |