Написать парсер (программу) под конкретный сайт
1000 UAHДобрый день.
Необходимо написать парсер для постоянного парсинга сайта - http://joxi.ru/1A5QQvMTDO8ZkA
Пожалуйста, внимательно ознакомьтесь с требованиями.
Основные требования:
1) Парсер должен будет работать на удаленном сервере (VPS)
2) Парсер должен не более чем за 20 часов обходить весь сайт, собирать информацию по всем товарам и сохранить данные в единой таблице excel на том же сервере. Дублей в файле быть не должно! (если один и тот же товар входит в несколько категорий, проставляется только одна из них, которая попадается первой).
Также нужно учесть, что парсер должен проходить сайт по реальному меню (а не брать ссылки на товары из сайтмап)
Пример итоговой таблицы с заполненным товаром - https://docs.google.com/spreadsheets/d/1Noooidxu85a3DUR9_j2j0Rlyt-fk2CikQrTlO8vXtPU/edit?usp=sharing
Возможно, что-то не учел, можно обсудить
3) Должна быть возможность использовать прокси
Интересует цена и сроки реализации, а также язык, на котором будет написан парсер.
Бюджет поставил условный, указывайте свой.
Если есть замечания, также готов обсудить в комментариях к задаче.
Актуальные фриланс-проекты в категории Парсинг данных
Парсинг данных через мобильное APIИщу человека с опытом парсинга данных через мобильное API, для парсинга e-commerce, rozetka и аналоги Задачи: 1. Перехват трафика мобильного приложения (Android) настройка прокси, анализ запросов 2. Определение нужных API endpoints куда идут запросы, какие headers… Python, Парсинг данных ∙ 1 день 3 часа назад ∙ 24 ставки |
Ищу программиста или вайб кодинг Автоматизация scraping данных 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing я нечаянно на ту ссылку послал Веб-программирование, Парсинг данных ∙ 1 день 5 часов назад ∙ 33 ставки |
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 6 дней назад ∙ 19 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 6 дней 4 часа назад ∙ 38 ставок |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 6 дней 7 часов назад ∙ 42 ставки |
Киев