Фриланс-проекты › Парсинг объявлений Парсинг объявлений

Техническое задание на парсинг объявлений с сайта Autowini.  

__
Донор: https://www.autowini.com/Cars/car-search

Общие данные необходимо парсинг автомобилей из корейського торгового сайта.

Регулярный парсинг информации по необходимости (к примеру раз в неделю или 2).  
__

Со всех сайтов необходимо обеспечить  парсинг автомобилей с последующей выгрузкой на сайт через XML/CSV/JSON фид или напрямую в БД сайта.

Примерное кол-во товаров для парсинга: ~1500 товаров.

Парсинг Характеристик, фото, стоимости, перевод характеристик на общий формат сайта

CMS сайта – не популярная (открытый код php/mysql / есть доступ к разработчикам для вопросов или помощи в реализации отдельных моментов)
<!--[if !supportLineBreakNewLine]-->

3D осмотр – подсказать как можно парсить данный скрипт (пока не принципиально).

Регулярность парсинга:  - по необходимости, примерно раз в неделю (но возможно менять переодичность по необходимости).

Автопарсинг: реализовать парсинг в максимально автоматическом режиме. 

Нужно ли авторизоваться на сайте для парсинга: На данный момент нет.

Доработки и изменения: предусмотреть возможность в будущем дорабатывать и изменять параметры парсинга по необходимости

Также возможность доработки/расширения парсинга под другие ресурсы
Защита: предусмотреть обход возможных блокировок со стороны сайта донора. 

___

Донор :
https://www.autowini.com/Cars/car-search?i_sSearchType=quick&i_sStartYear=2018
<!--[if !supportLineBreakNewLine]-->

Шаг 1: выбор языка сайта Русский
Шаг 2:  выбор параметров фильтра:
Год выпуска авто:  с 2018 года
Марки для парсинга: – Hyundai | KIA | Toyota | Lexus
Вид топлива: Gasolin (бензин), LPG

Шаг 3: Выбор товаров из общего списка данных вход в карточку товара:
Необходимые данные для парсинга

<!--[if !vml]--><!--[endif]-->


 1. Цена авто
2. Разложенные характеристики текущие по отдельным столбцам, параметрам:
<!--[if !vml]-->

3. Фотографии:  Все фото из товара, складываются в отдельную папку и имеют путь названия к ней.
Ссылка с большим водяным знаком с сайта:

• Ссылка с малым водяным знаком – досточнок удалять в конце размер 1024 – (и тогда фото с меньшим водяным знаком иногда без него
  4. Описание в опций в формате (можно в формате html)
  <!--[if !vml]--><!--[endif]-->
  5. Ссылка на видео в формате
  
  https://www.youtube.com/embed/UR3i7dAG-Hc?rel=1&autoplay=1&autohide=2&enablejsapi=1&fs=0&modestbranding=1
  
  <!--[if !supportLineBreakNewLine]-->