Парсинг сайтов недвижимости

Всем привет.

Попытаюсь описать задачу.  Занимаюсь инвестициями в недвижимость. Есть порядка 100 сайтов, на которы собраны предложения по объектам недвижимости (Европа). Для теста есть задача начать парсить в течении месяца один из сайтов , чтобы понять какую информацию можно получить  и как ее после анализировать. Шаг 1 понять что можно получить и в каком объеме (сколько на самом деле записей, старые/ новые и т.п) а затем наладить ежедневную выгрузку информации в нашу будущую базу данных. Мы эти данные не будем использовать для никаких выгрузок, а только для своих нужд для анализа с последующей аналитикой. В будущем, когда научимся делать аналитику, количество сайтов возрастет до 10, а затем до 50 - 70 сайтов;   Нужно получать со страницы ВСЕ даже то, что не видно на странице, если такая информация доступна.

Большой Вам плюс если умеете выявлят дубли (а их может быть много)

Сейчас для теста хочу разобраться с первым сайтом и понять, что на самом деле и в каком объеме можем получать из него на ежедневной основе.

Готов оплатить парсинг одного сайта в течении одного месяца на ежедневной основе, что бы собрать базу, научиться выявлять дубли  и начать писать аналитику в нашей базе данных.

Если все пройдет по плану, готов на долгосрочное сотрудничество с увеличением кол-ва сайтов.

Прошу мне выслать условия для тестовой работы и условия для постоянного сотрудничества на 10 и на 50 сайтов с увеличением до 100

P.S. При долгосрочном сотрудничестве нужны ГАРАНТИРОВАННЫЕ данные на регулярной ежедневной основе т.е необходимо всячески предвидеть возможные блокировки со стороны сайтов и их заранее обходить (работать через прокси) и быстро реагировать на возможные проблемы сбором данных;