Парсер для SimilarWeb и сортировка сайтов по скорости роста

Здравствуйте!

Уже сделал «маленький» прототип – консольная утилита, которая написанная на node.js с использованием базы данных SQLite3. Может работать как на вашем персональном компьютере, так и на сервере.

На данный момент, утилита работает в двух режимах.

1. Парсинг.
Парсинг работает в 10 потоков (можно изменить).
«Вытягивает» данные за 6 мес. БЕЗ API доступа.
… Сайты берет из текстового файла.
В консоли это выглядит так → https://i.imgsafe.org/1dc94e61c0.png

В базу данных, данные вносятся в таком виде (можно изменить) → https://i.imgsafe.org/1dc91b2c08.png

2. Анализ и вывод.
В этом режиме утилита анализирует данные из базы данных, и выводит их в html документ (можно поменять) в нужном виде, и в нужной последовательности.
Выглядит это примерно так → https://i.imgsafe.org/1dc9478c95.png

Могу доработать утилиту под ваши нужды — изменить, дописать, настроить и объяснить ;)

Здравствуйте, готов взяться за задание, есть большой опыт в парсинге сайтов. По поводу того каким образом лучше спарсить динамический сайт могу ответить вам в личных сообщениях.

По выполнению - для доступа к истории за 6 месяцев и более лучше купить доступ к api на месяц, вытянуть данные за 18 месяцев построив более точные отчеты.
По формуле построения зависимости темпов роста есть одна идея, можем обсудить в скайпе leks2git

Привет могу помочь дайте ответ

Здравствуйте, реализую качественно и в срок. Имею опыт написания парсеров для интернет-магазинов и персональных проектов (к примеру: http://shopvilleroyboch.ru/). Программа будет вытягивать сайты в списке, записывать данные в БД и расчитывать показатель роста. На сервере нужен PHP, а также cron. Буду рад сотрудничеству. Жду ответа)