Есть парсинговая система из нескольких парсеров (сами процессы парсинга между собой не связаны, сравнивается только результат их работы) и UI для управления ей.
Задача следующая:
На данный момент времени один из парсеров написанный на Node js перестал работать, в результате парсинга последний месяц всегда приходит нулевая статистика (то есть процесс парсинга запускается, сервак, Cron и API на VPS отлично работает, но в результате на почту приходит статистика с 0 новых почтовых адресов). Также смотрел сам сайт который парситься, изменений и апдейтов на нём не увидел.
Необходимо устранить эту проблему.
Если вам удастся устранить момент с работоспособность парсера в этом таске, есть следующий таск. Для ещё одного парсера нужно будет поправить работу з proxy листом (лист прилетает из API) через который он работает. Разуметься для этого создам отдельный проект на фрилансе, данная задача к этому таску отношения не имеет.
Требования к исполнителю:
- Знание Node js на должном уровне и опыт работы;
- Опыт работы с парсерами;
- Mongodb (в нем храниться весь результат работы парсеров);
- Опыт работы с установкой и настройкой VPS;
Требуется хороший специалист, чтобы не положить всю систему и 5 парсеров которые работают параллельно с этой системой, плюс сам бэкенд который взаимодействует с UI, лежит именно на этом VPS этого парсера который мы будем фиксить, просьба делать всё предельно аккуратно.
Про саму парсинговую систему расскажу детальнее в переписке/на созвоне.
Интересует долгосрочное сотрудничество по мере возникновения неполадок, либо для реализации идей по доработке/усовершенствованию и также написания и интеграции новых парсеров.
