Есть парсинговая система из нескольких парсеров. Сами процессы парсинга между собой не связаны, в конце парсинга только сравнивается результаты их работ (при надобности исполнителю предоставлю детальное ТЗ со всеми процессами для понимания).
Задача следующая:
На данный момент времени один из парсеров написанный на Python перестал работать, в результате парсинга не собираются нужные данные, то есть процесс парсинга запускается, сервак, Cron на VPS отлично работает, но в результате не собираются нужные данные. Возможно поломка мелкая, банально поменялась где-то структура сайта, по этому парсер перестал работать, но смотрел сайт, визуально вроде бы ничего не менялось. В общем необходимо устранить проблему.
Если вам удастся разобраться с работоспособность парсера, есть следующий таск. Для ещё одного парсера нужно будет дописать отправку статистики на почту/телеграмм + туда же error log в случаи ошибки парсинга. Разуметься для этого создам отдельный проект на фрилансе, данная задача к этому таску отношения не имеет.
Требования к исполнителю:
- Знание Python на должном уровне и опыт работы;
- Опыт работы с парсерами;
- Mongodb (в нем храниться весь результат работы парсеров);
- Опыт работы с установкой и настройкой VPS;
Требуется хороший специалист, чтобы не положить всю систему, так как на данном VPS работает ещё 2 парсера и настроен cron для ежедневного запуска парсеров и дополнительных функций, просьба делать всё предельно аккуратно.
Про саму парсинговую систему расскажу детальнее в переписке/на созвоне или при надобности предоставлю ТЗ.
Интересует долгосрочное сотрудничество по мере возникновения неполадок, либо для реализации идей по доработке/усовершенствованию и также написания и интеграции новых парсеров.
