Пофиксить парсер на VPS (парсер написанный на Node.js)
Есть парсинговая система из нескольких парсеров (сами процессы парсинга между собой не связаны, сравнивается только результат их работы) и UI для управления ей.
Задача следующая:
На данный момент времени один из парсеров написанный на Node js перестал работать, в результате парсинга последний месяц всегда приходит нулевая статистика (то есть процесс парсинга запускается, сервак, Cron и API на VPS отлично работает, но в результате на почту приходит статистика с 0 новых почтовых адресов). Также смотрел сам сайт который парситься, изменений и апдейтов на нём не увидел.
Необходимо устранить эту проблему.
Если вам удастся устранить момент с работоспособность парсера в этом таске, есть следующий таск. Для ещё одного парсера нужно будет поправить работу з proxy листом (лист прилетает из API) через который он работает. Разуметься для этого создам отдельный проект на фрилансе, данная задача к этому таску отношения не имеет.
Требования к исполнителю:
- Знание Node js на должном уровне и опыт работы;
- Опыт работы с парсерами;
- Mongodb (в нем храниться весь результат работы парсеров);
- Опыт работы с установкой и настройкой VPS;
Требуется хороший специалист, чтобы не положить всю систему и 5 парсеров которые работают параллельно с этой системой, плюс сам бэкенд который взаимодействует с UI, лежит именно на этом VPS этого парсера который мы будем фиксить, просьба делать всё предельно аккуратно.
Про саму парсинговую систему расскажу детальнее в переписке/на созвоне.
Интересует долгосрочное сотрудничество по мере возникновения неполадок, либо для реализации идей по доработке/усовершенствованию и также написания и интеграции новых парсеров.
-
3531 88 3 3 Недавно написал парсер на nodejs.
С нодой опыт не большой, что бы не поломать я не буду ничего трогать на сервере, просто посмотрю ошибки, потом запущу у себя, и тогда уже выложу поправленую версию.
По требованиям:
Требования к исполнителю:
1. опыта не много.
… 2. много писал парсеров, в основном на php, последнее время на ноде
3. мало работал
4. более 10 лет.
-
267 4 0 Есть опыт работы в подобных задачах. Отлично разбираюсь в "ubuntu/debian like" окружении
-
512 14 1 иногда бывает, что на сайте вносится перенос строки и уже все разваливается. нужно посмотреть принцип парсинга и тогда сразу будет понятно где, что и кто ) пишите в лс
-
40736 796 2 8 Здравствуйте.Есть большой опыт с Node.js.Готов к сотрудничеству.Обращайтесь)
Актуальные фриланс-проекты в категории Node.js
Доработка и сопровождение сайта React/Node.jsДобрый день, в поисках фрилансера со знанием React/Node.Js для своего проекта микро-сервиса генератора чеков. Веб сайт: receiptmaker.io Есть список задач которые нужно будет реализовать в дальнейшем (добавление новых страниц на сайт с контентом на ежемесячной основе, доработка… Javascript, Node.js ∙ 24 ставки |
React.js разработчик для платформы букингаЯ ищу опытного Full-stack React разработчика для работы над проектом (сервис онлайн-букинга). Технологии: React.js, React Native, Angular, Node.js, MongoDB Javascript, Node.js ∙ 24 ставки |
AWS Video CDN инженер / специалист |
Создание backend на Node.jsДобрый день , неоходимо реализовать базовые модули для геймификации в игре: - Топ игроков- Игра на рейтинг и монеты- Подробная статистика по играм- Поиск игры- Динамика игровой механики в самой игровой сессии в мафии- Социальные функции: - Приглашение друзей - Просмотр… Javascript, Node.js ∙ 14 ставок |
Проанализировать и развернуть проект на сервере
2000 UAH
Есть готовый проект Его нужно проанализировать и развернуть на нашем сервере. Полная настройка и консультация с его управлением Если у вас большой скел возможно заказать дополнительные услуги с интеграцией новых платежных систем Проект на Next.js 14 Node.js, Базы данных ∙ 6 ставок |