Пофиксить парсер на VPS (парсер написанный на Node.js)
Есть парсинговая система из нескольких парсеров (сами процессы парсинга между собой не связаны, сравнивается только результат их работы) и UI для управления ей.
Задача следующая:
На данный момент времени один из парсеров написанный на Node js перестал работать, в результате парсинга последний месяц всегда приходит нулевая статистика (то есть процесс парсинга запускается, сервак, Cron и API на VPS отлично работает, но в результате на почту приходит статистика с 0 новых почтовых адресов). Также смотрел сам сайт который парситься, изменений и апдейтов на нём не увидел.
Необходимо устранить эту проблему.
Если вам удастся устранить момент с работоспособность парсера в этом таске, есть следующий таск. Для ещё одного парсера нужно будет поправить работу з proxy листом (лист прилетает из API) через который он работает. Разуметься для этого создам отдельный проект на фрилансе, данная задача к этому таску отношения не имеет.
Требования к исполнителю:
- Знание Node js на должном уровне и опыт работы;
- Опыт работы с парсерами;
- Mongodb (в нем храниться весь результат работы парсеров);
- Опыт работы с установкой и настройкой VPS;
Требуется хороший специалист, чтобы не положить всю систему и 5 парсеров которые работают параллельно с этой системой, плюс сам бэкенд который взаимодействует с UI, лежит именно на этом VPS этого парсера который мы будем фиксить, просьба делать всё предельно аккуратно.
Про саму парсинговую систему расскажу детальнее в переписке/на созвоне.
Интересует долгосрочное сотрудничество по мере возникновения неполадок, либо для реализации идей по доработке/усовершенствованию и также написания и интеграции новых парсеров.
-
3351 101 4 3 Недавно написал парсер на nodejs.
С нодой опыт не большой, что бы не поломать я не буду ничего трогать на сервере, просто посмотрю ошибки, потом запущу у себя, и тогда уже выложу поправленую версию.
По требованиям:
Требования к исполнителю:
1. опыта не много.
… 2. много писал парсеров, в основном на php, последнее время на ноде
3. мало работал
4. более 10 лет.
-
190 4 0 Есть опыт работы в подобных задачах. Отлично разбираюсь в "ubuntu/debian like" окружении
-
418 14 1 иногда бывает, что на сайте вносится перенос строки и уже все разваливается. нужно посмотреть принцип парсинга и тогда сразу будет понятно где, что и кто ) пишите в лс
-
95312 1270 1 10 Здравствуйте.Есть большой опыт с Node.js.Готов к сотрудничеству.Обращайтесь)
Aktualne zlecenia dla freelancerów w kategorii Javascript & Typescript
Rozwój platformy AM Mobility (serwis samochodowy, parking, ubezpieczenie, wynajem samochodów)
21 265 PLN
Szukamy zespołu lub doświadczonego programisty Full Stack do stworzenia MVP platformy AM Mobility. AM Mobility to jednolita cyfrowa ekosystem dla kierowców, łącząca w jednej aplikacji i platformie internetowej: parking; serwis samochodowy; wulkanizację; myjnię samochodową;… Javascript & Typescript, Programowanie stron internetowych ∙ 4 dni 1 godzina temu ∙ 108 ofert |
Animacje Gsap
82 PLN
Dzień dobry. Trzeba wprowadzić poprawki w bieżącym projekcie. Potrzebny specjalista, który dobrze pracuje na gsap/lenis Trzeba zrobić animację kart. Szczegółowe wymagania tutaj:… Javascript & Typescript, Programowanie stron internetowych ∙ 4 dni 7 godzin temu ∙ 21 ofert |
Komercyjna platforma wideokonferencyjna on-premise „ViM”Wymagana jest opracowanie systemu wideokonferencyjnego on-premise z podstawowym obliczeniem na 100 jednoczesnych połączeń (10 izolowanych pokoi po 10 osób). Platforma powinna mieć wbudowaną architekturę do przyszłego poziomego skalowania do 1000 użytkowników poprzez dodawanie… Javascript & Typescript, Programowanie stron internetowych ∙ 5 dni 2 godziny temu ∙ 32 oferty |
Szukam mentora z Claude Code do uruchomienia projektu internetowego od zera**Krótko o zadaniu:** Jestem nowicjuszem bez doświadczenia w programowaniu. Mam gotowe TŻ na rozwój strony (42 strony, Next.js, PostgreSQL). Chcę zrealizować to samodzielnie za pomocą Claude Code - potrzebuję specjalisty, który skonfiguruje środowisko i nauczy mnie pracy z… Javascript & Typescript, Edukacja ∙ 6 dni 6 godzin temu ∙ 18 ofert |
Aktualizacja projektu na stronieTrzeba zaktualizować design istniejącej strony internetowej używając HTML, CSS, JS: odświeżyć wygląd, uczynić go nowoczesnym i responsywnym na urządzenia mobilne. Wymagana jest dodanie płynnych animacji i interaktywnych elementów. Układ HTML i CSS, Javascript & Typescript ∙ 6 dni 23 godziny temu ∙ 94 oferty |