Парсинг даних з сайту на сервер
Всім привіт!
Потрібно відремонтувати Парсер, який розміщено на сервері.
Після перезапуску сервера, Парсер перестав збирати дані.
Що з ним трапилось я не знаю, тому на питання: що ремонтувати? я не відповім
+
Потрібно налагодити Екстрактор даних з серверу.
Він був написаний під трохи інший код, але його можно адаптувати під цей парсер.
Інформація стосовно Парсера:
- Він написаний на javascript
- База даних mongodb
- Парсер реалізовано наступним методом:
- Сервер збирач отримує дані з сайту донору
- ->
- Сервер головний отримує дані від збирача та зберігає їх в бд
- ->
- Екстрактор, який написано на бібліотеці electronjs
- експортує (вибірково) дані в форматі csv на мій пк
- ОС серверів - Ubuntu без GUI, одна з останніх версій.
Пишу про це, тому що для деяких програмерів важливо, щоб був GUI =))
- Сервера розміщено на хостингу timeweb, тому можливо потрібно буде використовувати впн для коннекту, залежить від вашого провайдера, бо деякі блокують коннект.
Надам для роботи наступну інформацію:
- Архів з кодом, який розміщено на сервері
- Інструкція від хлопця, що писав код (Можливо допоможе розібратися з тим, як працює парсер)
- Доступ до серверів, наступного формату:
Ім'я серверу: Main Server
IP сервера: 185.104.XXX.XX
Им`я юзера: root
Пасс: хухухухухухухухухухух
Доступ можливий через ссх, або консоль сайту
- Архів з кодом Екстрактора
З повагою, Є
Додаю більше інфи про код парсеру.
Ось інфа з файлу package.json
{
"name": "task_planner",
"version": "1.0.0",
"description": "",
"main": "index.js",
"scripts": {
"build": "tsc",
"test": "echo \"Error: no test specified\" && exit 1"
},
"author": "",
"license": "ISC",
"dependencies": {
"amqplib": "^0.8.0",
"dotenv": "^10.0.0",
"mongodb": "^4.1.0",
"mongoose": "^5.13.5",
"redis": "^3.1.2",
"winston": "^3.3.3"
},
"devDependencies": {
"@types/amqplib": "^0.8.1",
"@types/dotenv": "^8.2.0",
"@types/mongodb": "^4.0.7",
"@types/node": "^16.4.11",
"@types/redis": "^2.8.31",
"@types/winston": "^2.4.4",
"typescript": "^4.3.5"
}
}
-
2 дні2000 UAH
211 10 3 1 2 дні2000 UAH
Добрый день, заинтересовал Ваш проект, слишком много вопросов, можем созвонится и обсудить. С убунту проблем нет, с монгой тоже), екстрактор нужно посмотреть/обсудить. Цена и сроки пока условны, буду рад сотрудничеству. Спасибо!
p.s. : У меня давно не было активности на этом сервисе, пусть Вас это не смущает, за прошедшее время мои навыки значительно выросли
-
7 днів2000 UAH
953 11 0 7 днів2000 UAH
Имею много опыта в работе с JS, парсингом сайтов, сохранением в mongoose.
В package заметил компилятор typescript-a, с ним так же много опыта, обращайтесь)
Сроки и сумму обсудим после деталей проекта
Актуальні фриланс-проєкти в категорії Javascript та Typescript
Шукаю досвідченого Full Stack розробника для створення SaaS-сервісу для інтернет-магазинів.Ідея сервісу: Клієнт завантажує посилання на свій товарний фід (XML або CSV). Сервіс автоматично отримує товари, бере їхні фотографії та створює нові рекламні зображення за готовими шаблонами: ціна, знижка, логотип, акційні плашки тощо. Також у сервісі має бути простий редактор… Javascript та Typescript, Веб-програмування ∙ 16 годин 44 хвилини тому ∙ 69 ставок |
Розробка WebGL/Three.js сцени з генерацією та експортом 3D (снапшот) з анімованого шейдераОпис об'єкта:Проект являє собою дизайнерський стіл, виконаний у формі реалістичного, глибокого водовороту (центральна воронка, яка плавно переходить з широкої горизонтальної стільниці в тонку витончену ніжку). Суть задачі:Потрібен WebGL / Creative Coding розробник для створення… Javascript та Typescript, Веб-програмування ∙ 1 день 13 годин тому ∙ 27 ставок |
Підтримка та розвиток сайту клінінгової компанії
906 UAH
Шукаю веб-розробника / вебмайстра для довгострокової підтримки та розвитку сайту клінінгової компанії. Сайт: https://donely.ca Про проєкт DoneLy Home Services — компанія з надання послуг прибирання в Канаді, яка активно розвивається та розширює географію роботи. Шукаю… Javascript та Typescript, Веб-програмування ∙ 3 дні 15 годин тому ∙ 63 ставки |
Розробка сайту по ТЗ на FramerПотрібно зробити сайт по цим параметрам що в тз https://docs.google.com/document/d/1ODO2C9Krb4AaMiJz9wfbNzWlAyA2FwCCHL8r0biajUY/edit?usp=sharing Називайте реальний рейт на основі цього дизайну HTML та CSS верстання, Javascript та Typescript ∙ 4 дні 16 годин тому ∙ 27 ставок |
Розробка інтерактивної карти Palworld для сайтуПотрібно розробити інтерактивну карту Palworld за прикладом: https://palworld.gg/map Нам потрібна не просто статична картинка, а повноцінна інтерактивна карта, де користувач може дивитися локації, вмикати / вимикати категорії об’єктів, шукати потрібні точки та взаємодіяти з… HTML та CSS верстання, Javascript та Typescript ∙ 6 днів 7 годин тому ∙ 36 ставок |