StreamSets DataCollector або NIFI
2) Вибираємо стримінг даних (наприклад тут: https://www.pubnub.com/developers/realtime-data-streams/ або свій варіант)
3) Інсталіма SDC (StreamSets DataCollector) або NiFi (хто хоче свій варіант, змушує свій.SDC і NiFi чудово встановлюються через Docker.4) Налаштуємо PayPal з обробки даних за своїм розглядом.Головне, що б було:
- отримання інформації з джерела (прямо з сервісу або з Kafka)
- валідація отриманих повідомлень (наприклад: ім'я не повинно перевищувати 16 символів, в іншому випадку об'єднуємо ряд з ім'ям до 16 символів)
- Обробка полів (наприклад, у стримінгу Ви отримуєте 2 окремі поля: ім'я і прізвище, у обробці Ви робите одне окреме поле fullname.- Умова вибору (наприклад, якщо Ви зустрічаєте ім'я { name }, то виконуєте певні дії (наприклад, відправляєте повідомлення в Телеграм.- Поставити оброблені дані в БД (можна вибрати будь-яку, але я дуже рекомендую ознайомитися з Druid хоча б що-небудь, щоб зрозуміти).Кожна робота закінчується презентацією того, що було виконано командою і звітом за виконаною роботою.Вміст доповіді:
Заголовна сторінка з назвою теми та списком команд
- Постачання завдання
- підхід до рішення (звідки беруться дані, які технології вибрали для рішення і т.д.)
Опис рішення
- Висновки
Також до лабораторії додається код + експорт файл іл SDC/NiFi.До уваги !Доповіді не потрібно друкувати, достатньо DOCX/PDF
ТОЛЬКО StreamSets DataCollector или NiFi. Не своя разработка
Відгук замовника про співпрацю з Dmytro Ohorodnik
StreamSets DataCollector або NIFIПраця була виконана вчасно. Виконавчий завжди на зв'язку. Я рекомендую .
Відгук фрилансера про співпрацю з Мариною Шшшшш
StreamSets DataCollector або NIFIІдеальний замовник. Немає ніяких закликів.
-
1125 43 0 1 Здоров’я Я пропоную рішення на Python3, з наступним препроцесінгом даних і їх збереженням. Якщо базу даних можна вибрати будь-яку, то краще використовувати PostgreSQL або MySQL. Код зроблю з коментарями, звіт про реалізацію парсера також напишу. З задоволенням взяти за виконання.
-
2233 82 0 Добрий день ,
Я пропоную таке лабораторне рішення: парсим дані з будь-якого джерела (наприклад за допомогою API) і скрипт на Python 3 перепроцесує дані і заповнює БД. Є таке робоче рішення - я можу переписати під ваші потреби.
Відповідно, опишу весь процес у звіті.
Розглянемо і Ваш варіант рішення, зацікавлений у співпраці.
Будемо раді вам допомогти!
Актуальні фриланс-проєкти в категорії Python
Створення бота багато фунціонального бота в телеграм
1000 UAH
(Всі матеріали предоставлю в приватні повідомлення) Ось детальний опис проєкту: Псіля натискання кнопки /start Бот присилає текст з правилми та умови користування (під текстом, кнопка ‘ознакомлен’) Після натискання на кнопку, наступне повідомлення ʼпроверка на подпискуʼ Три… Python, Розробка ботів ∙ 14 годин 3 хвилини тому ∙ 67 ставок |
Знайти товарний фід (Google Merchant XML) для сайту на OpenCart
700 UAH
Необхідно знайти пряме посилання на діючий товарний фід (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Знайти оригінальний фідВимоги до результату: Робоче посилання на XML-файл Python, Парсинг даних ∙ 3 дні 3 години тому ∙ 22 ставки |
Розробка Тік-Ток ферми (контент-завод)Необхідно розробити систему для централізованого управління кількома TikTok-акаунтами з автоматичною публікацією контенту, використанням індивідуальних проксі та імітацією природної активності акаунтів. Функціональні вимоги1. Управління акаунтами Додавання та видалення… Python, Розробка ботів ∙ 3 дні 14 годин тому ∙ 19 ставок |
Покращити роботу Claude Code та роботу з написанням програмного забезпеченняЗараз розробляю СРМ та Аналітику, софт. Роблю через Клод Код, але розумію, що результати не найкращі в плані змін. Є 2 задачі - Потрібно допомогти зробити пресет по навичкам, мд і так далі, щоб покращити якість. Взяти перевірені, з якими працювали, а не з інтернету перші. - В… AI та машинне навчання, Python ∙ 3 дні 21 година тому ∙ 24 ставки |
Система OCRПотрібна система розпізнавання тексту на поштових конвертах (індекс кому - лише числа). Текст інколи може бути рукописним Розпізнавання марок (підрахунок кількості та номіналу) Python ∙ 4 дні тому ∙ 27 ставок |