Парсинг інформаційної платформи
Требується розробник для створення веб-парсера та системи автоматичної звітності.
Задача включає розробку рішення для збору фінансових транзакцій з веб-інтерфейсу платформи, їх коректної класифікації за внутрішньою бізнес-логікою та формування регулярної автоматичної звітності.
Що необхідно реалізувати:
Парсинг транзакцій з веб-сторінки (авторизація вже налаштована, робота через стабільну сесію).
Отримання додаткових атрибутів користувачів для коректної класифікації даних.
Логіка розподілу доходу між двома внутрішніми проектами за фіксованою датою приєднання користувача.
Збереження даних у БД без дублікатів з можливістю безпечного повторного запуску.
Розрахунок агрегатів за типами транзакцій.
Автоматична генерація daily, weekly, monthly та lifetime звітів.
Окрема логіка обробки refund операцій без ретроспективного перерахунку.
Інтеграція з Telegram для відправки звітів та технічних логів.
Обробка edge-case сценаріїв та сповіщення про помилки.
Технічні вимоги:
Запуск на Windows сервері.
Робота через стабільну сесію.
Чиста архітектура та масштабованість.
Надійне логування та контроль помилок.
Очікуємо досвід:
Парсинг веб-інтерфейсів.
Робота з БД.
Побудова автоматичної звітності.
Telegram Bot API.
Розуміння принципів фінансових агрегатів та дедуплікації транзакцій.
Проект орієнтований на довгострокове використання, тому важливі стабільність, акуратна архітектура та можливість подальшого розширення функціоналу.
-
Доброго дня, готовий попрацювати над вашим проектом, розробляю парсери на node.js, звертайтеся
-
✋ Доброго дня! Ми IT-компанія dZENcode.
Ми реалізуємо парсер фінансових транзакцій з класифікацією, дедуплікацією та звітністю на Python (FastAPI+Playwright), PostgreSQL та Telegram API, запуск на Windows Server, спираючись на досвід команди, найкращі практики та власні напрацювання.
Є API у платформи чи тільки парсинг DOM?
Яка БД та формат звітів переважні — CSV, XLSX, PDF?
Докладну інформацію про наші послуги та ставки ви знайдете на сайті:Freelancehunt.
Подивіться – далі обговоримо деталі роботи, пишіть, як будете готові.
…
Фінальна вартість формується тільки після уточнення обсягу та вимог.
___________________
З повагою,
Менеджер dZENcode
Наші сильні сторони:
💎 10+ років надаємо IT-послуги: Аутсорс, Аутстаф
🔥 90+ штатних спеціалістів
🚀 Проекти «з нуля» та на підтримку
⚙️ SLA та постпродакшн-супровід
✅ Договір з компанією, гарантований результат!
🔥 250+ публічних відгуків з 2015 року.
-
667 5 0 Вітаю! Зацікавив Ваш проєкт. Маю великий досвід у:
📊 Обробка даних: робота з базами, структуризація та аналіз інформації, автоматизація обробки великих обсягів даних, імпорт/експорт та валідація;
🤖 Автоматизація та емуляція дій користувача; розробка ботів різної складності;
⚡️ Асинхронний і багатопотоковий парсинг: збір та обробка даних з оптимізацією продуктивності;
🔍 OCR та пошук тексту: розпізнавання та структуризація інформації;
🖼 Обробка медіа: робота із зображеннями та мультимедіа;
🖥 Розробка ПЗ, десктопних застосунків, системних сервісів та служб;
📱 Мобільна розробка: нативні та кросплатформні додатки;
… 🌐 Робота з API та сторонніми сервісами: інтеграція, автоматизація та обмін даними;
🗣 Переклад та обробка тексту: автоматизація перекладу, робота з мовними моделями та текстовою аналітикою;
🤖 AI/LLM-рішення: інтеграція та використання штучного інтелекту, робота з мовними моделями та автоматизація інтелектуальних процесів.
Виконаю роботу швидко та якісно. Зв'яжіться зі мною для обговорення деталей та строків виконання проєкту!
-
265 Доброго дня.
Завдання зрозуміле — потрібен не просто парсер, а стабільна система, яка коректно збирає транзакції, рахує агрегати і формує автоматичні звіти без дублів і перерахунків заднім числом. З подібними проектами працював: налаштовував стійку сесію, безпечний повторний запуск, дедуплікацію і логіку обробки refund-операцій.
Зробимо акуратну архітектуру з збереженням даних у БД, розрахунком щоденних, щотижневих і щомісячних звітів та відправкою результатів у Telegram. Розгорнемо на Windows-сервері з нормальним логуванням і контролем помилок, щоб рішення працювало стабільно і масштабувалося далі.
Готовий обговорити деталі і розпочати реалізацію.
-
248 Доброго дня! Представляю команду Nexus Core.
Ми ознайомилися з вашою задачею по створенню системи веб-парсингу та автоматичної звітності для фінансових транзакцій. Наша команда спеціалізується на розробці відмовостійких IT-рішень для медіабайінгу та фінтеху, де точність даних і стабільність роботи під навантаженням є критичними факторами. Ми пропонуємо реалізувати проект на базі Node.js з використанням бібліотеки Playwright. Це забезпечить найбільш стабільну роботу з веб-інтерфейсами через браузерні сесії, дозволяючи ефективно обходити динамічні елементи та підтримувати авторизацію.
В якості фундаменту системи ми будемо використовувати PostgreSQL з ORM Prisma. Це дозволить реалізувати складну логіку дедуплікації транзакцій та коректну класифікацію доходів між проектами на рівні бази даних, забезпечуючи високу швидкість агрегації daily, weekly та monthly звітів. Особливу увагу ми приділимо архітектурі обробки refund-операцій без ретроспективного перерахунку та інтеграції з Telegram API для миттєвого отримання звітів і технічних логів. Увесь софт буде підготовлений для безперебійної роботи на Windows сервері з налаштованим логуванням всіх edge-case сценаріїв.
Для уточнення архітектури рішення у нас є кілька запитань:
На якому движку побудований веб-інтерфейс цільової платформи (React, Angular чи класичний серверний рендеринг)?
Який приблизний обсяг транзакцій планується обробляти за одну ітерацію парсингу?
Чи потрібна візуалізація звітів у вигляді графіків всередині Telegram, чи достатньо текстових агрегатів і файлів (CSV/Excel)?
… Наші кейси захищені NDA, однак у особистих повідомленнях ми готові детально розповісти про реалізовані нами парсери, платіжні шлюзи та системи автоматизації для великих арбітражних команд. Орієнтовна вартість реалізації такого комплексного рішення становить від $2 000, а термін розробки — 4–5 тижнів.
Напишіть у особисті повідомлення — ми уточнимо технічні деталі, запропонуємо оптимальну структуру БД та надамо фіксовану вартість з розбивкою по етапах розробки.
-
967 10 0 Доброго дня!
Ви вказуєте запуск на Windows сервері. Це часто тягне за собою проблеми з шляхами, кодуваннями та планувальником завдань. Я б запропонував одразу упакувати все в Docker: це гарантує, що на вашому сервері все запрацює так само ідеально, як у мене під час розробки.
По стеку: пропоную зв'язку Django + Celery. Django дасть нам відмінну базу для зберігання транзакцій і готову панель управління. Для ретраїв і черг (якщо парсинг впаде на середині) ідеально підійде Kafka або більш легкий RabbitMQ. Якщо проект не планує дико рости вшир: можна обійтися і без важких пайплайнів, залишивши архітектуру чистою і легкою.
Планую реалізувати унікальність на рівні індексів БД і перевірку по хешам транзакцій: це дозволить безпечно перезапускати процес хоч десять раз підряд. Логіку розподілу доходу по даті і рефанди винесемо в окремі сервісні шари: щоб код не перетворився в кашу.
Для точної оцінки мені потрібно розуміти пару моментів:
Яка саме база даних переважна для Windows середовища: MS SQL чи звичайний PostgreSQL?
Парсинг йде через відкритий API платформи чи потрібно імітувати дії браузера через Selenium/Playwright?
Який обсяг транзакцій очікується в день для розрахунку навантаження на звітність?
Потрібна чи можливість ручного редагування транзакцій через інтерфейс у випадку помилок на стороні платформи?
… Чекаю вашої відповіді: готовий обговорити деталі і приступити до реалізації.
-
656 9 0 Добрий вечір, Антоне!
В цілому завдання зрозуміле, для точного відповіді щодо термінів і ціни, хотілося б уточнити деякі питання, які у мене виникли після аналізу вашого завдання.
Пишіть в приватні повідомлення — обговоримо деталі та ваші побажання.
-
1422 13 0 Вітаю.
Можу реалізувати. Маю великий досвід парсингу та створення ботів Telegram.
Буде реалізовано:
- збір потрібної інформації
- Telegram-звіти + технічні логи
- детальне логування та контроль помилок
- запуск на сервері
- планувальник задач або сервіс
… - можливість подальшого масштабування
Для точної оцінки строків і бюджету уточніть:
- джерело парсингу
- приблизний обсяг транзакцій на добу
- формат вихідних даних
Після цього запропоную конкретну архітектуру та терміни.
-
172 1 1 Доброго дня. Готовий виконати цей проект, маю великий досвід розробки різних додатків.
-
655 6 1 Привіт, Антоне! Реалізую парсинг так, щоб гарантувати відсутність втрат даних і проблем з перерахунками. Налаштую безшовне підключення до профілів антидетекта. Архітектура заточена під стабільність сесій і виключення дублів. Готовий обговорити деталі в ЛС.
-
2409 8 1 Вітаю! 👋
Я якраз займаюся такими задачами: веб-парсинг → БД → автоматична фінзвітність → Telegram. Можу зібрати для вас рішення, яке один раз налаштовується й далі просто працює 📊⚙️
Що отримаєте в результаті:
• стабільний парсер, який тягне транзакції з веб-інтерфейсу через вже налаштовану сесію;
• коректну класифікацію та розподіл доходу між двома проєктами за вашими правилами;
• збереження в БД без дублів з безпечним повторним запуском;
• автоматичні daily / weekly / monthly / lifetime звіти;
… • окрему логіку для refund без ламання історії;
• надсилання звітів і техлогів у Telegram + алерти при помилках.
Пишу на Python, працюю з БД, фін-агрегатами й Telegram Bot API, роблю акцент на надійній архітектурі й довгостроковій підтримці, а не «скрипті на один раз».
Готовий під ваш стек Windows-сервера запропонувати чіткий план робіт і етапи вже після короткого технічного знайомства з платформою 🚀
-
775 16 2 Доброго дня! Готовий взяти ваш проєкт в роботу, я є спеціаліст з бекенд та автоматизації бізнес процесів
потрібно спершу оглянути платформи які будемо парсити (можливо сайт має внутрішній апі і тоді ми зможемо ним скористатись для парсингу, що в рази спростить роботу, але потрібно спершу оглянути платформи) але в цілому вийде спросити будь який сайт, якщо а лежить від складності, зможу краще зорієнтувати по терміну і ціні після обговорення проєкту
-
738 4 0 Доброго дня. Класно розбираюся в парсингу та автоматизації. Готовий почати і зможу швидко зробити. Звертайтеся.
-
2127 31 0 Добрий день, Антон
Маю неоюідні навички парсингу веб-сайтів, роботи з великими та навантаженими БД, побудовою звітності та телеграм ботами. Легко реалізую ваш проект та буду підтримувати його в майбутньому
Пишіть, чекаю на feedback
-
2426 20 0 Доброго дня, готовий виконати ваше завдання швидко та якісно маю великий досвід у створенні різноманітних парсерів. Напишіть у особисті повідомлення обговоримо деталі. Залюбки допоможу)
-
Добрый день. можно увидеть источник парсинга?
-
Актуальні фриланс-проєкти в категорії Парсинг даних
Консультація по парсингу підписників Instagram-акаунтівДоброго дня. Необхідно провести попередню оцінку можливості виконання наступного завдання. У мене є список Instagram-акаунтів. Мета — отримати контактні дані (в першу чергу email-адреси) користувачів, які підписані на ці акаунти. Раніше мені зустрічалися компанії та сервіси, які… Парсинг даних ∙ 2 дні 21 година тому ∙ 12 ставок |
Потрібен спеціаліст для пошуку контактів ЛПР по УкраїніНеобхідно зібрати базу (чи готова база) контактів осіб, які приймають рішення (ЛПР), у компаніях України. Збір інформації, Парсинг даних ∙ 3 дні 2 години тому ∙ 17 ставок |
Потрібно спартити дані з LinkedinПотрібно спартити дані з Linkedin по нашому списку. Для кожного запису потрібно знайти та зібрати доступні дані якщо такі є на Linkedin профілі включаючи фотографію профілю на соц мережі Lihnkedin, email-адресу, посилання на соціальні мережі, вебсайт компанії, номер телефону.… Парсинг даних ∙ 3 дні 7 годин тому ∙ 27 ставок |
Парсинг та класифікація данихШукаємо розробника для реалізації системи збору та структурування даних з відкритих джерел. Маємо базу власників малого бізнесу в США, яка містить ім’я людини, назву компанії, адресу та штат. Необхідно побудувати процес збагачення цих записів додатковою інформацією з публічно… Веб-програмування, Парсинг даних ∙ 3 дні 8 годин тому ∙ 41 ставка |
Svitlahata
750 UAH
Потрібно імпортувати 1819 товарів із XML/YML-фіду Prom.ua до OpenCart 3. Є готовий XML-файл, який містить назви товарів, описи, ціни, фотографії, характеристики, виробників та категорії. Необхідно: імпортувати всі товари до OpenCart 3; створити та прив’язати категорії;… CMS, Парсинг даних ∙ 4 дні 11 годин тому ∙ 34 ставки |