Нужен Data Engineer для разработки и внедрения системы ETL
Нужен опытный Data Engineer для разработки и внедрения системы ETL (Extract, Transform, Load) с целью автоматизации сбора, обработки и загрузки данных о рекламной активности на маркетплейсе.
Система должна интегрироваться с различными источниками данных, обеспечивать их очистку и трансформацию, а также загружать подготовленные данные в аналитическое хранилище для дальнейшего анализа.
Задачи:
Разработка архитектуры ETL-процессов, включая создание структуры базы данных, определение последовательности операций и выбор инструментов.
Интеграция с различными источниками данных (например, CRM-системы, аналитические платформы, базы данных).
Реализация процессов очистки, нормализации и трансформации данных для обеспечения их качества и согласованности.
Настройка механизмов загрузки обработанных данных в целевое хранилище данных или BI-систему.
Обеспечение надежности и отказоустойчивости системы, включая обработку ошибок и логирование.
Ожидания от специалиста, который будет реализовывать данный проект:
Опыт работы с системами ETL и инструментами для обработки данных.
Знание языков программирования, которые используются в дата-инженерии (например, Python, SQL).
Опыт работы с различными источниками данных и базами данных.
Понимание принципов обеспечения качества данных и обработки ошибок.
Если у вас есть релевантный опыт и вы понимаете, как реализовать данную задачу, буду рад обсудить детали проекта.
Оставляйте свои предложения по срокам выполнения и предварительной стоимости реализации задачи.
-
34 Готов выполнить задание. Нужно обсудить детали по ETL и в целом ТЗ на систему
-
325 1 0 Привет. Могу сделать все на airflow (фреймворк для ETL на python). Интеграция с разными источниками данных - нужно смотреть подробнее, возможно уже есть готовые плагины, если нет, то реализую на python или nodejs. Могу также настроить инфраструктуру + деплой (vps + vpn + docker compose). По реальной стоимости и времени нужно больше деталей. Буду рад все обсудить или просто проконсультировать. Готов начать немедленно.
-
4429 80 1 4 Доверьтесь профессионалу со стажем более 10 лет! Ставка и сроки актуальны!
Буду рад сотрудничеству!
Опыт коммерческой разработки интернет-магазинов на CMS, бизнес-порталов и корпоративных сайтов-11 лет!
+CMS: WordPress(+Woocommerce)PrestaShop/Opencart/Joomla/Bitrix/MODX/DLE/Shopify
php/html/css/js/Mysql, PhotoShop/Figma
Примеры работ ( с нуля под ключ):
https://wildandorganic.com/
https://cryptosignals.org/
https://www.alternativemedicine.com.ua/
… https://silkkiss.ua/
https://nordtrade.online/
https://v12coffee.com.ua/franchise/
https://smrtalgo.com/
https://sengero.no/
https://beautybysim.no/
https://sonatagalleri.com/
https://www.emmanuel.com.ua/
https://www.onsitecomputersinc.com/
https://express-tehbud.com/
https://korostenporcelain.com.ua/
https://sladok.com.ua/
https://pricemds.com/
https://picupmedia.com/
https://www.serasar.com/
https://integrisit.com/
https://franklinitsolutions.com/
https://www.raebel-latzke.ch/
-
250 37 1 2 Нужен опытный Data Engineer для разработки и внедрения системы ETL (Extract, Transform, Load) с целью автоматизации сбора, обработки и загрузки данных о рекламной активности на маркетплейсе.
Система должна интегрироваться с различными источниками данных, обеспечивать их очистку и трансформацию, а также загружать подготовленные данные в аналитическое хранилище для дальнейшего анализа.
-
15946 378 0 1 Добрый день. Есть практический опыт в подобных задачах: как проектирование, так и реализация. Для оценки стоимости проекта нужно, конечно, больше деталей. Будем рады обсудить. Спасибо
Актуальные фриланс-проекты в категории Python
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 1 час 50 минут назад ∙ 14 ставок |
Розработка Тик-Ток фермы (контент-завод)Необзодимо разработать систему для централизованного управления несколькими TikTok-аккаунтами с автоматической публикацией контента, использованием индивидуальных прокси и имитацией естественной активности аккаунтов. Функциональные требования1. Управление аккаунтами Добавление… Python, Разработка ботов ∙ 13 часов 17 минут назад ∙ 11 ставок |
Улучшить работу Claude Code и работа с написанием софтаСейчас разрабатываю СРМ и Аналитику, софт. Делаю через Клод Код, но понимаю что результаты не лучшие в плане изменений. Есть 2 задачи - Нужно помочь сделать пресет по навыкам, мд и так далее чтобы улучшить качество. Взять проверенные с которыми работали, а не с интернета… AI и машинное обучение, Python ∙ 19 часов 51 минута назад ∙ 21 ставка |
Система OCRНужна система распознавания текста на почтовых конвертах (индекс кому - только числа). Текст иногда может быть рукописным. Распознавание марок (подсчет количества и номинала) Python ∙ 23 часа 1 минута назад ∙ 20 ставок |
Ищу White-label решение Букмекерской конторы под аренду |