Бюджет: 1500 UAH Термін: 2 дні
Доброго дня.
Можу взяти задачу з перенесенням ETL-логіки та коду на інший Linux-сервер.
Працюю з Python, SQL, PostgreSQL, розгортанням скриптів/ETL на Linux, cron/systemd/Docker, змінними оточення та підключеннями до зовнішніх сервісів. З BigQuery також можу працювати через service account / API-клієнт, залежно від того, як зараз зроблено у вашому коді.
Що зроблю:
— перегляну поточний код і залежності;
— перенесу логіку з Google-середовища на новий сервер;
— налаштую підключення до BigQuery та PostgreSQL;
— налаштую регулярний запуск ETL;
— перевірю, щоб дані коректно оновлювались для Power BI / дашбордів;
— за потреби адаптую код під нове середовище.
Важливий момент: якщо поточний код вже робочий і не сильно зав’язаний на специфічні сервіси Google Cloud, перенесення можна зробити без повного переписування. Якщо там Cloud Functions / Apps Script / специфічні GCP-залежності — тоді адаптую логіку під Linux.
Готовий переглянути код і одразу сказати, який варіант перенесення буде найпростіший.
Бюджет: 700 UAH Термін: 3 дні
Доброго дня! Робив саме такі переноси — забирав ETL-процеси й дашборди з гугла на власний Linux-сервер, з BigQuery та Postgres працюю постійно. Якщо код робочий, зазвичай достатньо акуратно перенести й підправити під нове середовище, без переробки логіки. Готовий узятися, орієнтовно 3 дні. Підкажіть лише — переносимо на ваш VPS (який дистрибутив?), і сам дашборд лишається в Power BI Service чи теж переїжджає?
Бюджет: 1800 UAH Термін: 3 дні
Вітаю, Євгене! Завдання зрозуміле - перенести ETL-логіку з Google Cloud на Linux-сервер зі збереженням роботи з BigQuery та PostgreSQL. Працюю з Python, Linux (ETL-процеси, cron/systemd), BigQuery API (через service account) та PostgreSQL - це мій стек. План: перегляну поточний код та залежності, налаштую середовище на сервері, перенесу підключення BigQuery та PostgreSQL, налаштую автозапуск за розкладом, оновлю дашборди. Кілька уточнень: яка платформа дашбордів (Power BI Service чи Desktop, Grafana, Metabase)? Цільовий Linux-сервер вже є і є доступ? Від цього залежить точна оцінка строків.
Бюджет: 12000 UAH Термін: 5 днів
МАємо вже практчно готове схоже рішення, яке можна швидко адаптувати під ваш ETL і запустити на Linux сервері, можемо обговорити тут у проєкті, я на зв'язку =)
700 грн вистачить хіба на короткий перегляд коду, повне перенесення логіки з BigQuery і PostgreSQL я б оцінив від 12000 грн, орієнтовно 4-5 днів після доступів.
по реалізації бачу це так - перевірити поточний код і залежності, винести змінні середовища, налаштувати підключення до BigQuery та PostgreSQL, перенести запуск ETL на сервер, додати логи, планувальник і тестовий прогін.
від вас потрібні доступи до поточного Google середовища, репозиторію або архіву коду, BigQuery, PostgreSQL і цільового сервера.
питання - код зараз працює через Cloud Functions, Cloud Run, Composer чи інший сервіс Google.
і друге - BigQuery лишається джерелом даних, чи все треба переносити в PostgreSQL.
схожі за змістом приклади - https://business.ingello.com/platforma - корпоративна платформа з бізнес-логікою, даними і серверною частиною.
https://business.ingello.com/forma-bpm - автоматизація процесів, де важлива надійність сценаріїв, ролі, дані і контроль виконання.
про нас і формат роботи - https://systems-fl.ingello.com/ua
Бюджет: 700 UAH Термін: 1 день
Вітаю!
Маю досвід роботи з базами даних, зможу реалізувати процеси ETL на сервері, налаштую роботу гугл сервера та підкоректуємо код якщо треба.
Завжди на звязку, зробимо якісно, буду радий співпраці!
Бюджет: 700 UAH Термін: 1 день
Працював з подібними кейсами: ETL на Linux, BigQuery як джерело, Postgres як цільове сховище або навпаки. Швидше за все, завдання зводиться до того, щоб підняти пайплайни на новому сервері, перенастроїти конектори і, якщо потрібно, адаптувати логіку під інше середовище. Питання: дашборд у Power BI підключений безпосередньо до BigQuery чи дані спочатку агрегуються в Postgres і вже звідти тягнуться в звіти? Готовий обговорити деталі і прикинути обсяг роботи.
Бюджет: 700 UAH Термін: 1 день
Вітаю!
Можу все перенести та грамотно налаштувати так, щоб все працювало коректно.
Буду радий співпраці!
Бюджет: 1111 UAH Термін: 1 день
Вітаю! Зможу реалізувати. Відпишіть в приват щоб обговорити всі деталі. Сподіваюсь на співпрацю!
Бюджет: 2000 UAH Термін: 1 день
Доброго дня!
Перенесення ETL і дашбордів на Linux із роботою з BigQuery та Postgres — моя зона, тож завдання зрозуміле. Розгортав подібне.
Що зроблю: переношу логіку й код з Google-сервера на ваш Linux-сервер, розгортаю ETL-процеси (Python + планувальник/cron або Airflow — залежно від обсягу), підключаю BigQuery і Postgres, за потреби переписую код під нове оточення, і оновлю інфу по дашбордах. Зроблю стабільно, з логуванням, щоб процеси крутились самі.
Одразу чесно про головний фактор обсягу: багато залежить від того, чим зараз працює логіка на Google — Apps Script, Cloud Functions чи Python на GCP VM. Якщо це Python/скрипти — переважно перенос «як є» з адаптацією під сервер (швидше). Якщо Apps Script — частину доведеться переписати під Linux (більше роботи). Тому точну оцінку дам, коли гляну поточний код.
Підкажіть: на чому зараз крутиться логіка (Apps Script / Cloud Functions / VM), цільовий Linux-сервер уже є з доступом, і БД залишається в BigQuery чи мігрує в Postgres? Від цього й залежить, це чистий перенос чи перенос + переписування.
З чого зручніше почати — гляну поточний код, щоб одразу сказати реальний обсяг?
Бюджет: 3500 UAH Термін: 3 дні
Вітаю!
Задача повної міграції ETL-процесів та бази даних з інфраструктури Google Cloud на виділений Linux-сервер із переходом на PostgreSQL — це мій основний профіль. Маю великий досвід у розробці Python пайплайнів, адмініструванні Linux та рефакторингу SQL.
Що конкретно я зроблю в межах проєкту:
Міграція бази даних: Перенесу структуру таблиць та історичні дані з BigQuery до PostgreSQL. Я чудово знаю відмінності в синтаксисі цих систем (робота з датами, функціями агрегації та масивами), тому адаптую ваші SQL-запити в коді коректно й без втрат даних.
Рефакторинг Python-коду: Перепишу логіку підключення в існуючому коді (заміна клієнтських бібліотек Google Cloud на конектори PostgreSQL, такі як psycopg2 або SQLAlchemy), оптимізую запити під нову архітектуру.
Налаштування Linux-сервера та деплой:
Встановлю та конфігурую PostgreSQL.
Розгорну Python-оточення, налаштую безпечне зберігання конфігурацій через змінні середовища (.env).
Налаштую автоматичний запуск ETL-процесів за розкладом через системні таймери (cron або systemd timers).
Налаштую логування процесів, щоб робота скриптів була прозорою.
Про себе: Працюю в Linux-середовищі, маю великий досвід розробки та підтримки автономних аналітичних систем «під ключ» (збір даних ➔ збереження в БД ➔ підготовка до візуалізації).
Для точної оцінки строків та вартості мені потрібно поглянути на поточний Python-код та схему даних у BigQuery. Готовий обговорити деталі в чаті та оперативно приступити до роботи.
З повагою,
Максим
Бюджет: 3500 UAH Термін: 2 дні
Вітаю.Маю великий досвід з Python.Можна ознайомитись з проектом та з більш детальним описом завдання?
Бюджет: 3500 UAH Термін: 4 дні
Добрий день, Євгене!
Розумію задачу: перенести ETL-логіку з Google Cloud на Linux-сервер зі збереженням роботи з BigQuery та PostgreSQL, оновити дашборди.
Уточніть: що саме виступає дашбордом — Power BI Embedded, Grafana, Metabase? Бо Power BI Desktop/Service не запускається на Linux, і варто одразу обрати правильний підхід.
Бюджет: 700 UAH Термін: 3 дні
Доброго дня!
Готовий до розробки дашборду Power BI. Маю досвід з розгортанням ETL на Linux, а також з роботою з BigQuery та PostgreSQL. Перенесу логіку та код, оптимізувавши його під нову інфраструктуру, якщо це буде необхідно.
Пишіть, уточнимо деталі.
Бюджет: 3000 UAH Термін: 3 дні
Вітаю. Маю чітке розуміння завдання щодо міграції ETL-процесів та логіки дашборду з Google Cloud на Linux-сервер з BigQuery та PostgreSQL. Я розроблю архітектуру нового рішення, використовуючи Docker для контейнеризації та забезпечуючи оптимальну безпеку, ефективність і масштабованість під час перенесення даних та переписування коду. Маю значний досвід у подібних міжплатформних міграціях, а також готові напрацювання та скрипти, що дозволять суттєво прискорити етап розгортання та інтеграції. Всі деталі реалізації, кінцевий бюджет та терміни пропоную обговорити в особистих повідомленнях.
