Настроить импорт данных из БД Firebird в BigQuery
Есть база данных Firebird с кучей интересной инфы 🙂
Нужно настроить регулярный импорт данных (дописать новые и обновить старые) в BigQuery и проконсультировать по экспорту данных из Firebird.
Сервис требует описание проекта больше 200 символов, именно поэтому вы читаете этот абзац...
-
3 дні600 UAH
2049 226 0 1 3 дні600 UAH
Здравствуйте, могу реализовать на java. С Firebird знаком, не работал с BigQuery, но могу разобраться, будет одна программа для экспорта и импорта.
-
Инструмент которым я пользуюсь для работы с Firebird позволяет создать только *.sql файл. Я бы мог создать программу которая может вытащить данные и сформировать csv, но буду занят ближайшие 2-3 недели. А вот как втянуть эти данные дальше не подскажу. Википедия говорит, что необходим импорт данных в формате CSV или JSON с Google Storage.
-
Вытащить данные из БД не проблема, там нужно только разобраться, какой объем и в каком формате выгружать.
Основная задача - настроить регулярный импорт в БК.
-
Там есть API https://cloud.google.com/bigquery/docs/reference/rest
Так что есть все шансы на успех
-
да, я мануалы читал, но квалификации не хватает, чтобы во всем разобраться и реализовать
-
если вы можете вытащить данные из файберда, то задача сильно упрощается.
есть неплохое апи для бигквери на питоне от одного крупного вендора, работает с форматами csv, json и другимипогуглю ещё и на выходных могу заняться
на какой бюджет рассчитываете?
-
Да, данные мы вытащим и отформатируем, нужно их загрузить в storage, потом импортировать в bigquery, настроить регулярные задачи и обновление данных (обновить старые и дописать новые)...
Ссылки на API даже чуть выше приводили
-
бюджет не формировали, отталкиваемся от предложений и здравого смысла 🙂
-
Уточните, пожалуйста, следующие моменты:
- версию Firebird;
- требуется ли импорт в саму базу Firebird?
- в Google Storage импортируются те данные, которые экспортированы из Firebird, или ещё дополнительные (посторонние)?
Имею большой опыт работы с Firebird. C Google Storage не работал, однако работал с JSON.
Могу написать программу на Delphi (Windows only) или Lazarus (+MacOS, +Linux). -
1. firebird 3.0
2. импорт обратно в базу firebird не нужен
3. в storage нужно импортировать данные из firebird. В big query импортируем данные из storage + ещё одну маленькую таблицу. Но она обновляется раз в месяц и это проще руками.
-
А вариант положить базу на виртуальный хост с FireBird и переносить через бекап и рестор на хост . И с ней уже работаете хоть Acces или другими средствами через подключение на удаленный хост
-
Вариант, но зачем изобретать что-то, если есть bigquery для работы с данными и там же data studio для их визуализации.
-
Актуальні фриланс-проєкти в категорії Бази даних та SQL
Необхідно перевірити скриті та оновити дані в базі даних postgres.Необхідно виправити sql скрипти для бази postgres. Потрібно перевірити скрипти і оновити дані з зовнішніх таблиць Excel і між 2-ма базами (різні сервери) Postgres. Запуск скриптів через AnyDesk програма Navicat. Перелік даних для перевірки і коригування: 1. Товари, що… Бази даних та SQL ∙ 1 день 5 годин тому ∙ 18 ставок |
Потрібен Airtable-архітектор для побудови relational schema та нового clean Airtable baseПотрібно допомогти переосмислити та побудувати чисту relational-схему для внутрішньої операційної системи на Airtable. Поточна база вже використовується командою, але вона виросла органічно: структура частково плоска, частина таблиць/в’юшок використовується активно, частина… Бази даних та SQL, Десктопні додатки ∙ 1 день 23 години тому ∙ 9 ставок |
Платформа для навчання тренерів з баскетболу + Кастомізована CMSПлатформа освіти з баскетбольного тренерства + Кастомізована CMSОгляд проектуМи шукаємо досвідчену команду веб-розробників або full-stack розробника для створення сучасної платформи освіти з баскетбольного тренерства.Вебсайт надасть баскетбольним тренерам доступ до… Бази даних та SQL, Веб-програмування ∙ 2 дні 16 годин тому ∙ 88 ставок |
Інтеграція вайбер в 8.3
10 000 UAH
Потрібна інтеграція Viber у власну CRM (1С 8.3)Про компанію Компанія "Домофон Систем" займається встановленням та обслуговуванням домофонних систем. База понад 40 000 абонентів. Працюємо на власній доопрацьованій системі на базі 1С 8.3. Шукаємо спеціаліста або команду для… Бази даних та SQL, Розробка ботів ∙ 2 дні 20 годин тому ∙ 16 ставок |
Доопрацювання 1С УТ 11 для ТСД Zebra (RDP): різні звукові сигнали при скануванні
1000 UAH
Конфігурація: 1С УТ 11 Адресний склад ТСД Zebra TC26 Робота через RDP Сканування товарів виконується в документах приймання, розміщення, відбору та інших складських операціях. Поточна проблема: Комірники працюють через ТСД Zebra. При скануванні не завжди помічають повідомлення… C#, Бази даних та SQL ∙ 4 дні 18 годин тому ∙ 6 ставок |
Київ