Google BigQuery Integration with MS Server
1066 PLNЕсть написанное решение https://github.com/OWOX/BigQuery-integrations/blob/master/mysql/README.md
Интеграция MYSql с Big Query.
Нам необходимо написать аналогичное решение только для трансфера данных с Сиквел сервера.
- скрипт должен загружать данные в Big Query,
- скрипт должен дописывать данные ориентируясь на дату или уникальный идентификатор.
- в интеграции будет участвовать много таблиц и столбцов ( около 200 таблиц и 2000 столбцов), поэтому настройка передачи всех таблиц должна быть удобная для пользователя
Данным решением планируется догружать несколько млн строк в день.
Решение должно давать возможность настроить скедульное обновление ( например, раз в день)
-
333 18 0 2 Добрый день ! Могу реализовать данную задачу на python. Скрипт будет коннектиться к базе данных и выгружать данные из таблиц в csv файлы и потом загружать эти данные в Google Bucket и далее в BigQuery. Как вам такой подход?
-
Здесь нужно решение универсальное под 200 таблиц? Или етл процес под 1?
-
Aktualne zlecenia dla freelancerów w kategorii Bazy danych i SQL
Potrzebny specjalista Power BI do budowy raportów zarządzających na podstawie BAS Księgowość KORPO firmieJesteśmy dystrybutorem międzynarodowych marek sportowych w Ukrainie. Księgowość prowadzona jest w BAS Księgowość KORP.Szukamy specjalisty, który pomoże zbudować system raportowania zarządczego dla kierownictwa firmy na bazie Power BI.Ważne: interesuje nas nie tylko… Bazy danych i SQL, Usługi księgowe ∙ 5 godzin 21 minut temu ∙ 3 oferty |
Specjalista ds. Excela / automatyzacji procesów (Excel + mile widziane programowanie)Szukamy specjalisty z ZAAWANSOWANYMI umiejętnościami Excel do optymalizacji istniejącego pliku i automatyzacji procesów. Wielką zaletą będzie, jeśli masz również umiejętności programowania / VBA / Power Query / Power Automate lub doświadczenie w tworzeniu złożonej logiki w… Python, Bazy danych i SQL ∙ 7 godzin 13 minut temu ∙ 26 ofert |
Zadanie techniczne: Integracja bota czatu Telegram z BAS1. Ogólny opis Należy zrealizować integrację chatbota z systemem BAS w celu przesyłania i rejestrowania danych o towarach (zamówieniach). 2. Dane wejściowe (przesyłane przez chatbota): ID grupy Nazwa towaru (z kodem towaru) Cena towaru 3. Logika działania: Po naciśnięciu… Automatyzacja zarządzania przedsiębiorstwem, Bazy danych i SQL ∙ 8 godzin 19 minut temu ∙ 14 ofert |
Baza 1C dla przedsiębiorstwaPotrzebna baza do prowadzenia magazynu autozłomowiska, kontroli finansów oraz formowania zamówień. Trzeba dodawać samochód jako obiekt i przypisywać do niego części. Pełną strukturę oraz to, jak powinno to wyglądać i działać, omówię podczas rozmowy. Bazy danych i SQL ∙ 17 godzin 53 minuty temu ∙ 6 ofert |
Integracja danych 1CZorganizować jakościowe przygotowanie i transfer danych z 1C do BigQuery do dalszego wykorzystania w Looker:Zorganizować dane zgodnie z tym, jakie pola są potrzebne.Przygotować zrozumiałą strukturę tabel i pośrednich zbiorów danych, na których będą budowane… Bazy danych i SQL, Obróbka danych ∙ 1 dzień 23 godziny temu ∙ 9 ofert |