Разработка Master Dashboard в Google Sheets (App Script) для агрегации данных из 40+ таблиц

Здравствуйте.
У меня есть опыт реализации подобной системы автоматизации в Google Sheets + Apps Script.

Предлагаю такую архитектуру:
• централизованный сбор данных через Apps Script с batch-fetch (без IMPORTRANGE)
• обработка массивов в памяти и пакетная запись на вкладку "Database"
• генерация уникального ключа (SourceID + RowNumber) для защиты от дублирования
• отдельная вкладка "Settings" для управления списком таблиц и масштабирования без изменения кода
• time-driven trigger + кнопка ручного обновления
… • аналитическая панель (Pivot Tables + slicers) с фильтрацией по периоду, Team Lead и монтажеру
При объеме ~250–300 новых строк/месяц лимиты Apps Script (6 мин) не являются критичными при условии оптимизированной пакетной обработки.

Можем обсудить детали обновления (частота тригеров, доступы, структура отчетов), за дополнительной информацией обращайтесь в личные сообщения.

Показать оригинал

Перевести

Добрый день, спасибо за ответ на мой комментарий. Готов реализовать вашу задачу и выполнить такие этапы: 1) Скрипт на AppsScript, который будет выполнять загрузку данных таблиц на одну вкладку "База данных". 2) Вкладка Настройки, где будут перечислены ссылки на таблицы и дата последнего обновления. 3) Настроенный триггер по времени, который будет обновлять информацию каждые 30 минут + отдельная кнопка для принудительного обновления. 4) Вкладка с отчетом, где вы сможете анализировать полученную информацию. Буду рад сотрудничеству.

Показать оригинал

Перевести

Добрый день

У меня значительный опыт разработки решений на Google Apps Script.

Что касается вашей задачи - есть технические ограничения по времени выполнения (timeout), поэтому нужно оценить объем данных и структуру. После этого можно будет предложить оптимальную реализацию и понять, как лучше организовать работу скрипта.

Показать оригинал

Перевести

Привет, Андрей!

Вы абсолютно правы относительно `IMPORTRANGE` — на 40+ файлах эта функция просто парализует работу вашего Master-файла.

Я специализируюсь на построении сложных баз данных и аналитических дашбордов в экосистеме Google. В вашей задаче есть одна скрытая опасность: лимит времени выполнения Google Apps Script (6 минут). Если скрипт будет просто по очереди открывать 40-50 файлов, он не успеет отработать и выдаст ошибку. Большинство фрилансеров об этом забывают.

Как я архитектурно решу вашу задачу:

1. Оптимизированный сбор данных (Batch Fetching): Я напишу скрипт, который будет собирать массивы данных из всех 40+ файлов в память (используя `Sheets API` или оптимизированные массивы), и лишь затем одним пакетом (за секунду) записывать их на вкладку `Database`. Это гарантирует быстродействие и отсутствие лимитов.
… 2. Control Hub (Масштабируемость): Создам вкладку настроек. Это будет ваш пульт управления. Три колонки: `Имя Монтажера` | `Team Lead` | `Ссылка на файл`. Чтобы добавить 45-го работника, вы просто вставите ссылку в этот список — скрипт сам начнет забирать из него данные. Никакого вмешательства в код.
3. Smart Database: Скрипт автоматически добавит колонки с именем монтажера и Тім Лидом к каждой извлеченной строке. Также настроим умное очищение/перезапись, чтобы данные не дублировались при повторных запусках.
4. Премиальный Дашборд На основе собранной `Database` я соберу дашборд (Сводные таблицы + Срезы/Slicers). Но я сделаю это не просто как "серую табличку", а применю принципы UI/UX дизайна: корпоративные цвета, четкая иерархия (доход, количество проектов), чтобы руководству было приятно с этим работать.

Обновление базы можем сделать по кнопке "Синхронизировать" + автоматически каждую ночь/каждый час фоновым триггером.

У меня большой опыт разработки подобных систем для бизнеса. Пишите в личные сообщения, обсудим детали и начнем работу!

Показать оригинал

Перевести

Добрый день! У меня большой опыт работы с Google Sheets и Google Apps Script, реализовывал системы автоматизированной отчетности с агрегацией данных из десятков файлов без использования IMPORTRANGE. Предлагаю перейти в личные сообщения для более детального описания ТЗ, времени работы и стоимости.

Показать оригинал

Перевести

Привет, Андрей!
Задача понятна. Вы абсолютно правы - использование функции IMPORTRANGE для 40+ файлов сильно замедлит работу главной таблицы. Эту задачу лучше и быстрее решить через Google Apps Script.

Как я предлагаю это реализовать:
- Напишу скрипт, который будет проходить по всем 40+ таблицам и собирать данные в одну общую базу (вкладка Database).
- Сделаю отдельную вкладку настроек (Settings). Когда у вас появится новый работник (41-я или 45-я таблица), вы просто добавите туда ссылку, и скрипт автоматически начнет ее обрабатывать. Вмешиваться в код не придется.
- На основе собранных данных настрою аналитическую панель, где можно будет удобно фильтровать статистику по периодам, командам и работникам.

У меня есть опыт работы с Google Apps Script и построением архитектуры баз данных в Sheets.

Показать оригинал

Перевести

Здравствуйте. Разрабатывал CRM системы для учета и так далее на Google App Script V8. Сделаю быстро и качественно. Обращайтесь.

Показать оригинал

Перевести