3

Я пытаюсь создать синхронизированную автоматическую загрузку данных из листов Google в Bigquery, чтобы я мог визуализировать данные в Tableau. Данные берутся в import.io.Поток данных из таблиц Google в Bigquery для визуализации в таблице

Основано на (https://developers.google.com/apps-script/advanced/bigquery) Я смог использовать скрипты Google Apps для создания csv из файла листов Google и загружать файл csv в bigquery как один. Однако это не может использоваться как повторяющееся решение, потому что для сценария загрузки большого запроса требуется статический URL-адрес для файла csv (и каждый файл загрузки csv получает уникальный URL-адрес).

Я считаю, что потоковые данные из листов Google или напрямую, но, изучив Google Big Query Analytics http://eu.wiley.com/WileyCDA/WileyTitle/productCd-1118824822.html, еще не смогли это решить.

Какие шаги необходимы для передачи данных из таблиц Google в большой запрос?

+1

Вы можете подключиться к import.io в BQ с помощью Python? – Rohit

+0

Я подключаю BQ к Google Spreadsheets и Google Spreadsheets к import.io, используя скрипт интеграции import.io, который я копирую в листы Google. Я просто делаю первые шаги с Python (используя терминал Mac). Было бы здорово, если бы вы могли предоставить некоторые ссылки, если использовать Python - лучший способ. Боюсь, что я стареющий аналитик, пытаясь изучить некоторые навыки разработчика. Извините, если это основное, и я очень ценю ваш ответ. – reusen

+0

Для стороны import.io примеры интеграции с клиентами Python можно найти здесь: https://import.io/data/integrate/#python –

ответ

0

В примере, на который вы ссылаетесь, URL-адрес csv не обязательно должен быть статичным. Примером является вставка в bigquery, передающая данные octect/stream напрямую, поэтому все, что вам нужно, это ссылка на файл csv.

Я не знаю, какие процедуры вы следуете экспортировать таблицу в формате CSV, но вы можете посмотреть на этом уроке https://developers.google.com/apps-script/articles/docslist_tutorial#section2

Вы найдете там, как экспортировать данные в формате CSV в виде нового файла , то с этим файлом, который вы уже можете импортировать из своего csv (используя объект папки DriveApp, вы можете получить ссылку на файл csv).

 Смежные вопросы

  • Нет связанных вопросов^_^