google-cloud-storage

0зной

1ответ

Относительно низкая производительность при чтении сжатых файлов по сравнению с обычными текстовыми файлами, хранящимися в хранилище Google, с использованием потока данных Google

Я использовал поток данных Google для чтения 11,57 ГБ файла из облачного хранилища и написал их в Google BigQuery. Это заняло около 12 минут с 30 рабочими. Затем я сжал один и тот же файл (теперь разм

-1зной

1ответ

Проблем чтение файла из облачного хранилища данных в Google AppEngine

Я пытаюсь прочитать файл из облачного хранилища данных в развернутом приложении, код очень просты: # -*- coding: utf-8 -*- from google.appengine.ext import deferred from google.appengine.ext import

2зной

1ответ

Можно ли перечислить объект в Google Cloud Storage с помощью мета?

Я читаю эту статью https://cloud.google.com/storage/docs/json_api/v1/objects/list, и я ее не нашел. У меня есть ведро с тысячами объектов (файлов). Я хочу перечислить только объект с конкретными метад

1зной

1ответ

Есть причина, почему использовать возобновляемую загрузку, когда у меня стабильное соединение?

Мне нужно загрузить много файлов в Cloud Storage. Каждый файл составляет от 1 МБ до 1 ГБ. У меня стабильное соединение. Я думал использовать Simple Upload Api. Но Google рекомендует использовать Resum

2зной

3ответ

Сжатие файлов, сохраненных в хранилище облачных хранилищ Google

Можно ли сжать файл, уже сохраненный в хранилище облачных хранилищ Google? Файлы создаются и заполняются кодом потока данных Google. Dataflow не может записывать в сжатый файл, но мое требование - сох

1зной

1ответ

Загрузка в вложенные ведра в хранилище облачных хранилищ Google

В облачном хранилище Google у меня есть ведро, называемое кошками внутри корневого ведра, называемого образами. Я использую gmail для google-api-ruby-client для загрузки файлов. Я могу загрузить файл

0зной

2ответ

Стратегия загрузки данных в BigQuery и облако Google Хранение с локального диска

У меня есть 2 года комбинированных данных размером около 300 ГБ на моем локальном диске, которые я извлечил из teradata. Я должен загружать одни и те же данные в хранилище облачных хранилищ Google и т

1зной

1ответ

Как я могу произвести сортированный экспорт большой таблицы BigQuery?

Я хотел бы создать отсортированный CSV-экспорт большой таблицы BigQuery в Google Cloud Storage. В настоящее время для этого мы начинаем с несортированной таблицы, затем делаем SELECT * FROM table ORDE

3зной

2ответ

Загрузите данные, хранящиеся в хранилище облачных хранилищ Google, с разделителем нескольких символов на BigQuery

Я хочу загрузить данные с помощью большого символа в BigQuery. Команда загрузки BQ в настоящее время не поддерживает множественный разделитель символов. Он поддерживает только один разделитель символо