avro

0зной

1ответ

BigQuery загружает сжатые данные из облачного хранилища

У меня есть много файлов * .gz в моем облачном хранилище Google. Я хочу загрузить эти данные в BigQuery. Я попытался выполнить bq load --source_format=AVRO projectId:dataset.table gs://bucket/*.gz Н

0зной

1ответ

Apache Avro библиотека не удалось разобрать файл nodejs

Я пытаюсь загрузить Avro файл из Google staorage в Google большой запрос с использованием nodejs var gcloud = require('gcloud')({ keyFilename: '../config/keyfile.json', projectId: 'my-projec

0зной

1ответ

Dataflow Python SDK Avro Source/Sync

Я ищу для записи и записи файлов Avro в GCS с помощью Python SDK. Возможно ли это с помощью Avro, использующего SDK Python? Если да, то как мне это сделать? Я вижу комментарии TODO в источнике относит

1зной

1ответ

ParquetWriter выводит пустой файл паркета в автономную программу java

Я попытался преобразовать существующий файл avro в паркет. Но выходной файл паркета пуст. Я не уверен, что я сделал неправильно ... Мой фрагмент кода: FileReader<GenericRecord> fileReader = DataFileRe

0зной

1ответ

avro объект не сериализуется как значение карты - Искра

У меня странное поведение. Spark не может сериализовать объект avro внутри карты [String, AvroObj], даже после того, как я использовал avro-1.8.0, что делает объекты avro сериализуемыми. Exception in

0зной

1ответ

Примеры использования Avro в рубине для межсоединений для микросервисов

Я занимаюсь небольшим исследованием коммуникации внутри микросервиса, и я наткнулся на this web-blog и нашел это интересным. Однако проблема заключается в том, что я не могу найти примеры использовани