amazon-athena

4зной

1ответ

Дублирующие результаты в AWS Athena (PrestoDB) ОТКАЗАТЬ SQL-запрос?

У меня есть куча файлов на S3, которые содержат только MD5, по одному на строку. Я создал таблицу AWS Athena для запуска запроса дедупликации на MD5. Всего в этих файлах и в таблице содержится сотни м

8зной

1ответ

Хранить несколько элементов в json-файлах в AWS Athena

У меня есть несколько json-файлов, хранящихся в ведре S3, где каждый файл имеет несколько элементов одинаковой структуры. Например, [{"eventId":"1","eventName":"INSERT","eventVersion":"1.0","eventSour

0зной

1ответ

Может ли AWS athena разбивать или создавать столбцы из подкаталогов S3?

В наших корзинах s3 обычно имеется ряд подкаталогов, поэтому путь к ведру - это что-то вроде s3: function-group/service/org-tenant-company-id/entity-id/фактические данные Мы изучаем Athena, чтобы имет

0зной

2ответ

Запись данных паркета в файл на S3 с помощью scala

Есть ли способ быстрой и стабильной записи паркетных данных на S3 с помощью scala?

0зной

1ответ

агрегирование и усреднение данных на 200 млрд записей

Записи начались в файлах AVRO, которые были созданы ежедневно со следующей схемой. Существует 20 различных типов атрибутов, хранящихся в записях «attribute_key» и «attribute_value», метка времени и de

1зной

1ответ

Создание таблицы и запроса данных json с использованием Amazon Athena?

Я хочу запросить JSON данные формата с помощью Amazon Афина: [{"id":"0581b7c92be", "key":"0581b7c92be", "value":{"rev":"1-ceeeecaa040"}, "doc":{"_id":"0581b7c92be497d19e5ab51e577ada12",