parquet

0зной

1ответ

Parquetloader: невозможно загрузить несколько паркетных файлов с помощью свиньи

Я получаю сообщение об ошибке: Ошибка при разборе. Ограничение повторения более ограничительное: не может объединить требуемый двоичный файл MyTime в необязательный двоичный файл MyTime. Возможно, оди

7зной

2ответ

Spark with Arvo, Kryo and Parquet

Я пытаюсь понять, что именно Арво, Край и Паркет делают в контексте Искры. Все они связаны с сериализацией, но я видел, как они используются вместе, поэтому они не могут делать то же самое. Паркет опи

3зной

3ответ

Установить паркетный файл с быстрым выходным файлом - улей?

Я пытаюсь разделить паркетные/мгновенные файлы, созданные hive INSERT OVERWRITE TABLE ... на границе dfs.block.size, поскольку impala выдает предупреждение, когда файл в разделе больше размера блока.

1зной

1ответ

Got исключение работает Sqoop: java.lang.NullPointerException использования и --as-запросов-parquetfile

Я пытаюсь импортировать табличные данные из Redshift в HDFS (используя формат Паркетного) и облицовочной ошибку ниже: 15/06/25 11:05:42 ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.NullPo

2зной

3ответ

Сбор данных паркета из HDFS в локальную файловую систему

Учитывая набор данных Паркета, распространяемый по HDFS (файл метаданных + может .parquet частей), как правильно объединить детали и собрать данные в локальную файловую систему? dfs -getmerge ... не р

6зной

1ответ

Разделения не обрезаны в простых запросах SparkSQL

Я пытаюсь эффективно выбирать отдельные разделы из таблицы SparkSQL (паркет в S3). Однако я вижу доказательства того, что Spark открывает все паркетные файлы в таблице, а не только те, которые проходя