parquet

0зной

1ответ

Различное поведение при чтении из Паркета в автономной/мастер-рабской искровой раковине

Вот фрагмент из более крупного кода, который я использую, чтобы прочитать блок данных из Parquet в Scala. case class COOMatrix(row: Seq[Long], col: Seq[Long], data: Seq[Double]) def buildMatrix(cooM

4зной

1ответ

Команда Redshift COPY для формата Паркета с мгновенным сжатием

У меня есть набор данных в формате HDFS, который находится в паркетном формате с быстрым кодеком сжатия. Что касается моих исследований, в настоящее время Redshift принимает только текстовые форматы,

1зной

1ответ

Spark-Sql Контекст с файловой рамкой не может сохранить файл в файле паркета Из-за ошибки Deserialazation

Привет Я читаю файлы паркета в контексте искры, а затем объединяю схему различных паркетных файлов. Затем я сохраняю DataFrame, возвращенный из функции чтения паркета, и сохраняя команду write.parquet

0зной

1ответ

Создание текста таблицы из Impala распределяли паркет стол

У меня есть таблица паркет в следующем формате: .impala_insert_staging yearmonth=2013-04 yearmonth=2013-05 yearmonth=2013-06 ... yearmonth=2016-04 Под каждой из этих каталогов мои паркетных фай

0зной

2ответ

улей не меняет паркетную схему

У меня проблема с таблицей alter, которая меняет схему таблицы, но не паркетную схему. Например, я имею в PARQUET таблицу с этими столбцами: column1(string) column2(string) column3(string) column4(st