parquet

1зной

1ответ

Сохранение файла паркета при ошибке искры

Мы используем искру 1.6.1 на кластере CDH 5.5. Работа работала отлично с Kerberos, но когда мы реализовали шифрование в Покой мы столкнулись в следующем выпуске: - Df.write().mode(SaveMode.Append).par

1зной

1ответ

Pyspark случайно не в состоянии написать tos3

Дать свою word2vec модель к S3 следующим образом: model.save(sc, "s3://output/folder") Я не делаю это без проблем, как правило, так не AWS проблемы учетных данных, но я случайно получаю следующее со

1зной

2ответ

Специальные символы в mysql sqoop import в виде файла Text и Parquet

У меня есть 1000 таблиц с более чем 100000 записей в каждой таблице в mysql. Таблицы имеют 300-500 столбцов. В некоторых таблицах есть столбцы со специальными символами типа (точка) и пробел в именах

1зной

2ответ

Impala + паркет файл

Я создал файл паркета, а затем я пытаюсь импортировать его в таблицу Impala. Я создал таблицу, как показано ниже: CREATE EXTERNAL TABLE `user_daily` ( `user_id` BIGINT COMMENT 'User ID', `master_id`

6зной

1ответ

Как создать вложенный объект и массив в файл паркета?

Как создать файл паркета с вложенными полями? У меня есть следующий: public static void main(String []args) throws IOException{ int fileNum = 10; //num of files constructed int fileRecor

0зной

1ответ

Улей, изменение таблицы fileformat от orc до паркета не поддерживается?

У меня есть улая таблица, как это: CREATE TABLE `abtestmsg_orc`( `eventname` string COMMENT 'AB测试方案上报事件：ABTest', `eventtime` string COMMENT '事件上报时间', `sessionid` string COMMENT 'Session标