удалять кавычки из полей при загрузке данных в куст

Question

Я хочу загрузить таблицу с входными данными в улей. У меня есть данные в следующем формате.

100510;LOCAL CARD;;;;UNITED KINGDOM;GB;GBR;826 
100515;LOCAL CARD;;;;NORWAY;NO;NOR;578 
103753;LOCAL CARD;I&M BANK;DEBIT;PREPAID;KENYA;KE;KEN;404 
104001;LOCAL CARD;LUXURY JEWELLERY CLASS (LJC) - TDFS;;;CANADA;CA;CAN;124 

Я хочу, чтобы загрузить эту таблицу в улье из HDFS, но потому, что некоторые столбцы не содержит данные, ее дают мне двойные кавычки в результатах поиска. Я хочу игнорировать их.

Answer 1

Вы можете контролировать, как Hive обрабатывает нули, используя serialization.null.format. Чтобы создать таблицу:

create table <your table> 
<column list> 
rowformat delimited fields terminated by <your delimiter> 
TBLPROPERTIES ('serialization.null.format' = ''); 

Чтобы изменить существующую таблицу

alter table <your table> set TBLPROPERTIES ('serialization.null.format' = '');