Hive/Imapala - выполнить условие удаления: `УДАЛИТЬ из [ТАБЛИЦА] ГДЕ [СОСТОЯНИЕ]`

Question

Из просмотра в Интернете - я понимаю, что DELETE & UPDATE Классы на Impala/Hive не поддерживаются. Я пытаюсь найти обходное решение для этого случая. я пытался выполнить его с пунктом OVERWRITE ВСТАВИТЬ без успеха: \

У меня есть секционированная таблица, которая содержит: user_id, день, месяц, год (Partition на день, месяц, год).

сказать, что я 1 строка для каждой даты (каждая дата представлена ​​теми 3 колонки разделов), и я хочу, чтобы удалить строку 2016-05-01

Если я использовал MySQL я бы написать:

DELETE FROM tblname WHERE year = 2016 and month = 5 and day = 1

Как выполнить его на Hive/Impala?

Спасибо!

Answer 1

Разделите свои данные так, чтобы строки (использовать функцию окна row_number), которые вы хотите удалить, находятся в разделе. Затем вы можете удалить раздел, не затрагивая остальную часть вашей таблицы. Это довольно устойчивая модель, даже если ваш набор данных становится довольно большим.

подробно о разделе.

www.tutorialspoint.com/hive/hive_partitioning.htm