HIVE: Count отличная функция window throws error

Question

Я пытаюсь использовать функцию функции окна, отличную от улья, и получить ошибку.

Запрос используется следующая:

select user, dt, count(distinct dt) over(partition by user) as dates 
FROM table 

Он выдает следующее сообщение об ошибке:

FAILED: SemanticException [Error 10025]: Line 1:123 Expression not in GROUP BY key 'user' 

Я думаю, я использую синтаксис, как указано в улье language manual

Что именно я делаю неправильно?

Answer 1

Две возможности,

1. Вы не можете выбрать user и dt в запросе при использовании distinct, удалите user и dt запрос будет работать нормально.

2. В этом контексте вы не можете использовать distinct, если вы удалите distinct в вышеуказанном запросе, это будет нормально работать. Если вы хотите принять отчетливый и его количество вы можете пойти к югу запроса, как показано ниже,

   select dates.distinct dt from (select dt, count(distinct dt) over(partition by user) as dates FROM table)

Позвольте мне знать, если это помогает.

Answer 2

Следующее решение будет работать как подсчет. Плотная функция ранга даст ранг для разных c внутри разделов. Наибольшее плотное число рангов будет представлять собой количество отдельных записей c. Ничего особенного в том, что он выполняет две функции окна, но для меня это был единственный способ заставить его работать на Hive < 2.1.0.

select src.a, src.b, src.c, max(src.cnt_dens_rank) over (PARTITION BY src.a, src.b) as cnt_distinct 
from 
(
select a, b, c, DENSE_RANK () OVER (PARTITION BY a, b order by c) cnt_dens_rank 
) src