2017-02-06 4 views
1

У меня есть отношения с пиратским набора данных со следующими полями:Расчета MIN, AVG, MAX на основе состояния

date, country_code, torrent_id, first_seen, torrent_size, quality, movie_id, value 

Я хочу, чтобы сгруппировать по дате, страной, кино и качеству для расчета суммы стоимость. Но я также хочу рассчитать MIN, MAX, AVG torrent_size для всех торрентов фильма, доступных в эту дату.

Это то, что я до сих пор

A = FOREACH (GROUP data BY (date, country_code, movie_id, quality)) { 
    GENERATE group, SUM(data.value) as total_piracy; 
}; 

Однако я не уверен, как сделать размер MIN, MAX, AVG торрентов фильма, доступного на сегодняшний день без учета страны.

ответ

0

Создайте другую связь и группу по дате, кино и получить MIN, MAX, AVG

B = GROUP data BY (date,movie); 
C = FOREACH B GENERATE group, 
         MIN(data.torrent_size) as min_ts, 
         MAX(data.torrent_size) as max_ts, 
         AVG(data.torrent_size) as avg_ts; 
1

Вы можете проверить следующие команды:

A= LOAD '<locationOfDataSet>' USING PigStorage(',') 
AS (date:chararray, country_code:chararray, torrent_id:int, first_seen:chararray, torrent_size:int, quality:chararray, movie_id:int, value:int) ; 
B=GROUP A BY (date,movie_id); 
C=FOREACH B GENERATE group, MIN(A.torrent_size), MAX(A.torrent_size),AVG(A.torrent_size); 
dump C; 

Надеется, что это помогает.