Скала кадра данных с искровым группы путем слияния с полем

Question

У меня фрейм данных с 5 рядами:

[user,sun,MainTest2,end,false] 
[user,sun,MainTest2,start,false] 
[user,sun,MainTest,end,true] 
[user,sun,MainTest,start,true] 
[user,sun,MainTest,start,true] 

Что я wan't достичь является 2 агрегированные строки с текстом объединены на 4 поля:

[user,sun,MainTest2,end#some_union_symbol#start,false] 
[user,sun,MainTest,end#some_union_symbol#start#some_union_symbol#start,true] 

Думаю, мне нужно что-то сделать, чтобы уменьшить, но не совсем уверен. Спасибо!

Answer 1

Только один Answer из всех стеков, которые я могу найти и работать с моей искрой 1.4.1.

извините, за двойное сообщение