spark-dataframe

3зной

2ответ

Как ограничить десятичные значения до двух цифр перед применением функции agg?

Я следую за this решением от одного из столбцов переполнения стека, мое единственное требование здесь - как я могу ограничить значения, которые я хочу суммировать, до 2-х цифр после десятичного знака

1зной

1ответ

Хранение большого количества данных временных рядов в Scala Dataframe с общим ключом

Я пытаюсь хранить более 200 000 переменных временных рядов в кадре данных Spark, и я хочу, чтобы даты для каждого временного ряда совпадали с набором первичных ключей всех дней между 1-1-1930 и 1-1-20

1зной

1ответ

Как найти максимальное значение Алфавит из DataFrame apache spark?

Я пытаюсь получить максимальное значение Алфавит из блока данных панды в целом. Меня не интересует, в какой строке или столбце она появилась. Меня интересует только одно максимальное значение в предел

1зной

1ответ

EMR 5.x | Свеча на пряжу | Код выхода 137 и пустое пространство Java Ошибка

Я получаю эту ошибку Container exited with a non-zero exit code 137 во время работы искры на пряжу. Я пробовал пару методов после прохождения, но не помог. Конфигурации искры выглядят следующим образо