emr

5зной

2ответ

Что означает искра exitCode: 12 означает?

Я пытаюсь запустить искровое приложение, написанное в scala 11.8, искра 2.1 на кластере EMR версии 5.3.0. я настроил кластер со следующим: JSON [ { "Classification": "hadoop-env", "Conf

5зной

1ответ

Ограничение ширины столбца в контейнере Hive Metastore

Использование AWS EMR в версии 5.2.1 в качестве среды обработки данных при работе с огромным файлом JSON, который имеет сложную схему со многими вложенными полями, Hive не может обработать его и ошибк

0зной

1ответ

Presto on EMR: внешний доступ

У меня установлен кластер EMR с установленным и запущенным Presto. Я могу запросить мои данные на сервере, используя presto-cli, но я не совсем уверен, как настроить Presto для доступа снаружи (наприм

1зной

1ответ

Как пропустить пароли для искры на EMR

Скажите, что ваш искровой кластер, работающий на Amazon EMR, должен получить доступ к базе данных postgresql. Каков наилучший способ дать ему логин и пароль? Таковы некоторые способы, которыми мы попр

0зной

1ответ

Остановить журналы исполнителя Spark от получения gzipped

У меня есть работа Spark с очень длинными работами. Когда задачи запускаются, я могу перейти на вкладку «Исполнители» и увидеть всех моих исполнителей и их задачи. Я могу щелкнуть ссылку stderr, чтобы

0зной

1ответ

Как высвободить ресурсы на кластере AWS EMR?

У меня есть общая проблема, когда я запускаю кластер AWS EMR и регистрируюсь через SSH, а затем запускаю spark-shell, чтобы протестировать некоторый код искры, а иногда я теряю свое интернет-соединени