emr

2зной

1ответ

Укажите формат метки времени, написанный pyspark

Фон - это просто программа pyspark, разработанная мной на 1.6 с использованием databricks csv read/writer, и все было счастливо. У моей DataFrame была отметка времени, которая была выписана в стандарт

0зной

3ответ

Hive crashing on where clause

Я пытаюсь настроить улей-hadoop-mongo для работы. Я импортировал данные в MongoDB из файла JSON, то я создал как внутренние, так и внешние таблицы в улье, которые подключаются к Монго: CREATE EXTERNAL

2зной

1ответ

Приложение примера конфигурации Amazon AWS EMR «no»

Я зарегистрировался на вчерашний день aws и сегодня я следил за несколькими видео на YouTube, чтобы запустить образец wordcount на входном файле в S3. Я попытался это сделать, но я не вижу кнопки «при

0зной

1ответ

Как обрабатывать только файлы дельта в datapipeline aws и EMR

Как обрабатывать только новые файлы с использованием конвейера данных AWS и EMR? Я могу получить различное количество файлов в моем исходном каталоге. Я хочу обрабатывать их с использованием конвейера

3зной

1ответ

AWS Datapipeline ServiceAccessSecurityGroup

При попытке создать ресурс EMRcluster с этими свойствами: Emr Managed Master Group Security Id Emr Управляемый Ведомый Группа безопасности Id У меня есть эта ошибка: Заканчивается ошибками. Вы также д

0зной

1ответ

неправильнаяконфигурация в конфигурационном файле:. /home/hadoop/hive.config»

я пытаюсь планировать улей работу с помощью Amazon -EMR я следовал инструкции, указанные в ссылку http://docs.aws.amazon.com/ElasticMapReduce/latest/DeveloperGuide/kinesis-hive-scripted-queries.html О

2зной

1ответ

Использование кучи пряжи, растущей с течением времени

Мы запускаем Spark Streaming на AWS EMR. Эта работа будет работать стабильно в течение 10-14 часов, а затем сбой без видимых ошибок в журналах stderr, stdout или Cloudwatch. После этого сбоя любые поп