emr

1зной

1ответ

Я пытаюсь запустить несколько шагов, используя lemur + clojure. У меня проблема с передачей нескольких входных данных в качестве аргумента clojure + lemur. В качестве первого шага для моей работы я пы

2зной

1ответ

403 AccessDenied на Amazon S3 удалить защищенную папку

У меня есть одна папка в amazon s3, на которой я ограничил разрешение на удаление любой папки. Но теперь, что случилось, я не могу создать какую-либо папку, используя скрипт hive. Этот запрос куста со

0зной

1ответ

Как установить размер кучи для EMR Master

У меня есть работа, с которой я запускаюсь из EMR. Мастер запускает картограф. Как только это будет сделано, он загрузит тяжелую операцию в памяти, а затем unutualy выгружается. В настоящее время рабо

1зной

1ответ

python mrjob - gaierror: [Errno -2] Имя или услуга неизвестна

Я пытаюсь получить доступ к файлам s3 из модуля mrjob. Вот код, который терпит неудачу: from mrjob.emr import S3Filesystem fs = S3Filesystem("<aws_access_key_id>", "<aws_secret_access_key>", "us-west

0зной

1ответ

Как я могу читать и писать двоичные файлы в Cascading?

Я хочу загрузить некоторые файлы в двоичном формате (например, jpegs, но может быть любым двоичным форматом), каким-то образом его обработать и записать. Я хочу сделать это на hadoop, и я хотел бы нап