hadoop2

0зной

1ответ

Как получить весь контент страницы из нескольких страниц с совпадением ключевых слов в hadoop

Я пытаюсь сделать небольшой пример, например, если ключевое слово соответствует определенной странице среди нескольких страниц, тогда мне нужно получить весь контент этой конкретной страницы , страниц

1зной

1ответ

Pig Ошибка на функции SUM

У меня есть данные, как - store trn_date dept_id sale_amt 1 2014-12-14 101 10007655 1 2014-12-14 101 10007654 1 2014-12-14 101 10007544 6 2014-12-14 104 100086544 8 2014-12-14 101 10000

0зной

2ответ

Преобразование текста в последовательность с использованием MapReduce создает ненужные символы

Я конвертирую текстовый файл в файл последовательности с помощью MapReduce и обратно в текст. Я получаю некоторые цифры в начале каждой строки. Как я могу удалить их или остановить их от вывода. напри

0зной

1ответ

Имеет ли Hadoop несколько локальных временных файлов до того, как данные будут помещены в datanodes?

Я думаю, я понимаю основы архитектуры и структуры Hadoop. Мне интересно, все ли данные, поступающие в кластер Hadoop, должны проходить через локальное временное расположение файлов? Я получаю это до т

0зной

1ответ

NameNode выключается после запуска hadoop

Я установил hadoop 1.2.1 на linux с конфигурацией кластера с одним узлом. Он отлично работает и команда jps показывало информацию о всех 5 рабочих мест JobTracker NameNode TaskTracker SecondaryNameNod

0зной

1ответ

YARN - количество задач карты/уменьшения, которые могут выполняться в контейнере

Я выполняю работу MR ETL, и у меня есть только задачи сопоставления и задачи редуктора. Я всегда вижу только один картограф, работающий внутри контейнера. Возможно ли запустить несколько контейнеров в