Как увеличить размер кучи java в Hadoop

Question

Я использую Hadoop 2.6.0 версии и пытаюсь запустить вставку улья в таблицу, где я получил ошибку JAVA Heap.

Есть ли способ увеличить размер кучи в hadoop через кластер?

Заранее спасибо

Answer 1

Для этого вы можете выполнить следующие действия перед выполнением команды Hadoop:

export HADOOP_HEAPSIZE=4096 

В качестве альтернативы, вы можете достичь того же, добавив следующую постоянную установку в вашем mapred сайте. XML-файл, этот файл находится в HADOOP_HOME/CONF /:

<property> 
    <name>mapred.child.java.opts</name> 
    <value>-Xmx4096m</value> 
</property> 

Смотри также здесь: https://www.mapr.com/blog/how-to-avoid-java-heap-space-errors-understanding-and-managing-task-attempt-memory