在hadoop-env.sh中修改参数添加
export HADOOP_HEAPSIZE="4096"
设置分配的最大jvm内存为4096,一般用于jar包里面除了执行map和reduce之外还要执行其他的后续代码,且后续代码所需要的内存占用大于1g。
当出现map或者reduce过程提示内存不足的时候可以修改etc/下面的mapred-site.xml文件中的参数:mapreduce.map.memory.mb数值到合适的参数即可。