这篇文章主要为大家展示了“hadoop cdh5.1对centos系统本身的配置要求是什么”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“hadoop cdh5.1对centos系统本身的配置要求是什么”这篇文章吧。
当运行任务的时候,nodemanager 或报出如下错误
java.lang.OutOfMemoryError: unable to create new native thread
解决方式:配置linux本身。
echo "100000" > /proc/sys/kernel/pid_max
echo "200000" > /proc/sys/vm/max_map_count
针对centos6.5,追加如下文件
vi /etc/security/limits.d/90-nproc.conf
* soft nproc unlimited
root soft nproc unlimited
追加如下内容
/etc/security/limits.conf
* soft nofile 65535
* hard nofile 65535
* hard nproc 100000
* soft nproc 100000
ulimit -a 需要配置如下:
例如open files
max user processes
/home/game/.bash_profile 最后一行放
ulimit -u 65535
[ @ sbin]$ ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 514847
max locked memory (kbytes, -l) 64
max memory size (kbytes, -m) unlimited
open files (-n) 65535
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 65535
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
以上是“hadoop cdh5.1对centos系统本身的配置要求是什么”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。