千家信息网

hadoop cdh5.1对centos系统本身的配置要求是什么

发表于:2025-02-23 作者:千家信息网编辑
千家信息网最后更新 2025年02月23日,这篇文章主要为大家展示了"hadoop cdh5.1对centos系统本身的配置要求是什么",内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下"hadoop cd
千家信息网最后更新 2025年02月23日hadoop cdh5.1对centos系统本身的配置要求是什么

这篇文章主要为大家展示了"hadoop cdh5.1对centos系统本身的配置要求是什么",内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下"hadoop cdh5.1对centos系统本身的配置要求是什么"这篇文章吧。

当运行任务的时候,nodemanager 或报出如下错误

java.lang.OutOfMemoryError: unable to create new native thread

解决方式:配置linux本身。

echo "100000" > /proc/sys/kernel/pid_max

echo "200000" > /proc/sys/vm/max_map_count

针对centos6.5,追加如下文件

vi /etc/security/limits.d/90-nproc.conf

* soft nproc unlimited

root soft nproc unlimited

追加如下内容

/etc/security/limits.conf

* soft nofile 65535

* hard nofile 65535

* hard nproc 100000

* soft nproc 100000

ulimit -a 需要配置如下:

例如open files

max user processes

/home/game/.bash_profile 最后一行放

ulimit -u 65535

[ @ sbin]$ ulimit -a

core file size (blocks, -c) 0

data seg size (kbytes, -d) unlimited

scheduling priority (-e) 0

file size (blocks, -f) unlimited

pending signals (-i) 514847

max locked memory (kbytes, -l) 64

max memory size (kbytes, -m) unlimited

open files (-n) 65535

pipe size (512 bytes, -p) 8

POSIX message queues (bytes, -q) 819200

real-time priority (-r) 0

stack size (kbytes, -s) 10240

cpu time (seconds, -t) unlimited

max user processes (-u) 65535

virtual memory (kbytes, -v) unlimited

file locks (-x) unlimited

以上是"hadoop cdh5.1对centos系统本身的配置要求是什么"这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注行业资讯频道!

0