千家信息网

cdh3u6怎么配置机架感知

发表于:2024-10-09 作者:千家信息网编辑
千家信息网最后更新 2024年10月09日,这篇文章主要介绍"cdh3u6怎么配置机架感知 ",在日常操作中,相信很多人在cdh3u6怎么配置机架感知 问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"cdh3u6怎
千家信息网最后更新 2024年10月09日cdh3u6怎么配置机架感知

这篇文章主要介绍"cdh3u6怎么配置机架感知 ",在日常操作中,相信很多人在cdh3u6怎么配置机架感知 问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"cdh3u6怎么配置机架感知 "的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

只需要在namenode 和 jobtracker机器上编写topology.sh脚本和topology.data即刻

配置更改只需要重启namenode和jobtracker进程就可以

1.topology.sh脚本

HADOOP_CONF=/home/...hadoop/conf

while [ $# -gt 0 ] ; do

nodeArg=$1

exec< ${HADOOP_CONF}/topology.data

result=""

while read line ; do

ar=( $line )

if [ "${ar[0]}" = "$nodeArg" ] ; then

result="${ar[1]}"

fi

done

shift

if [ -z "$result" ] ; then

echo -n "/default/rack "

else

echo -n "$result "

fi

done

2.编写topology.data文件(只对ip起作用,防止意外,hostname和ip都配置,如hostname1的ip就是ip1)

hostname1 /dc1/rack1

hostname2 /dc1/rack3

ip1 /dc1/rack1

ip2 /dc1/rack3

3.core-site.xml配置

topology.script.file.name

/home/...hadoop/conf/topology.sh

Hadoop2: net.topology.script.file.name

到此,关于"cdh3u6怎么配置机架感知 "的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注网站,小编会继续努力为大家带来更多实用的文章!

0