千家信息网

cloudera离线安装部署文档的步骤

发表于:2024-11-23 作者:千家信息网编辑
千家信息网最后更新 2024年11月23日,这篇文章主要讲解了"cloudera离线安装部署文档的步骤",文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习"cloudera离线安装部署文档的步骤"吧!三
千家信息网最后更新 2024年11月23日cloudera离线安装部署文档的步骤

这篇文章主要讲解了"cloudera离线安装部署文档的步骤",文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习"cloudera离线安装部署文档的步骤"吧!

三台centos服务器

192.168.12.101 n1

192.168.12.102 n2

192.168.13.30 n3

设置服务器ip为静态Ip,ip不会因为机器重启ip发生改变

[root@n1 ~]# cd /etc/sysconfig/network-scripts/
[root@n1 network-scripts]# cat ifcfg-eth0
DEVICE=eth0
HWADDR=74:D4:35:DD:F4:3B
TYPE=Ethernet
UUID=37e135e0-0fdf-4e7e-a20e-afa8a808fbde
ONBOOT=yes
NM_CONTROLLED=yes
BOOTPROTO=static
IPADDR=192.168.12.101
NETMASK=255.255.255.0
GATEWAY=192.168.12.1


1、修改网络hostname

vi /etc/sysconfig/network


vi /etc/hosts

192.168.12.101 n1

192.168.12.102 n2

192.168.13.30 n3


2、生成ssh无密钥登录

ssh-keygen -t rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
scp -r ~/.ssh/authorized_keys root@n2:~/.ssh/

3、卸载系统自带的jdk
最好还是先卸载掉openjdk,在安装sun公司的jdk.
先查看 rpm -qa | grep java
rpm -e --nodeps java-1.7.0-openjdk-1.7.0.45-2.4.3.3.el6.x86_64
rpm -e --nodeps tzdata-java-2013g-1.el6.noarch
rpm -e --nodeps java-1.6.0-openjdk-1.6.0.0-1.66.1.13.0.el6.x86_64


4、安装jdk

//安装jdk
rpm -ivh oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm

配置jdk环境变量
JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera

JRE_HOME=/usr/java/jdk1.7.0_67-cloudera/jre

PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib

export JAVA_HOME JRE_HOME PATH CLASSPATH


5、安装mysql数据库 修改mysql字符编码

yum install mysql-server

//设定开机启动

chkconfig mysqld on

//启动mysql

service mysqld start

//进入mysql

mysqladmin -u root password 'xxxx'

#activity monitor createdatabase amon DEFAULTCHARSET utf8 COLLATE utf8_general_ci;

设置root授权访问以上所有的数据库:

#授权root用户在主节点拥有所有数据库的访问权限 

grant all privileges on *.* to 'root'@'n1' identified by 'xxxx' with grant option; flush privileges;

设置mysql的字符集

编辑 /etc/my.cnf文件

view plaincopy
[client]
default-character-set=utf8
[mysqld]
character_set_server=utf8


6、server端完成添加用户
useradd --system --home=/opt/cm-5.4.1/run/cloudera-scm-server/--no-create-home --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
执行sql脚本 自动创建cm数据库,如果数据库已存在需先删除数据库
/opt/cm-5.4.1/share/cmf/schema/scm_prepare_database.sh mysql cm -hlocalhost -uroot -proot --scm-host localhost scm scm scm

7、离线安装CHD,将下载的包放入该文件夹下
/opt/cloudera/parcel-repo/

下载路径

http://www.cloudera.com/content/cloudera/en/documentation/core/latest/topics/cm_vd.html#cmvd_topic_1


8、修改agent配置
/opt/cm-5.4.1/etc/cloudera-scm-agent/config.ini
server_host=n1 //为server端主机名称
将agent拷贝到其他主机上
scp -r /opt/cm-5.4.1 root@n2:/opt/

9、辅助服务的安装
//安装ntp服务
yum install ntp
chkconfig ntpd on
service ntpd start
//同步server主机时间
ntpdate -u n1

如果在线安装软件包失败,修改对应网卡的DNS的配置文件
# vi /etc/resolv.conf
修改以下内容
nameserver 114.114.114.114 #

//关闭防火墙
service iptables stop (临时关闭)
chkconfig iptables off (重启后生效)

10、启动服务

/opt/cm-5.4.1/etc/init.d/cloudera-scm-server start
/opt/cm-5.4.1/etc/init.d/cloudera-scm-agent start

感谢各位的阅读,以上就是"cloudera离线安装部署文档的步骤"的内容了,经过本文的学习后,相信大家对cloudera离线安装部署文档的步骤这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是,小编将为大家推送更多相关知识点的文章,欢迎关注!

0