千家信息网

Ubuntu下Hadoop如何安装与部署

发表于:2025-01-31 作者:千家信息网编辑
千家信息网最后更新 2025年01月31日,这篇文章将为大家详细讲解有关Ubuntu下Hadoop如何安装与部署,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。一. 环境的准备:OS:Linux(Ubuntu1
千家信息网最后更新 2025年01月31日Ubuntu下Hadoop如何安装与部署

这篇文章将为大家详细讲解有关Ubuntu下Hadoop如何安装与部署,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

一. 环境的准备:

OS:Linux(Ubuntu14)

JDK:jdk-7u80-linux-x64.tar.gz(版本为JDK1.7 64-Bit)

Hadoop:hadoop-2.6.4.tar.gz(伪分布式

二. 查看系统下的 ip ,hosts 及 hostname 并修改

1.查看IP:

2. 查看hosts 和 hostname:

三: JDK的安装及环境配置

1. 将两个压缩包就放在Ubuntu下Desktop下,如下:

2. 在 / 根目录下创建 mysoftware文件夹

3. 并将解压包解压到该文件目录下

4. 赋予权限 并改变权限:

5. 配置环境变量

6. 使环境生效,并让系统默认使用自己安装的JDK(这里JDK其实是安装并 默认使用已安装的,熟练再来一次)

四:安装与部署Hadoop:

1. 进入目录结构,注意需要修改的配置文件:

2. 为了方便,完成mapred-site.xml文件的复制:

3. 修改 hadoop-env.sh 文件:

4. 修改 core-site.xml 文件:

5. 修改 hdfs-site.xml 文件:

6. 修改 mapred-site.xml 文件:

7. 修改 yarn-site.xml 文件:

8. 修改 slaves 文件:

9. 在格式化前,先确认使用默认安装的JDK:

10. 然后接下来进行格式化,格式化hdfs文件系统:

11. 启动hadoop服务1:

12..检查 hadoop启动是否成功:

浏览器端查看:


关于"Ubuntu下Hadoop如何安装与部署"这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。

0