千家信息网

hadoop2.5.1伪分布式怎么部署

发表于:2025-02-05 作者:千家信息网编辑
千家信息网最后更新 2025年02月05日,小编给大家分享一下hadoop2.5.1伪分布式怎么部署,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!环境:Ubuntu
千家信息网最后更新 2025年02月05日hadoop2.5.1伪分布式怎么部署

小编给大家分享一下hadoop2.5.1伪分布式怎么部署,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

环境:Ubuntu 12.10 jdk 1.7

JDK和SSH下载安装不用再细说了,网上一大堆资料。

配置免登录命令:

  $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa  $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

前面已经将源码编译好了,将/data/hadoop-2.5.1-src/hadoop-dist/hadoop-2.5.1.tar.gz拷贝到/data目录下

解压tar -xvf hadoop-2.5.1.tar.gz

配置etc/hadoop/core-site.xml:

            fs.defaultFS        hdfs://localhost:9000    

配置etc/hadoop/hdfs-site.xml:

            dfs.replication        1    

配置YARN的配置文件etc/hadoop/mapred-site.xml:

            mapreduce.framework.name        yarn    

配置etc/hadoop/yarn-site.xml:

            yarn.nodemanager.aux-services        mapreduce_shuffle    

启动/停止namenode和datanode命令

cd /data/hadoop-2.5.1

sbin/start-dfs.sh

sbin/stop-dfs.sh

启动/停止YARN命令

sbin/start-yarn.sh

sbin/stop-yarn.sh

验证命令:

bin/hdfs namenode -format

bin/hdfs dfs -put etc/hadoop input

namenode地址:http://localhost:50070/

ResourceManager地址:http://localhost:8088/

以上是"hadoop2.5.1伪分布式怎么部署"这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注行业资讯频道!

配置 命令 篇文章 分布式 内容 地址 不怎么 不用 大堆 大部分 拷贝 文件 更多 源码 环境 目录 知识 行业 资料 资讯 数据库的安全要保护哪些东西 数据库安全各自的含义是什么 生产安全数据库录入 数据库的安全性及管理 数据库安全策略包含哪些 海淀数据库安全审计系统 建立农村房屋安全信息数据库 易用的数据库客户端支持安全管理 连接数据库失败ssl安全错误 数据库的锁怎样保障安全 网络安全检查是做什么的 全国农业企业技术人才数据库 中国的网络安全防护能力 邮箱的服务器 I公安局网络安全备案流程图 网络安全与管理网上考试 淮安智能化网络技术服务费 云数据库安全分析的意义 前端项目用什么软件开发 公司数据库建设 购买的服务器主机怎么登陆 增强网络安全防范心得 中文电子学位论文数据库 暗黑2 亚洲服务器房间进不去 成都短视频云控软件开发商 银川办公软件开发公司案例 文献检索数据库是啥 qq三国逐鹿群雄是那个服务器 数据库实验大纲 软件开发公司合资协议 信创网络安全产品招标 网络安全季度报告 常用文献检索网站和数据库包括 对于数据库的三个基本表…… 上海科技教育网络技术应用 北京泰达在线网络技术 网络安全存在哪些问题图片 1433端口登陆数据库 战神引擎怎么启动数据库 棋牌直播平台软件开发
0