Hadoop环境如何配置及启动
发表于:2025-02-08 作者:千家信息网编辑
千家信息网最后更新 2025年02月08日,这篇文章主要介绍Hadoop环境如何配置及启动,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!core-site.xmlfs.defaultFShdfs://slave2.had
千家信息网最后更新 2025年02月08日Hadoop环境如何配置及启动
这篇文章主要介绍Hadoop环境如何配置及启动,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!
core-site.xml
fs.defaultFS hdfs://slave2.hadoop:8020 true hadoop.tmp.dir file:/home/hadoop/hadoop-root/tmp fs.checkpoint.period 300 The number of seconds between two periodic checkpoints. fs.checkpoint.size 67108864 The size of the current edit log (in bytes) that triggers a periodic checkpoint even if the fs.checkpoint.period hasn't expired. fs.checkpoint.dir ${hadoop.tmp.dir}/dfs/namesecondary Determines where on the local filesystem the DFS secondary namenode should store the temporary images to merge.If this is a comma-delimited list of directories then the image is replicated in all of the directories for redundancy.
hdfs-site.xml
dfs.namenode.name.dir /home/hadoop/hadoop-root/dfs/name true dfs.datanode.data.dir /home/hadoop/hadoop-root/dfs/data true dfs.replication 3 dfs.permissions false dfs.namenode.secondary.http-address slave1:50090
mapred-site.xml
mapreduce.framework.name yarn mapred.system.dir /home/hadoop/hadoop-root/mapred/system true mapred.local.dir /home/hadoop/hadoop-root/mapred/local true mapreduce.tasktracker.map.tasks.maximum 2 mapreduce.tasktracker.reduce.tasks.maximum 1 mapreduce.job.maps 2 mapreduce.job.reduces 1 mapreduce.tasktracker.http.threads 50 io.sort.factor 20 mapred.child.java.opts -Xmx400m mapreduce.task.io.sort.mb 200 mapreduce.map.sort.spill.percent 0.8 mapreduce.map.output.compress true mapreduce.map.output.compress.codec org.apache.hadoop.io.compress.DefaultCodec mapreduce.reduce.shuffle.parallelcopies 10
一、恢复hadoop
1、停止所有服务
2、删除/home/hadoop/hadoop-root/dfs下的data和name,并且重新建立
3、删除/home/hadoop/hadoop-root/tmp下的文件
4、在namenode节点执行 hadoop namenode -format
5、启动hadoop服务
-----自此hadoop恢复----
6、停止hbase服务,停不掉就杀掉
7、(多个节点)进入/tmp/hbase-root/zookeeper 删除所有文件
8、启动hbase服务
以上是"Hadoop环境如何配置及启动"这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注行业资讯频道!
服务
环境
配置
内容
文件
篇文章
节点
价值
兴趣
多个
小伙
小伙伴
更多
知识
自此
行业
资讯
资讯频道
频道
参考
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
通过网络攻击服务器是怎么实现的
河南服务器带宽怎么算云空间
分布式数据库需要安装
长春软件开发就信吉网传媒
数据库备份如何更安全
数据库技术实训小结
云服务器租赁合同
云浮分布式服务器价格
职工网络安全知识
我的世界模组服务器
安徽pdu服务器电源订购
百胜网络技术有限公司地址
买服务器怎么分区
义马软件开发哪家好
sql数据库差异备份代码
带你了解什么是网络安全
公安部网络安全保卫局局
哪个软件可以查网络安全
昆明联创互联网科技有限公司
全球服务器生产量
数据库导出表定义
电脑连接网络安全吗
awd备份数据库
md数据库
教育软件开发工程师
app软件开发哪家好
霍邱租房软件开发
汽车为什么需要网络技术
韩国服务器因维护而脱机怎么办
远程删数据库