博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
HADOOP综合应用架构之一 配置Secondarynamenode在另一台机器运行
阅读量:5982 次
发布时间:2019-06-20

本文共 1636 字,大约阅读时间需要 5 分钟。

secondarynamenode的作用就是用来做checkpoint---相当于对NameNode节点的元数据备份
现在将secondarynamenode部署在另一台机器,是为了引入Zookeeper做自动切换
具体方法如下
1.修改conf/core-site.xml
增加或修改
<property>
<name>fs.checkpoint.period</name>
<value>3600</value>
<description>The number of seconds between two periodic checkpoints. </description>
</property>
<property>
<name>fs.checkpoint.size</name>
<value>67108864</value>
<description>The size of the current edit log (in bytes) that triggers a periodic checkpoint even if the fs.checkpoint.period hasn't expired. </description>
</property>
<property>
<name>fs.checkpoint.dir</name>  --可以不写,默认为 {hadoopdata}/dfs/namesecondary
<value>/data/work/hdfs/namesecondary</value>
<description>Determines where on the local filesystem the DFS secondary name node should store the temporary images to merge. If this is a comma-delimited list of directories then the image is replicated in all of the directories for redundancy. </description>
</property>
 
2.修改conf/hdfs-site.xml
<property>
<name>dfs.http.address</name>
 <value>0.0.0.0:50070</value>
<description> The address and the base port where the dfs namenode web ui will listen on. If the port is 0 then the server will start on a free port. </description>
</property>
0.0.0.0改为namenode的IP地址(Master的IP)
 
3.修改conf/masters
  将secondarynamenode的机器IP写入,可以多写,一行一个IP
 
4.重启HADOOP,检查secondarynamenode是否已启动 
在Master节点上输入 jps 可以看到    NameNode,Jobtracker
在DataNode上输入jps可以看到        DataNode,Tasktracker
在secondarynamenode上输入jps可以看到   Secondarynamenode 
进入secondarynamenode的目录/data/work/hdfs/namesecondary
正确的结果:
如果没有,请耐心等待,只有到了设置的checkpoint的时间或者大小,才会生成。

转载于:https://www.cnblogs.com/bobsoft/archive/2012/10/07/2714476.html

你可能感兴趣的文章
洛谷 P2486 BZOJ 2243 [SDOI2011]染色
查看>>
数值积分中的辛普森方法及其误差估计
查看>>
Web service (一) 原理和项目开发实战
查看>>
跑带宽度多少合适_跑步机选购跑带要多宽,你的身体早就告诉你了
查看>>
Javascript异步数据的同步处理方法
查看>>
iis6 zencart1.39 伪静态规则
查看>>
SQL Server代理(3/12):代理警报和操作员
查看>>
Linux备份ifcfg-eth0文件导致的网络故障问题
查看>>
2018年尾总结——稳中成长
查看>>
通过jsp请求Servlet来操作HBASE
查看>>
Shell编程基础
查看>>
Shell之Sed常用用法
查看>>
Centos下基于Hadoop安装Spark(分布式)
查看>>
mysql开启binlog
查看>>
设置Eclipse编码方式
查看>>
分布式系统唯一ID生成方案汇总【转】
查看>>
并查集hdu1232
查看>>
Mysql 监视工具
查看>>
博客搬家了
查看>>
Python中使用ElementTree解析xml
查看>>