checkpoint
2019-09-03 11:41:55 0 举报
checkpoint
作者其他创作
大纲/内容
fsimage_00000000000
edits_inprogress_0000n
namenode启动一段时间后生成edits_0000001~000n-1
2.日志滚动,001这个文件会截止记录,在新的edits_inprogress_000n记录
edits_00001~000n-1
1.提醒nn该更新fsimage了
namenode只会保持最新的2个fsimage
3.拷贝相关文件到sn上
5.把更新后的fsimage写入磁盘
6.把最新的faimage给到namenode
多久合并元数据?1.默认3600s=60分钟=1小时2.产生100万条记录时checkpoint合并元数据瓶颈网络IO
namenode
secondarynamenode
初始化集群后的第一次会拷贝fsimage_0000
fsimage_00000000001
4.把相关文件加载进内存,更新fsimage
namenode初始化:1.初始化生成fsimage_0000000000002.edits是namenode启动后生成edits_inprogress_0001,120秒后生成edits_0001文件3.edits的日志记录一定要有hdfs的增删改操作4.两类edits: 1.正常编号范围 2.inprogress
namenode与secondarynamenode的关系
0 条评论
下一页