AI
推荐
模板社区
专题
登录
免费注册
首页
流程图
详情
checkpoint
2019-09-03 11:41:55
0
举报
分享方式
仅支持查看
checkpoint
hadoop
模版推荐
作者其他创作
大纲/内容
fsimage_00000000000
edits_inprogress_0000n
namenode启动一段时间后生成edits_0000001~000n-1
2.日志滚动，001这个文件会截止记录，在新的edits_inprogress_000n记录
edits_00001~000n-1
1.提醒nn该更新fsimage了
namenode只会保持最新的2个fsimage
3.拷贝相关文件到sn上
5.把更新后的fsimage写入磁盘
6.把最新的faimage给到namenode
多久合并元数据？1.默认3600s=60分钟=1小时2.产生100万条记录时checkpoint合并元数据瓶颈网络IO
namenode
secondarynamenode
初始化集群后的第一次会拷贝fsimage_0000
fsimage_00000000001
4.把相关文件加载进内存，更新fsimage
namenode初始化：1.初始化生成fsimage_0000000000002.edits是namenode启动后生成edits_inprogress_0001，120秒后生成edits_0001文件3.edits的日志记录一定要有hdfs的增删改操作4.两类edits: 1.正常编号范围 2.inprogress
namenode与secondarynamenode的关系
收藏
立即使用
kafka
收藏
立即使用
HBase架构图
收藏
立即使用
文件写入
收藏
立即使用
checkpoint
BIG_BOSS
职业：本科
去主页
Collect
Get Started
Flink调优总结
Collect
Get Started
元数据的CheckPoint的过程
Collect
Get Started
hippo
Collect
Get Started
Flink Checkpoint
评论
0
条评论
下一页
Document
