AI
推荐
模板社区
专题
登录
免费注册
首页
流程图
详情
HDFS写入数据的宏观流程
2021-11-21 18:21:19
0
举报
分享方式
使用 (￥3)
HDFS写入数据的宏观和微观流程
流程图
模版推荐
作者其他创作
大纲/内容
4.2 读取Block数据packet
P
1、发送写数据请求
DataNode3
socket
DataNode
HDFS写入数据宏观流程
DFS
客户端
NameNode
4.1 创建OS的对象给客户端使用
客户端节点
4.2 向NN询问Block存储的DN
具体流程描述：https://xiatwo.blog.csdn.net/article/details/121386708
2.1 检查权限2.2 检查磁盘空间
HDFS dfs -put
ack
DataNode1
Pipeline
3、返回OK
DataNode2
FSDataOutputStream
2、远程RPC请求NameNode
5、packet流式写入
1、保存文件元数据信息（DFS 请求是携带 ：文件名，大小，时间，权限...）2、File和Block映射信息（当File文件上传成功后NameNode保存映射关系）3、Block与DataNode映射信息（DataNode实时汇报给NameNode关于Block的数据）
packet接受完成响应 ack
Block
收藏
立即使用
Kafka 消费者数据安全策略
收藏
立即使用
HDFS写入数据的宏观流程
收藏
立即使用
Lambda 数仓架构
收藏
立即使用
Lambda 数仓环境架构
流言非魚
职业：后端开发
去主页
Collect
Get Started
数据的整理与初步处理
Collect
Get Started
HDFS 写数据流程_读数据流程详细图解
Collect
Get Started
HDFS-写入错误恢复V1.0
Collect
Get Started
HDFS
评论
0
条评论
下一页
Document
