Pyke's Blog 给我一双看清世界的眼眸

源码分析 #HDFS

HDFS写文件流程

一、构建Pipeline 在从客户端提交写入文件的请求后，NameNode需要选择出一些适合的DataNode，将这些DataNode放入一个Pipeline中。NameNode会与Pipeline中的第一个DataNode交互（发送Packet），接下来第一个DataNode会将Packet发送到

Administrator

Published on 2023-09-27

源码分析 #HDFS

DataNode启动流程

一、 DataNode类的注释 /********************************************************** * DataNode is a class (and program) that stores a set of * blocks for a

Administrator

Published on 2023-09-26

源码分析 #Yarn

Yarn Federation任务提交流程（一）

1. 启动Router时做了什么事官方对Router有如下释义，这个组件的作用大致意思就是可以对外暴露ApplicationClientProtocol，让外界不感知ResourceManager的存在，所有通过Yarn Client发送的请求会经过这里，从而进行解耦。 /** * The ro

Administrator

Published on 2023-08-02