Hadoop HDFS 学习（2）理论

HDFS读流程



客户端调用API的open方法请求NameNode 获得block的位置信息，文件内容存储的不同的block上，然后返回客户端。客户端并发的读不同的block，然后合并成一个文件。（不能超大型文件，磁盘存储可能不够）

HDFS写流程



客户端调用API的create方法请求NameNode 并创建一个文件，然后将文件的名字，拥有者，大小返回客户端。计算该文件分成多少个block，将block写在dataNode 上，客户端只写一次，剩下的副本由第一个dataNode产生线程，根据副本创建规则复制到其他的dataName上，不由客户端创建（优点：速度快）。复制完后返回客户端一个回馈信息，同时汇报给nameNode。上传成功。

HDFS文件权限



上传文件，谁上传的文件，那么这个文件的拥有者就是谁。HDFS不做密码认证。