tft每日頭條

 > 生活

 > hdfs的讀寫流程

hdfs的讀寫流程

生活 更新时间:2024-08-29 09:14:48

hdfs的讀寫流程?客戶端向NameNode發出寫文件請求檢查是否已存在文件、檢查權限若通過檢查,直接先将操作寫入EditLog,并返回輸出流對象 ,我來為大家講解一下關于hdfs的讀寫流程?跟着小編一起來看一看吧!

hdfs的讀寫流程(快來看看)1

hdfs的讀寫流程

客戶端向NameNode發出寫文件請求。檢查是否已存在文件、檢查權限。若通過檢查,直接先将操作寫入EditLog,并返回輸出流對象。

client端按128MB的塊切分文件。client将NameNode返回的分配的可寫的DataNode列表和Data數據一同發送給最近的第一個DataNode節點,此後client端和NameNode分配的多個DataNode構成pipeline管道,client端向輸出流對象中寫數據。client每向第一個DataNode寫入一個packet,這個packet便會直接在pipeline裡傳給第二個、第三個…DataNode。

每個DataNode寫完一個塊後,會返回确認信息。

寫完數據,關閉輸輸出流。發送完成信号給NameNode。

更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!

查看全部

相关生活资讯推荐

热门生活资讯推荐

网友关注

Copyright 2023-2024 - www.tftnews.com All Rights Reserved