Python全系列 教程
3567个小节阅读:5929.9k
目录
鸿蒙应用开发
C语言快速入门
JAVA全系列 教程
面向对象的程序设计语言
Python全系列 教程
Python3.x版本,未来主流的版本
人工智能 教程
顺势而为,AI创新未来
大厂算法 教程
算法,程序员自我提升必经之路
C++ 教程
一门通用计算机编程语言
微服务 教程
目前业界流行的框架组合
web前端全系列 教程
通向WEB技术世界的钥匙
大数据全系列 教程
站在云端操控万千数据
AIGC全能工具班
A A
White Night
HDFS架构图:
思考:100台服务器,存储空间单个8TB,总存储空间为800TB,那么5TB文件如何存储?
128MB一块 128MB8=1GB 12881024=1TB
5TB数据分成的128MB的块数8192 *5。
清单:
5TB文件分的块:
元数据:
文件名称:web.log,大小:5TB ,创建时间,权限,文件所有者,文件所属的用户组,文件类型等。
文件块列表信息:
0~12810241024 -1:128MB:node1:path,node3:path,node8:path
12810241024~212810241024 -1:128MB:node2:path,node4:path,node9:path
212810241024~312810241024 -1:128MB:node3:path,....
......