扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
hdfs是分布式的文件系统，用来在廉价的集群上做大数据量的存储。
1.大文件被切割成小文件，使用分而治之的思想让很多服务器对同一个文件进行联合管理
2.每个小文件做冗余备份，并且分散存到不同的服务器，做到高可靠不丢失
创新互联-专业网站定制、快速模板网站建设、高性价比巴彦网站开发、企业建站全套包干低至880元,成熟完善的模板库,直接使用。一站式巴彦网站制作公司更省心,省钱,快速模板网站建设找我们，业务覆盖巴彦地区。费用合理售后完善，10多年实体公司更值得信赖。
namenode：集群老大，掌管文件系统目录树，处理客户端读且请求
SecondaryNamenode：持久化元数据，主要给 namenode 分担压力之用
DataNode：存储整个集群所有数据块，处理真正数据读写
- HDFS 中的文件在物理上是分块存储（block），块的大小可以通过配置参数(dfs.blocksize)来规定，默认大小在 hadoop2.x 版本中是 128M，老版本中是 64M
- HDFS 文件系统会给客户端提供一个统一的抽象目录树，客户端通过路径来访问文件
- namenode 是 HDFS 集群主节点，负责维护整个 hdfs 文件系统的目录树，以及每一个路径（文件）所对应的 block 块信息（block 的 id，及所在的 datanode 服务器）
- datanode 是 HDFS 集群从节点，每一个 block 都可以在多个 datanode 上存储多个副本（副本数量也可以通过参数设置 dfs.replication，默认是 3）
- HDFS 是设计成适应一次写入，多次读出的场景，且不支持文件的修改
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
微信二维码
移动版官网