HDFS介绍.docx

上传人:人*** 文档编号:12760592 上传时间:2022-06-11 格式:DOCX 页数:11 大小:127.04KB
下载 相关 举报
HDFS介绍.docx_第1页
第1页 / 共11页
HDFS介绍.docx_第2页
第2页 / 共11页
HDFS介绍.docx_第3页
第3页 / 共11页
HDFS介绍.docx_第4页
第4页 / 共11页
HDFS介绍.docx_第5页
第5页 / 共11页
点击查看更多>>
资源描述

Hadoop分布式文件系统:架构和设计前提和设计目标o硬件错误o流式数据访问o大规模数据集o简单的一致性模型o“移动计算比移动数据更划算”o异构软硬件平台间的可移植性Namenode和Datanode文件系统的名字空间(namespace)数据复制o副本存放:最最开始的一步o副本选择o安全模式文件系统元数据的持久化通讯协议健壮性o磁盘数据错误,心跳检测和重新复制o集群均衡o数据完整性o元数据磁盘错误o快照数据组织o数据块oStagingo流水线复制可访问性oDFSShelloDFSAdmino浏览器接口 存储空间回收o文件的删除和恢复o减少副本系数 参考资料引言Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 重点行业资料库 > 商业租赁

Copyright © 2018-2021 Wenke99.com All rights reserved

工信部备案号浙ICP备20026746号-2  

公安局备案号:浙公网安备33038302330469号

本站为C2C交文档易平台,即用户上传的文档直接卖给下载用户,本站只是网络服务中间平台,所有原创文档下载所得归上传人所有,若您发现上传作品侵犯了您的权利,请立刻联系网站客服并提供证据,平台将在3个工作日内予以改正。