非结构化数据存储解决方案(共4页).doc

上传人:晟*** 文档编号:8781529 上传时间:2021-11-27 格式:DOC 页数:4 大小:122.50KB
下载 相关 举报
非结构化数据存储解决方案(共4页).doc_第1页
第1页 / 共4页
非结构化数据存储解决方案(共4页).doc_第2页
第2页 / 共4页
非结构化数据存储解决方案(共4页).doc_第3页
第3页 / 共4页
非结构化数据存储解决方案(共4页).doc_第4页
第4页 / 共4页
亲,该文档总共4页,全部预览完了,如果喜欢就下载吧!
资源描述

精选优质文档-倾情为你奉上1. 非结构化数据存储在上图中,描述了非结构化数据存储架构的基本组成部分,其中:1. 文件存取统一接口,封装了对数据中心所以非结构化数据的读写操作接口。2. Hadoop HDFS 负责对大文件的存储,以HDFS:为文件协议标准3. HBase 通过维护一张文件表完成对小文件的存储,以HBase:为文件协议标识1.1文件存取统一接口1.1.1 文件存储接口对文件进行存储前,接口根据文件的大小和HDFS文件分块的配置大小进行比较,当文件超过设定大小时,接口认为该文件是大文件,直接分配到HDFS文件存储接口进行写入;否则当文件小与块大小时,根据系统维护的Hbase小文件存储通用存储表进行存储管理。1. 对直接存储到HDFS的文件,则文件路径以HDFS为中心存储文件协议头,文件路径则根据该文件的业务属性做完文件的路径,文件名称保留原有名称,例如:HDFS:/aaa/bbb.zip2. 对通过Hbase管理的小文件,则文件路径以HBASE为中心存储文件协议头,文件路径不需要分文件夹,直接以文件的唯一标识

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 实用文档资料库 > 公文范文

Copyright © 2018-2021 Wenke99.com All rights reserved

工信部备案号浙ICP备20026746号-2  

公安局备案号:浙公网安备33038302330469号

本站为C2C交文档易平台,即用户上传的文档直接卖给下载用户,本站只是网络服务中间平台,所有原创文档下载所得归上传人所有,若您发现上传作品侵犯了您的权利,请立刻联系网站客服并提供证据,平台将在3个工作日内予以改正。