精选优质文档-倾情为你奉上大数据存储技术标准化的探讨 摘要:在Hadoop平台上分析大数据存储技术的标准化问题,详细描述了现有大数据库的存储技术以及应用情况,从数据采集、并行计算框架、以及结果的输出、并行数据处理等方面来探讨大数据存储的标准化问题。 关键词:并行计算 大数据存储 Hadoop 标准化 中图分类号:TP333 文献标识码:A 文章编号:1007-9416(2014)01-0222-01 1 引言 随着互联网Web2.0的兴起和云计算的发展,大数据的价值越来越受到人们的重视,人们对数据的处理实时性和有效性要求也越来越高。大数据的应用已经进入了各行各业了,如商业智能、公共服务、科学研究等领域。目前大数据的分析技术发展十分迅速,尤其是大数据分析平台Hadoop得到了各大厂商的极大关注,基于Hadoop平台进行的大数据分析、数据存储研究正在进行3。目前国际、国内尚未出现大数据分析的全流程标准服务和接口定义,本文研究的重点是根据国内大数据的实际现状,采用hadoop平台进行大数据存储处理的全流程分析以及各个功能模块进