Hadoop大数据平台部署与应用主讲:吕震宇主要内容主要内容l1 1、Hadoop Hadoop 生态系统生态系统概述以及版本概述以及版本演化演化l2 2、Hadoop Hadoop 发行版介绍(开源版发行版介绍(开源版)l3 3、Hadoop Hadoop 安装安装l4 4、HDFS HDFS 上机上机操作操作l5 5、HBASE HBASE 上机操作上机操作l6 6、YARN YARN 上机上机操作操作l7 7、MapReduce MapReduce 上机操作上机操作l8 8、SPARK SPARK 概述概述1 1、Hadoop Hadoop 生态系统生态系统概述以及版本演化概述以及版本演化Hadoop 1.0 Hadoop 1.0 与与 Hadoop 2.0Hadoop 2.0分布式存储系统 HDFSHDFS(Hadoop Distributed File System)提供了高可靠性、高扩展性和高吞吐率的数据存储服务分布式计算框架 MapReduceMapReduce具有易于编程、高容错性和高扩展性等优点资源管理系统 YARNYARN(Yet Another Resource