相关培训方案.DOC

上传人:天*** 文档编号:943469 上传时间:2018-11-09 格式:DOC 页数:9 大小:109KB
下载 相关 举报
相关培训方案.DOC_第1页
第1页 / 共9页
相关培训方案.DOC_第2页
第2页 / 共9页
相关培训方案.DOC_第3页
第3页 / 共9页
相关培训方案.DOC_第4页
第4页 / 共9页
相关培训方案.DOC_第5页
第5页 / 共9页
点击查看更多>>
资源描述

1、相关培训方案1、大数据技术与应用 (7.23-28 芜湖)一、培训对象与要求针对高校大数据技术与应用和商务数据分析与应用相关课程教师、学校主管领导以及相关科研部门负责人。本培 训班每个单位选派相关人员原则上不超过3 人。各 单位要认真做好选 派工作,保留选派人员记录,避免重复培 训。二、培训内容模块一、高校如何开设大数据教学课程 大数据相关专业人才需求缺口 大数据相关招聘岗位需求分析 大数据技术演进与变革 应对 IT 新技术变革,教师知识的储备与提升 在哪个层面进行教学精彩案例 开展大数据分析挖掘教学的形式 高校开设大数据的教学可在多个层面上进行 有条件的高校可以开设云计算专业 不成熟的可在在

2、计算机相关专业上增设数据挖掘和分析方向 不具备条件的高校可以开设大数据方面的课程模块二、大数据产业发展与人才需求 大数据起源和产生、大数据概念的发展与解析 大数据在国内外发展现状、大数据在互联网发展现状 大数据人才需求以及趋势 大数据人才培养体系的最佳实践模块三、大数据带来的机遇和挑战 大数据能带来什么 、引领社会进入“大数据时代” 大数据对国家、社会的作用 、大数据将推动经济发展 大数据将推动科技发展进程、开启商业智能新阶段 数据分析的发展从数据到知识 大数据如何让商业更智能、大数据应用案例 带来数据处理新变革 、大数据的关键技术 大数据与云计算 、大数据技术的发展趋势精彩案例 智慧政府 智

3、慧城市与大数据 车联网 大数据舆情分析 数据治理 智能推荐 大数据与银行 大数据营销分析模块四、电商日志评论数据分析系统 京东案例剖析 京东数据介绍实战内容(现场实验环节) Linux 下日志清洗、加载(实战) Web 系统最终结果数据展示(演示实验)24 日 系统的技术框架选型 日志采集系统介绍模块五、YARN 架构设计和核心概念 YARN 出现的背景 YARN 的设计思想和基本概念 YARN 的基础架构 YARN 的工作流程 YARN 基础类库详解 YARN 核心模块 ApplicationMaster 详解 YARN 核心模块 ResourceManager 剖析 YARN 核心模块 N

4、odeManager 详解 Hadoop V2 资源调度器详细介绍实战内容(现场实验环节) 基于 YARN 的应用程序设计和简单实现案例 YARN 使用第三方类库,包含通信、服务、时间、状态等 从资源管理角度理解 YARN 框架 ApplicationMaster 核心源码 ResourceManager 核心源码 NodeManager 核心源码模块六、基于电商日志数据 MapReduce 高级编程 MapReduce V2 基本架构、原理和相关角色介绍 MapReduce V1 和 MapReduce V2 MapReduce V2 中 MRAppMaster 的工作流程 MapReduc

5、e V2 作业生命周期理解 MapReduce V2 资源调度理解 MapReduce V2 作业恢复和推测执行机制介绍 剖析 MapReduce V2 样例程序代码流程 基本 MapReduce V2 API 概念 驱动代码 Mapper、Reducer Hadoop 流在 MapReduce V2 中的使用 使用 Eclipse 进行快速开发 MapReduce V2 的编程优化 满足解决实际数据分析问题的高级 MapReduce V2 多语言编程实践实战内容(现场实验环节) Hadoop Streaming 和 Java MapReduce V2 编程的差异 利用 Combiner 来减

6、少中间数据 编写 Partitioner 来优化负载平衡 直接访问 Hadoop 分布式文件系统 HDFS MapReduce V2 的 join 操作 辅助排序在 Reducer 方的合并 定制开发 Writables 和 WritableComparable 高级类 使用 SequenceFiles 和 Avro 文件保存二进制数据 定制开发 InputFormats 和 OutputFormat 基于 MapReduce V2 的海量日志分析 熟悉 Java 编程 IDE Eclipse MapReduce V2 wordcount 实例测试 MapReduce V2 wordcount

7、 源代码查看讲解 MapReduce V2 实现单词统计扩展代码逻辑并测试结果 基于 MapReduce V2 编写海量日志的简单分析需求模块七、基于 Hadoo2.*的 Hive 实战技巧(基于京东数据) Hive 和 Pig 架构和理论基础 Hive 的作用和原理说明 Hadoop 仓库和传统数据仓库的协作关系 Hadoop/Hive 仓库数据数据流 Hive 部署和安装 Hive Cli 的基本用法 HQL 基本语法 京东评论数据分析开发技巧详解 使用 JDBC 连接 Hive 进行查询和分析 使用正则表达式加载数据 HQL 高级语法 编写 UDF 函数 编写 UDAF 自定义函数 使用

8、 Sqoop 进行数据分析 使用 Oozie 和 HUE 介绍 动手安装 Hive,并验证是否安装成功 现场解决启动、部署问题,并总结解决问题的方法25 日26 日 使用 Hive 创建自己的数据仓库 使用 Hive 在数据仓库上进行增删改查操作模块八、内存计算框架 Spark 实战 深入 Spark 核心架构 Spark 集群配置介绍开发环境配置 搭建 Intellij 开发环境 Spark 应用案例编程 RDD 缓存策略介绍 transformation action lineage 容错处理 宽依赖与窄依赖 Spark on Yarn 实践 Python 简介 PySpark API 模

9、块九、Spark 计算模型与核心机制 Spark 计算模型 park 程序模型 弹性分布式数据集 Spark 算子分类及功能 Spark 工作机制 Spark 应用执行机制 Spark 调度与任务分配模块 Spark I/O 机制 序列化、压缩 Spark 块管理 Spark 通信模块 通信框架 AKKA Client、Master 和 Worker 间的通信 容错机制、Lineage 机制 Checkpoint 机制 Shuffler 机制实战内容(现场实验环节) 实践 RDD 的转换函数:map、filter 、flatMap、sample、 groupByKey、reduceByKey、

10、 union、 join、distinct 、cartesian、mapValue 、subtract 、cache、persist 实践 RDD 的动作函数:foreach collect collectAsMap reduceByKeyLocally lookup counmt top reduce fold aggregate saveAsTextFile saveAsObject Spark 应用提交工具(spark-submit,spark-shell) RDD 特性、常见操作、缓存策略 RDD Dependency、Stage 常、源码分析 Spark on YARN 运行模式及测

11、试模块十、基于电商日志数据的 Spark SQL 开发 使用 Spark SQL 的原因 Spark SQL 的发展历程 Spark SQL 的性能 Spark SQL 运行架构 Tree 和 Rule sqlContext 的运行过程 hiveContext 的运行过程 catalyst 优化器 解析 Spark SQL 组件 LogicalPlan SqlParser Analyzer Optimizer 深入了解 Spark SQL 运行计划 不同数据源的运行计划 不同查询的运行计划 Spark SQL 应用案例京东评论数据基于 Sparl-sql 的分析27 日实战内容(现场实验环节)

12、 通过 Spark SQL 对微博数据(JSON 格式)进行分析处理 通过 Spark SQL 对农产品数据进行分析处理 sqlContext 应用 hiveContext 应用混合使用、缓存的使用、DSL 的使用模块十一、大数据本科专业申报及经验分享 增设大数据本科专业的合理性和必要性 增设大数据本科专业的人才培养方案 增设大数据本科专业的基本要求和区分度 大数据本科专业主要课程的设置要经验 大数据专业申报过程其他经验分享三、培训时间及地点时 间:2017 年 7 月 23-28 日(23 日下午酒店大厅报到)报到地点:芜湖中央城大酒店(安师大新校区北门对面),前台电话:0553-27117

13、77。四、考核、结业考核:1.集中学习的出勤、讨论发言情况,考核 权重为 80%;2.结业学习心得或论文,考核权重为 20%。结业:考核合格的学员予以结业,由安徽省高等学校师资培训中心颁发结业证书。五、培训费用本期培训收取培训费 2000 元/人,教材 费 348 元,学员车旅费及住宿费由教师所在学校解决。学习期 间餐饮统一安排。 现金和刷卡支付都可以。 转账账户名称:安徽师范大学,开户银 行:中国建设银行芜湖市分行中山路支行,银行帐号:3400 1672 2080 5300 1599。请备注“高师省培”。六、几项具体要求1.学习心得:围绕大数据技术与应用进行选题,字数不少于 1000 字。学

14、习心得或论文于 2017 年 8 月 30 日前发到邮箱 ,由安徽省高等学校师资培训中心组织评阅。2.报名:请于 2017 年 7 月 20 日前在安徽省高等学校师资培训中心网站培训报名平台( )报名,并于报到当日直接前往上述地点报到。报到时请带一张一寸正面彩照。联系人:安徽省高等学校师资培训中心 田滋军 0553-3869383 13855304377安徽省高等学校师资培训中心儒林文化传媒(北京) 有限公司27 日安徽金东方大数据科技有限公司 二一七年六月十六日2、创新创新骨干教师高级研修班 (7 月 25-30 日 北京)一、课程安排日期 时间 具体安排 地点10:00-16:00 报到、

15、办理入住并发放材料 酒店大厅 7 月 25 日(第 1 天) 18:00-19:30晚餐 酒店餐厅9:00-12:00 理念方法 高校创新创业教育生态体系建设7 月 26 日(第 2 天)14:00-17:30 创业思维 互联网时代的创业教育思维中关村创新教育教学实践基地9:00-10:00 考察中关村国家自主创新示范区展示中心 中关村展示中心考察中关村创业大街10:30-12:00社会创业孵化器的运营模式交流14:00-15:00 考察清华大学xlab:创意、创新、 创业“三创实践空间” 建设模式 清华大学7 月 27 日(第 3 天)15:30-17:30考察交流考察北京大学全球创新创业中

16、心 北京大学9:00-12:00 课程体系 创新创业教育“五创” 新模式创意激发与挖掘社会需求 7 月 28 日(第 4 天)14:00-17:30创新思维与创新方法样品创造与最小单元实现9:00-12:00商业模式设计与沙盘演练7 月 29 日(第 5 天)14:00-17:30实践教学创业路演与融资体验中关村创新教育教学实践基地9:00-12:00 创业大赛 大学生创业大赛组织与获奖策略14:00-16:00 互动交流 教学经验交流与学习成果分享 7 月 30 日(第 6 天)16:00-17:30 结业典礼 结业典礼中关村创新教育教学实践基地二、主讲师资:陈东敏:北京大学“ 千人学者 ”

17、,北京大学创新创业中心主任,北京大学产业技术研究院院长、科技开 发部部长。张国庆:中关村加一战略新兴产业人才发展中心理事长、全国知名创新创业教育专家。刘春晓:中国科学院大学创业专业执行主任。黄 威:中国科学院未来科学家种子工程管理中心创新课程研发中心主任。商克伟:啄木鸟创业俱乐部执行秘书长、蓝石天使合伙人、科技部科技创新 CEO 特训营助教、中国 创新创业大赛导师。毛付俊:例外科技公司联合创始人兼总裁、北京高校毕业生就业促进会专家委员会成员。陈志成:中国人工智能学会基础专业委员会常务委员,中国通信学会云计算专家委员会委员,北京格分 维科技有限公司董事长。高 洋:北京创客加孵化服务有限公司总经理

18、。三、项目组成员组长:曾 论 中心常务副主任成员:王后俊 中心对外联络部副主任张 磊 中心对外联络部主管陈艳君 中心对外联络部主管四、费用及支付方式1.本期培训收取培训费 3000 元/人,学员车旅费及住宿 费由教师所在学校解决。学 习期间餐饮统一安排。2.付款方式:转账或报到现场支付(现金或刷卡):开户行:中国民生银行上地支行帐 号:607791108户 名:中关村加一战略新兴产业人才发展中心五、报名方式1报名方式:报名人员名单由各院系自行拟定后统一报名2报名截止时间:2016 年 7 月 22 日前3报到及食宿地点:北京武青会议中心(北京市海淀区杏石口路 18 号,电话:010-88863

19、399),具体 图示及乘车路线见附件二4.报名联系:参加培训的学员可于 7 月 22 日之前电话中关村加一战略新兴产业人才发展中心(后文有详细联系电话),并按规定日期直接前往报到、参加培训。5.请教师准备一寸正面彩照两张,照片背后写上姓名。六、联系方式1.电 话:010-62980180、185109199492.联系人:曾论3.地 址:北京市海淀区中关村软件园二期中兴通大厦 B 座三层。中关村加一战略新兴产业人才发展中心2017 年 6 月 8 日3、高校师资培训管理者高级研修班培训简章 (8 月 4-7 日 巢湖)为贯彻落实国家和省中长期教育改革和发展规划纲要(20102020 年)精神,

20、把握新形势下师资培训新动向,提升全省高校师资培训管理者的综合能力,提高高校师资队伍整体素质,安徽省教育厅人事处委托安徽省高校师资培训中心组织开展全省高校师资培训管理者研修班,为培养高素质高端技能人才提供优质的师资保障。现将有关事宜通知如下:一、培训对象与要求针对高校高校师资培训管理者的培训。本培训班每所院校选派相关人员原则上不超过 3 人。各院校要 认 真做好选派工作,保留 选派人员记录,避免重复培训。二、培训内容1、集中培训(1)拓展训练(2)助力高校青年教师专业发展(3)新形势下高校教师发展的形势与任务(4)高校人事工作面临的挑战与工作方法的创新三、培训时间及地点时 间:2017 年 8

21、月 4-7 日(4 日报到)报到地点:滨湖城碧桂园凤凰酒店(巢湖市居巢区忠庙镇湖滨大道北)前台电话:(0551)88618999四、考核、结业考核:1.集中学习的出勤、讨论发言情况,考核 权重为 80%;2.结业学习心得或论文,考核权重为 20%。结业:考核合格的学员予以结业,由安徽省高等学校师资培训中心颁发结业证书。五、培训费用本期培训收取培训费 1200 元/人,学员车旅费及住宿 费由教师所在学校解决。学习期间餐饮统一安排。现金和刷卡支付都可以。 转账账户名称:安徽师范大学,开户银行:中国建设银行芜湖市分行中山路支行,银行帐号:3400 1672 2080 5300 1599。请备注“高师省培”。六、几项具体要求1.学习心得:围绕师资管理进行选题,字数不少于 1000 字。学习心得或论文于 2017 年 8 月 30 日前发到邮箱 ,由安徽省高等学校师资培训中心组织评阅。2.报名:请于 2017 年 8 月 10 日前在安徽省高等学校师资培训中心网站培训报名平台(http:/ 13855304377 吴王华 13635533988安徽省高等学校师资培训中心二 一七年六月十六日

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 重点行业资料库 > 1

Copyright © 2018-2021 Wenke99.com All rights reserved

工信部备案号浙ICP备20026746号-2  

公安局备案号:浙公网安备33038302330469号

本站为C2C交文档易平台,即用户上传的文档直接卖给下载用户,本站只是网络服务中间平台,所有原创文档下载所得归上传人所有,若您发现上传作品侵犯了您的权利,请立刻联系网站客服并提供证据,平台将在3个工作日内予以改正。