集团大数据平台建设人员培训管理办法.doc

《集团大数据平台建设人员培训管理办法.doc》由会员分享，可在线阅读，更多相关《集团大数据平台建设人员培训管理办法.doc（15页珍藏版）》请在得力文库 - 分享文档赚钱的网站上搜索。

1、集团大数据平台建设人员培训管理办法我方严格按照集团的要求，向业务和技术团队提供相应培训，具体培训实施要求包括：（1）制定详细的项目培训计划根据项目安排和进度，预先制定详细的项目培训计划，包括：a）确定项目培训时间;b）确定项目培训内容;c）确定讲师名单;d）确定集团方参与培训人员角色。（2）确定项目培训资料根据项目培训计划，预先就项目培训内容准备培训资料，并在与集团有关人员充分沟通后确定项目培训资料。（3）保证项目培训效果我方严格按照项目培训计划为集团提供项目培训（经双方建议或同意更改的项目培训计划除外），保证为项目培训提供充分的时间和人力资源保障，确保项目的最终培训效果。1.1 Hadoop

2、系统培训我方专门为集团管理层、关键用户和相关技术骨干开展大数据、Hadoop系统和业务领域的概览性培训，使其理解实施大数据带来的变革影响及意义，能顺利开展相关业务领域的支持工作。培训包含如下内容：l 大数据和大数据发展趋势；l 大数据生态圈以及原理构架课程；l 大数据技术与数据分析基础知识；l 大数据应用案例；计划安排两轮培训，每轮3天，每轮不少于50人，即满足总人数不少于100人，每人不少于3天的要求。此培训主要由软件原厂商星环科技提供。具体课程安排如下：表17-1 Hadoop系统培训课程表培训类型培训课程培训时间培训内容简介基础培训大数据和大数据发展趋势0.5天什么是大数据？大数据发展趋

3、势基础培训大数据生态圈以及原理构架课程0.5天包含下列内容：Apache Hadoop的发展历史Apache Hadoop生态系统HDFS技术原理、HDFS基本操作和编程Map/Reduce基础集群架构基础培训大数据技术与数据分析基础知识1天针对系统功能，进行数据处理和数据分析；基础培训大数据应用案例1天应用案例培训1.2 业务使用培训我方专门为业务人员开展业务操作相关培训，使其能熟练操作基于Hadoop系统实现的业务功能。培训包含如下内容：l 大数据和Hadoop简介；l 集团大数据平台介绍；l 集团大数据平台业务使用详细培训；l 集团大数据平台业务应用案例；计划安排两轮培训，每轮7天，每轮

4、不少于100人，即满足人数不少于200人，每人不少于7天的要求。具体课程安排如下：表17-2 业务使用培训课程表培训类型培训课程培训时间培训内容简介基础培训大数据和Hadoop简介1天什么是大数据？Hadoop功能特点。基础培训集团大数据平台介绍1天大数据平台建设目标、建设思路、建设方法、架构设计。基础培训集团大数据平台业务使用详细培训3天如何使用集团大数据平台各项功能；基础培训集团大数据平台业务应用案例2天应用大数据平台进行业务，推动发展的应用案例培训1.3 分析挖掘培训我方专门为数据分析人员提供数据分析挖掘培训，使其能熟练运用Hadoop系统开展数据分析挖掘工作，能够按需基于系统（工具）做

5、数据分析开发，尤其是对报表的定制化开发。培训包含如下内容：我方专门为集团业务分析团队提供如下培训；l 大数据技术与数据处理基础知识；l R语言开发基础与RStudio工具使用基础；l 数据挖掘算法与数据可视化基础知识；l 定制化报表实际应用案例；计划安排六轮培训，每轮5天，每轮不少于200人，即满足人数不少于200人，每人不少于30天的要求。表17-3 分析挖掘培训课程表培训类型培训课程培训时间培训内容简介基础培训大数据技术与数据处理基础知识1天大数据技术与数据处理基础知识业务分析培训R语言初级培训RStudio工具使用培训1天RStudio工具介绍培训R语言编程基础、数据处理、作图和数据分析

6、R软件及应用统计方法1天语言入门、用R编程、用R绘图。基础统计、经典回归分析、现代回归和分类、列联表分析、关联规则分析、广义线性模型、多层模型、通过顾客满意度模型引入路径模型及其PLS偏最小二乘方法和SEM模型、时间序列简介及状态空间模型、多元分析Transwarp Discover基础培训1天Transwarp Discover基础原理，问题诊断，基础算法库简介，基础算法调用实践定制化报表实际应用案例1天定制化报表实际应用案例培训1.4 运行维护培训我方专门为运维人员提供运维知识和技能的转移培训，使其可承担系统交付后的运维工作，能熟练使用系统监控等管理功能，能诊断处理各类问题，能够维护优化系

7、统性能。培训包含如下内容：l 大数据和Hadoop简介；l 集团大数据平台和功能介绍；l 集团大数据平台日常运行维护；l 集团大数据平台常见问题处理；计划安排三轮培训，每轮5天，每轮不少于300人，即满足要求人数不少于300人，每人不少于14天的要求。具体课程安排如下：表17-4运行维护培训课程表培训类型培训课程培训时间培训内容简介基础培训大数据和Hadoop简介1天什么是大数据？Hadoop功能特点。基础培训集团大数据平台和功能介绍1天大数据平台架构和各项功能介绍。基础培训集团大数据平台日常运行维护培训2天大数据平台的日常运行维护工作详细介绍；基础培训集团大数据平台常见问题处理1天集团大数据

8、平台常见问题处理1.5 开发培训我方专门为开发人员提供开发知识和技术的转移培训，使其可承担系统交付后的功能开发工作，完全了解开发过程、系统配置和功能开发内容，能熟练完成系统功能开发、升级，对于系统软件问题能独立诊断和处理，培训包含如下内容：计划安排两轮培训，每轮15天，每轮不少于200人，即满足要求人数不少于200人，每人不少于30天的要求。表17-5 开发培训课程表培训类型培训课程培训时间培训内容简介基础培训大数据生态圈以及原理构架课程1天包含下列内容：Apache Hadoop的发展历史Apache Hadoop生态系统HDFS技术原理、HDFS基本操作和编程Map/Reduce基础集群架

9、构技术开发培训Transwarp Data Hub安装培训1天提供Transwarp Data Hub各组件的安装、配置、部署、监控、维护，以及高可用性配置的培训，组件包括Transwarp Hadoop，Transwarp Hyperbase，Transwarp Inceptor，Transwarp StreamTranswarp Data Hub产品架构、软件特性培训1天提供Transwarp Data Hub整体产品架构以及各个组件包括Transwarp Hadoop，Transwarp Hyperbase，Transwarp Inceptor，Transwarp Stream的功能特性

10、介绍Transwarp Data Hub运维培训1天产品运维培训，包括日常运维管理指标监控以及故障诊断Hyperbase开发培训课程2天包含下列内容：Zookeeper的原理、Zookeeper的基本操作、Hyperbase的组成和原理、常见数据模型设计模式、基本编程接口、Hyperbase的运行和操作Hyperbase集群的优化Inceptor开发培训课程2天包含下列主要内容：Inceptor的架构和组成Inceptor的数据模型Inceptor的执行引擎InceptorSQL语法详解JDBC接口编程TDH中Inceptor的高级特性：创建内存列式数据库；设置高效索引和过滤，加快Group-

11、By和JOIN操作。Stream开发培训1天包含下列主要内容：Stream架构和原理编写StreamJobStream性能及优化StreamSQLStream接口等；半结构化数据与图数据应用开发1天半结构化数据处理与图数据应用开发Map/Reduce原理编程培训1天MapReduce基础原理深入讲解MapReduce编程实例培训Spark原理编程培训1天Spark基础原理深入讲解Spark编程实例培训数据挖掘应用开发培训2天数据挖掘基础培训，数据挖掘常用算法培训，Transwarp Discover基础原理，问题诊断，基础算法库简介，基础算法调用实践，应用开发实践Transwarp Data

12、Hub系统性能监控与调优1天性能监控与调优培训我方提供的培训内容涵盖了集团对技术开发团队培训要求的全部内容：l 大数据技术基础知识l 大数据产品软件架构、功能特性l 日常运维管理、监控与故障诊断l 结构化数据库应用开发l 流式计算应用开发l 应用整体规划与系统性能优化指南l 半结构化数据与图数据应用开发l 数据挖掘应用开发l MapReduce与Spark计算编程范型1.5.1 培训目标我方对于向用户提供的培训服务通过精心准备、细致安排、积极实施、及时总结，会取得好的效果和既定的目标。我们的培训目标为：通过培训确保使用人员经过培训后，能熟练使用系统，进行应用开发，充分了解各个子系统的功能操作流

13、程和方法，并通过系统提高工作效率和质量。确保系统维护人员经过培训后，应能监控系统运行情况，及时排除常见系统故障，针对使用人员进行使用问题技术支持。能够独立完成系统的维护工作，掌握网络运行情况，以及及时排除部分系统故障。确保高级系统管理员经过培训后，能熟练掌握系统整体结构，系统数据结构、能够分析系统故障，管理系统设备，掌握系统内部和外部接口，承担全面的技术管理工作。1.5.2 培训方式此次建设项目中涉及到的软件功能较多、对技术人员的技术能力要求较高，为了项目的顺利实施和今后日常维护工作的正常进行，参加培训的技术人员需要具备较全面的知识。为此，我们制定了全面的培训计划。现场培训是项目实施不可分割的

14、一个部分，现场培训是指在平台工作的现场，进行的简单、快捷、实用的技术传授。这种培训的特点是针对性强、直观、方式灵活，而且与实际结合紧密，用户在培训中的问题可以及时得到解答。现场培训的培训教师由我们的实施人员工程师来完成，他们会对安装配置的过程进行详细的讲解。现场培训对于系统管理员和运行维护人员来说是个提高自身技术水平的难得机会。1.5.3 培训资源我方培训还需要落实以下内容：培训时间结合项目实施计划进行阶段性培训，系统使用人员培训、一般系统维护人员培训在试运行前完成，高级系统管理员培训可以在试运行期间安排完成。培训教材我方将在培训前编制完整实用的培训教材，并提交用户审核通过后进行培训。培训师资：l 系统专家：由资深的系统专家和应用开发专家提供高级架构培训。l 系统维护教师：系统维护教师提供除软件应用方面之外的其它培训支持服务，如：软件安装、软件调试、系统监控、一般故障排查、配置等方面。l 应用软件教师：应用软件教师的培训内容主要是软件功能的架构、数据流程、业务功能操作方法。应用软件教师根据软件系统培训教材进行授课内容的调整，力争做到先原理后功能、先简单再深入、先具体后抽象，保证学员能够充分接受。