集团大数据平台建设人员培训管理办法.docx
- 文档编号:23778930
- 上传时间:2023-05-20
- 格式:DOCX
- 页数:36
- 大小:57.52KB
集团大数据平台建设人员培训管理办法.docx
《集团大数据平台建设人员培训管理办法.docx》由会员分享,可在线阅读,更多相关《集团大数据平台建设人员培训管理办法.docx(36页珍藏版)》请在冰豆网上搜索。
集团大数据平台建设人员培训管理办法
集团大数据平台建设人员培训管理办法
我方严格按照集团的要求,向业务和技术团队提供相应培训,具体培训实施要求包括:
(1)制定详细的项目培训计划
根据项目安排和进度,预先制定详细的项目培训计划,包括:
a)确定项目培训时间;
b)确定项目培训内容;
c)确定讲师名单;
d)确定集团方参与培训人员角色。
(2)确定项目培训资料
根据项目培训计划,预先就项目培训内容准备培训资
料,并在与集团有关人员充分沟通后确定项目培训资料。
(3)保证项目培训效果
我方严格按照项目培训计划为集团提供项目培训(经
双方建议或同意更改的项目培训计划除外),保证为项目
培训提供充分的时间和人力资源保障,确保项目的最终培
训效果。
1.1Hadoop系统培训
我方专门为集团管理层、关键用户和相关技术骨干开展大数据、Hadoop系统和业务领域的概览性培训,使其理解实施大数据带来的变革影响及意义,能顺利开展相关业务领域的支持工作。
培训包含如下内容:
大数据和大数据发展趋势;
大数据生态圈以及原理构架课程;
大数据技术与数据分析基础知识;
大数据应用案例;
计划安排两轮培训,每轮3天,每轮不少于50人,即满足总人数不少于100人,每人不少于3天的要求。
此培训主要由软件原厂商星环科技提供。
具体课程安排如下:
表17-1Hadoop系统培训课程表
培训培训课程培训培训内容简介
类型时间
基础大数据和大0.5天什么是大数据?
大数据发展
培训数据发展趋趋势
势
基础大数据生态0.5天包含下列内容:
培训
圈以及原理
ApacheHadoop
的发展历
构架课程
史
ApacheHadoop
生态系统
HDFS技术原理、
HDFS基本操作和编程
Map/Reduce基础
集群架构
基础大数据技术
1天
针对系统功能,进行数据处理
培训
与数据分析
和数据分析;
基础知识
基础大数据应用
1天
应用案例培训
培训
案例
1.2业务使用培训
我方专门为业务人员开展业务操作相关培训,使其能熟练操作基于Hadoop系统实现的业务功能。
培训包含如下内容:
大数据和Hadoop简介;
集团大数据平台介绍;
集团大数据平台业务使用详细培训;
集团大数据平台业务应用案例;
计划安排两轮培训,每轮7天,每轮不少于100人,即满足人数不少于200人,每人不少于7天的要求。
具体课程安排如下:
表17-2业务使用培训课程表
培训
培训课程
培训
培训内容简介
类型
时间
基础
大数据和
1天
什么是大数据?
Hadoop
功
培训
Hadoop简介
能特点。
基础
集团大数据平台
1天
大数据平台建设目标、建设
培训
介绍
思路、建设方法、架构设计。
基础
集团大数据平台
3天
如何使用集团大数据平台各
培训
业务使用详细培
项功能;
训
基础
集团大数据平台
2天
应用大数据平台进行业务,
培训
业务应用案例
推动发展的应用案例培训
1.3分析挖掘培训
我方专门为数据分析人员提供数据分析挖掘培训,使其
能熟练运用Hadoop系统开展数据分析挖掘工作,能够按需基于系统(工具)做数据分析开发,尤其是对报表的定制化
开发。
培训包含如下内容:
我方专门为集团业务分析团队提供如下培训;
大数据技术与数据处理基础知识;
R语言开发基础与RStudio工具使用基础;
数据挖掘算法与数据可视化基础知识;
定制化报表实际应用案例;
计划安排六轮培训,每轮5天,每轮不少于200人,即满足人数不少于200人,每人不少于30天的要求。
表17-3
分析挖掘培训课程表
培
培训课程
培
培训内容简介
训
训
类
时
型
间
基
大数据技术
1
大数据技术与数据处理基础知识
础
与数据处理
天
培
基础知识
训
业
R语言初级
1
RStudio工具介绍培训
务
培训
天
R语言编程基础、数据处理、作图
分
RStudio工
和数据分析
析
具使用培训
培
语言入门、用R编程、用R绘图。
训
基础统计、经典回归分析、现代回
归和分类、列联表分析、关联规则
R软件及应
1
分析、广义线性模型、多层模型、
用统计方法
天
通过顾客满意度模型引入路径模
型及其PLS偏最小二乘方法和
SEM模型、时间序列简介及状态空
间模型、多元分析
Transwarp
1
TranswarpDiscover基础原理,
Discover基
问题诊断,基础算法库简介,基础
天
础培训
算法调用实践
定制化报表
1
定制化报表实际应用案例培训
实际应用案
天
例
1.4运行维护培训
我方专门为运维人员提供运维知识和技能的转移培训,使其可承担系统交付后的运维工作,能熟练使用系统监控等管理功能,能诊断处理各类问题,能够维护优化系统性能。
培训包含如下内容:
大数据和Hadoop简介;
集团大数据平台和功能介绍;
集团大数据平台日常运行维护;
集团大数据平台常见问题处理;
计划安排三轮培训,每轮5天,每轮不少于300人,即满足要求人数不少于300人,每人不少于14天的要求。
具体课程安排如下:
表17-4运行维护培训课程表
培
培训课程
培
培训内容简介
训
训
类
时
型
间
基
大数
据
和
1天
什么是大数据?
Hadoop
功
础
Hadoop
简介
能特点。
培
训
基
集团大数据平台
1天
大数据平台架构和各项功能
础
和功能介绍
介绍。
培
训
基
集团大数据平台
2天
大数据平台的日常运行维护
础
日常运行维护培
工作详细介绍;
培
训
训
基
集团大数据平台
1天
集团大数据平台常见问题处
础
常见问题处理
理
培
训
1.5开发培训
我方专门为开发人员提供开发知识和技术的转移培训,使其可承担系统交付后的功能开发工作,完全了解开发过程、系统配置和功能开发内容,能熟练完成系统功能开发、升级,对于系统软件问题能独立诊断和处理,培训包含如下内容:
计划安排两轮培训,每轮15天,每轮不少于200人,即满足要求人数不少于200人,每人不少于30天的要求。
表17-5开发培训课程表
培培训课程培训培训内容简介
训时间
类
型
基
大数据生态圈
1天
包含下列内容:
础
以及原理构架
ApacheHadoop
的发展历
培
课程
史
训
ApacheHadoop
生态系统
HDFS技术原理、
HDFS基本操作和编程
Map/Reduce
基础
集群架构
技
Transwarp
1天
提供Transwarp
Data
Hub
术
DataHub
安装
各组件的安装、配置、部署、
开
培训
监控、维护,以及高可用性配
发
置的培训,组件包括
培
Transwarp
Hadoop
,
训
Transwarp
Hyperbase
,
Transwarp
Inceptor
,
TranswarpStream
Transwarp
1天
提供Transwarp
Data
Hub
DataHub
产品
整体产品架构以及各个组件
架构、软件特性
包括Transwarp
Hadoop,
培训
Transwarp
Hyperbase
,
Transwarp
Inceptor
,
Transwarp
Stream的功能
特性介绍
Transwarp
1天
产品运维培训,包括日常运维
DataHub
运维
管理指标监控以及故障诊断
培训
Hyperbase
开
2天
包含下列内容:
发培训课程
Zookeeper
的原理、
Zookeeper
的基本操作、
Hyperbase
的组成和原理、
常见数据模型设计模式、
基本编程接口、
Hyperbase
的运行和操作
Hyperbase
集群的优化
Inceptor开发
2天
包含下列主要内容:
培训课程
Inceptor
的架构和组成
Inceptor
的数据模型
Inceptor
的执行引擎
InceptorSQL
语法详解
JDBC接口编程
TDH中Inceptor的高级特
性:
创建内存列式数据库;
设置高效索引和过滤,加快
Group-By
和JOIN操作。
Stream开发培
1天
包含下列主要内容:
训
Stream
架构和原理
编写StreamJob
Stream
性能及优化
StreamSQL
Stream
接口等;
半结构化数据
1天
半结构化数据处理与图数据
与图数据应用
应用开发
开发
Map/Reduce
1天
MapReduce
基础原理深入
原理编程培训
讲解
MapReduce
编程实例培训
Spark原理编
1天
Spark
基础原理深入讲解
程培训
Spark
编程实例培训
数据挖掘应用
2天
数据挖掘基础培训,数据挖掘
开发培训
常用算法培训,Transwarp
Discover基础原理,问题诊
断,基础算法库简介,基础算
法调用实践,应用开发实践
Transwarp1天性能监控与调优培训
DataHub系统
性能监控与调
优
我方提供的培训内容涵盖了集团对技术开发团队培训要求的全部内容:
大数据技术基础知识
大数据产品软件架构、功能特性
日常运维管理、监控与故障诊断
结构化数据库应用开发
流式计算应用开发
应用整体规划与系统性能优化指南
半结构化数据与图数据应用开发
数据挖掘应用开发
MapReduce与Spark计算编程范型
1.5.1培训目标
我方对于向用户提供的培训服务通过精心准备、细致安排、积极实施、及时总结,会取得好的效果和既定的目标。
我们的培训目标为:
通过培训确保使用人员经过培训后,能熟练使用系统,进行应用开发,充分了解各个子系统的功能操作流程和方法,并通过系统提高工作效率和质量。
确保系统维护人员经过培训后,应能监控系统运行情况,及时排除常见系统故障,针对使用人员进行使用问题技术支持。
能够独立完成系统的维护工作,掌握网络运行情况,以及及时排除部分系统故障。
确保高级系统管理员经过培训后,能熟练掌握系统整体结构,系统数据结构、能够分析系统故障,管理系统设备,掌握系统内部和外部接口,承担全面的技术管理工作。
1.5.2培训方式
此次建设项目中涉及到的软件功能较多、对技术人员的技术能力要求较高,为了项目的顺利实施和今后日常维护工作的正常进行,参加培训的技术人员需要具备较全面的知识。
为此,我们制定了全面的培训计划。
现场培训是项目实施不可分割的一个部分,现场培训是指在平台工作的现场,进行的简单、快捷、实用的技术传授。
这种培训的特点是针对性强、直观、方式灵活,而且与实际结合紧密,用户在培训中的问题可以及时得到解答。
现场培训的培训教师由我们的实施人员工程师来完成,他们会对安装配置的过程进行详细的讲解。
现场培训对于
系统管理员和运行维护人员来说是个提高自身技术水平的难得机会。
1.5.3培训资源
我方培训还需要落实以下内容:
培训时间——结合项目实施计划进行阶段性培训,系统使用人员培训、一般系统维护人员培训在试运行前完成,高级系统管理员培训可以在试运行期间安排完成。
培训教材——我方将在培训前编制完整实用的培训教材,并提交用户审核通过后进行培训。
培训师资:
系统专家:
由资深的系统专家和应用开发专家提供高
级架构培训。
系统维护教师:
系统维护教师提供除软件应用方面之外的其它培训支持服务,如:
软件安装、软件调试、系统监控、一般故障排查、配置等方面。
应用软件教师:
应用软件教师的培训内容主要是软件功能的架构、数据流程、业务功能操作方法。
应用软件教师根据软件系统培训教材进行授课内容的调整,力争做到先原理后功能、先简单再深入、先具体后抽象,保证学员能够充分接受。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 集团 数据 平台 建设 人员培训 管理办法