曙海教学优势
本课程以项目实现为导向,面向企事业项目实际需要,秉承二十一年积累的教学品质,老师将会与您分享设计的全流程以及工具的综合使用经验、技巧。线上/线下/上门皆可,课程可定制,热线:4008699035。
曙海培训的课程培养了大批受企业欢迎的工程师。曙海培训的课程在业内有着响亮的知名度。大批企业和曙海
建立了良好的合作关系,合作企业30万+。
Hadoop开发培训
课程目标
此课程面向企业软件工程师、数据库工程师、以及对Hadoop开发感兴趣的各类技术人员。通过此课程的学习,学员可以全面掌握Hadoop的架构原理和使用场景,并通过贯穿课程的习题项目进行实战锻炼,从而熟练使用Hadoop进行MapReduce程序开发。
培训大纲:
Hadoop背景介绍
Hadoop生态系统概览
Hadoop分布式文件系统(HDFS)
什么是HDFS
HDFS设计目标
HDFS系统特点
HDFS工作原理
HDFS服务进程
HDFS使用
HDFS命令行工具
启动、停止HDFS服务
如何查看HDFS日志
查看HDFS Web控制台
HDFS配置参数
上机开发环境介绍
HDFS开发
Java API详解
FuseHDFS
WebHDFS Restful API
MapReduce分布式计算框架
什么是MapReduce
MapReduce服务
MapReduce工作机制
MapReduce调度管理
MapReduce参数设置
启动、停止MapReduce服务
如何查看MapReduce日志
查看MapReduce Web控制台
MapReduce示例程序解析
MapReduce框架类库介绍
MapReduce实战,你的第一个MapReduce项目
项目需求简述
项目设计讨论
项目伪代码分析
项目实现,上机练习
MapReduce进阶实战
项目性能优化
项目结果分类汇总
项目结果排序
如何用其它语言开发MapReduce应用
MapReduce常用算法(Sort、Index、Join、IF-IDF等)介绍
Hadoop生态系统介绍
HBase入门
利用Oozie对MapReduce任务进行调度
利用Flume NG 和 Sqoop与各种数据源对接
利用Hive和Pig来简化MapReduce的开发
ZooKeeper介绍