一、课程概述
本次培训课程主要面向大数据系统管理人员和开发设计人员，基于开源社区大数据应用最活跃的Hadoop和HBase技术框架，围绕分布式文件存储（HDFS）、分布式并行计算（Map/Recue）和非关系型数据库(NoSql)三个大数据核心应用展开，旨在帮助培训对象建立起完整的大数据理论基础框架和实践操作能力。主要课程内容包括：
1.大数据应用发展史；
2.分布式文件系统HDFS原理与架构、HDFS系统管理、HDFS开发与设计；
3.分布式并行计算框架Map/Reduce工作原理与架构、Map/Reduce任务运行监控、Map/Reduce任务调度、Map/Redcue开发与设计；
4.非关系型数据库HBase逻辑架构、HBase物理存储、HBase关键流程和算法、HBase开发与设计；
5.大数据应用案例分析：金融、电信、互联网、电商平台
二、课程大纲
|
日程 |
课程模块 |
课程内容 |
|
第1天 |
大数据概述 |
什么是大数据? |
|
Hadoop概要 |
||
|
Hadoop生态系统介绍 |
||
|
Hadoop集群安装与部署 |
Hadoop独立部署 |
|
|
Hadoop伪分布式安装部署 |
||
|
Hadoop集群安装与部署 |
||
|
Hadoop配置参数管理 |
||
|
第2天 |
HDFS架构与原理 |
HDFS体系结构 |
|
HDFS读写过程-串行写与并行读 |
||
|
HDFS 管理接口-HDFS shell && HDFS Web Interface |
||
|
HDFS开发与设计 |
HDFS API接口介绍 |
|
|
HDFS Java接口实例 |
||
|
HDFS开发实例-基于HDFS实现云盘系统 |
||
|
第3天 |
Map/Reduce架构与原理 |
Map/Reduce体系结构 |
|
Map/Reduce管理接口-Map/Reduce shell && Map/Reduce Web Interface |
||
|
Map/Reduce开发与设计 |
Map/Reduce API接口介绍 |
|
|
Map/Reduce Java开发实例 |
||
|
第4天 |
HBASE架构与原理 |
HBASE体系结构 |
|
HBASE物理存储 |
||
|
HBASE关键流程算法 |
||
|
HBASE管理接口-HBase Shell&& HBase Web Interface |
||
|
HBASE与RDBMS的比较 |
||
|
HBASE开发与设计 |
HBASE API接口介绍 |
|
|
HBASE Java接口实例 |
||
|
HBASE优化专题-海量数据写入优化 |
||
|
第5天 |
Hadoop辅助支持工具 |
Hive-提供给SQL程序员最好的礼物 |
|
Pig-通过脚本实现Map/Reduce |
||
|
Sqoop-Hadoop时代的ETL |
三、服务支持
Hadoop培训交流群：293503507
培训邀请电话：13718542435