你的位置: 首页 > 公开课首页 > 语言 > 课程详情

details

云计算分布式大数据hadoop深入浅出案例驱动实战

暂无评价   
  • 开课时间:2013/09/13 09:00 已结束
  • 结束时间:2013/09/15 17:00
  • 开课地点:上海市
  • 授课讲师: 王家林
  • 课程编号:231841
  • 课程分类:语言
  •  
  • 收藏 人气:3305
你实际购买的价格
付款时最多可用0淘币抵扣0元现金
购买成功后,系统会给用户帐号返回的现金券
淘课价格
5000
你还可以: 收藏

培训受众:

软件工程师;
数据库开发人员;
网络后台开发人员;
运维人员;

课程收益:

1、 案例驱动教学,全程项目实战训练:图片服务器、WordCount实现、HBase微博系统、话单查询与统计、Hive数据统计案例、电商业日志流量分析;
2、 掌握Hadoop三大核心:MapReduce、HBase、Hive
3、 萃取出实际开发中最常用、最实用的内容并以深入浅出的方式把难点化于无形之中

培训颁发证书:

培训结束,对理论、实践双项考核成绩合格者,颁发中国信息产业培训网的培训证书。

课程大纲

第一天 第1个主题:Hadoop思考
1.Hadoop的设计目标和适用场景
2.Hadoop架构解析
3.MapReduce工作原理和案例说明

第2个主题:Hadoop集群与管理
1、 Hadoop集群的搭建
2、 Hadoop集群的监控
3、 Hadoop集群的管理
4、 集群下运行MapReduce程序

第3个主题:HDFS
1. HDFS命令行操作实战
2. HDFS的配置管理
3. NameNode的工作机制

第4个主题:HDFS案例实战
1. HDFS案例的分析和设计
2. 环境搭建
3.使用Hadoop Java API实现对HDFS写入、读取、删除文件等操作

第5个主题:MapReduce剖析
1. MapReduce的原理和运行过程
2. 构建MapReduce的开发环境

第6个主题:MapReduce案例实战
1. 使用MapReduce的Java接口实现经典的WordCount
2. wordcount运行过程解析
3. MapReduce实现数据去重操作
4. MapReduce实现数据排序
5. MapReduce实现数据平均数据的计算

第7个主题:HBase架构设计和实现剖析
1、 HBase定义
2、 HBase与RDBMS的对比
3、 数据模型
4、 系统架构
5、 HBase上的MapReduce
6、 表的设计

第8个主题:HBase集群及其管理
1、 集群的搭建过程讲解
2、 集群的监控
3、 集群的管理

第9个主题:HBase客户端
1、 HBase Shell以及演示
2、 Java客户端以及代码演示


第二天 第1个主题:HBase案例实战1---使用HBase实现微博系统
1. 项目架构和设计
2. 开发环境搭建
3. 实现用户登录和注销
4.“关注”功能的设计和实现
5.“发微博”功能的设计和实现
6.发布和运行整个基于HBase的微博系统

第2个主题:HBase与MapReduce
1. HBase与MapReduce的关系
2. HBase如何使用MapReduce

第3个主题:HBase案例实战2---话单查询与统计
1. 项目架构设计
2. 开发环境搭建
3. 话单入库和查询的设计与实现
4.统计功能的设计与实现

第4个主题:MapReduce高级实战
1. Split实现剖析
2. 自定义输入的实现
3. Reduce的partition
4. 案例实战

第5个主题:安装和使用Hive
1. Hive剖析
2. 安装Hive
3.Hive的基本使用

第6个主题:Hive与HDFS、MapReduce
1. Hive向HDFS存入结构化数据
2. 使用MySQL作为Hive的元数据库
3.Hive与MapReduce

第7个主题:Hive
1. Hive的Java扩展开发
2. Hive UDF和UDAF开发
3. Hive常见场景,实战练习


第三天 第1个主题:Hive案例实战---数据统计
1. 项目架构设计
2. 表结构设计
3.数据的插入与统计实现

第2个主题:Sqoop
1. Sqoop原理
2. Sqoop使用详解
3. 用Sqoop实现HDFS/Hive与关系数据库的数据交互
4. 用Sqoop实现HBase与关系数据库的数据交互

第3个主题:电商业日志流量分析项目
电商业日志流量分析项目,互联网企业对海量日志的分析是Hadoop应用的一个重要用途,也是对网站流量、客户行为分析的重要途径。该项目整合Hive、Hbase、Sqoop等常用组件,涉及从后台处理到前台呈现的每一个技术环节。包括:
1•业务需求介绍
2•数据建模
3•后台算法设计
4•后台业务处理
5•前台WEB展示等

第4个主题:Hadoop开发者之路
1. Hadoop技能模型
2. Hadoop开发者最佳学习路线和方式
3.Hadoop开发者最佳成长路线

培训师介绍

安博中程特聘讲师Android架构师、高级工程师、咨询顾问、培训专家;
致力于Android、HTML5、Hadoop的软、硬、云整合的一站式解决方案;
国内最早(2007年)从事于Android系统移植、软硬整合、框架修改、应用程序软件开发以及Android系统测试和应用软件测试的技术专家和技术创业人员之一。
HTML5技术领域的最早实践者(2009年)之一,成功为多个机构实现多款自定义HTML5浏览器,参与某知名的HTML5浏览器研发;
云计算分布式大数据处理的最早实践者之一,Hadoop的狂热爱好者,不断的在实践中用Hadoop解决不同领域的大数据的高效处理和存储,多家电商Hadoop解决方案的提供商,电信厂商的Hadoop解决方案提供者;
超过10本的IT畅销书作者;

本课程名称: 云计算分布式大数据hadoop深入浅出案例驱动实战

查看更多:语言公开课

hadoop 相关的最新课程
讲师动态评分 与同行相比

授课内容与课纲相符00%

讲师授课水平00%

服务态度00%