首页 > 选课中心 > 数据仓库 > 【快班】Hive数据仓库实践
【快班】Hive数据仓库实践
此课程所属 【hadoop大数据工程师职业方向】专业,报名专业套餐,可享受0元学习特惠!点击了解详情
2017年07月10日 18点 共11课 ★★☆
开课时间 课程周期 难易度
招生中

立即报名
存储 Hadoop 数据分析 案例 Hive 函数
课程介绍
      互联网时代下,数据量的急剧增长,传统的数据仓库已经无法满足。Hive作为Hadoop生态圈中的数据仓库解决方案随着开源社区的快速发展而逐步成熟,慢慢的在某些场景下替代企业级数据仓库,成为各大互联网公司数据仓库建设的必选方案,可以这么说,Hive已经成为大数据数据仓库的事实标准。

       本课程将从Hive的基本概念入手,深入解析Hive的使用方式、HQL语法以及常用的仓库模式设计和Hive优化方法,并对未来Hive的发展和高级特性做一些简单介绍,并通过最后的案例实践巩固学习内容。通过本课程的学习,将能够胜任大多数互联网场景下的大数据分析和数据开发任务。
课程大纲
第一课 Hadoop与MapReduce
   1) Hive在Hadoop Ecosystem中的地位
   2) Hive的版本演进与目前现状
   3) 课程实践环境说明
   4) 实操: Hive/Hadoop预备环境安装
第二课 Hive的基本概念与QuickStart
   1) Hive的安装部署
   2) Hive的基本架构
   3) 启动Hive
   4) Hive命令行
   5) HiveServer与JDBC/ODBC
   6) 实操: Hive命令行和ThriftServer基本使用
第三课 数据类型与文件格式
   1) Hive支持的基本数据类型
   2) Hive支持的集合数据类型
   3) Hive支持的文件格式与优劣对比
第四课 HiveQL:数据定义
   1) Hive数据模型
   2) Database
   3) Table
   4) Partition
   5) 自定义存储格式
   6) 自定义表属性
   7) 常用创建/删除/修改表语法
   8) 实操: HQL 创建/删除/修改操作练习
第五课 HiveQL:数据操作
   1) 加载数据(LoadData)
   2) 从查询计算结果加载数据(Insert Table  Select)
   3) 动态分区(DynamicPartitioning)
   4) CTAS(CreateTableAsSelect)
   5) 导出数据
   6) 实操: 练习以上数据加载计算和导出操作
第六课 HiveQL:数据查询
   1) 从最简单的开始
   2) Select … From
   3) Where条件
   4) Group By条件
   5) Join
   6) 排序(OrderBy/SortBy)
   7) ClusterBy/DistributeBy
   8) 抽样(Sampling)
   9) Union
   10) 实操: 练习以上各种查询语法
第七课 Hive函数与自定义函数
   1) 查看与调用函数
   2) 常用标准函数(UDF)
   3) UDAF
   4) UDTF
   5) UDF/UDAF/UDTF开发
   6) 实操: 练习并完成UDF Java开发的作业
第八课 Hive常用模式设计
   1) 按天做Partition
   2) 分桶(Bucket)
   3) 压缩
   4) 表Schema变更
   5) 实操: 练习以上几种仓库设计模式
第九课 Hive调优
   1) Hive参数说明
   2) Explain查看执行计划
   3) 控制Map/Reduce数
   4) 并行执行
   5) 推测执行
   6) Join优化
   7) 数据倾斜问题
   8) 动态分区优化
   9) 实操: 练习并理解不同优化参数下的执行逻辑
第十课  Hive新特性与其他
   1) Hive on Tez
   2) Hive on Spark
   3) Hive与HBase集成
   4) HCatalog
第十一课  案例
   1) 广告用户行为分析场景预备
   2) 构建Hive表与数据处理
   3) 常用分析案例
   4) 实操: 完成以上案例作业
授课讲师
朱广彬,5年以上大数据架构经验,关注大数据底层架构相关技术,致力于大数据处理技术在计算广告的应用,对Hadoop/Hive/HBase/Spark/Kafka等有深入的认识和实践经验,负责千台Hadoop集群、百亿流量的数据平台架构,Hadoop Contributor。
github: https://github.com/zhuguangbin
课程环境

本课程实践环境需要在虚拟机环境下操作,因此建议学员提前准备好虚拟机环境,推荐安装Virtualbox虚拟机,无论是Windows/Ubuntu/Mac 都支持

授课对象
面向数据分析和数据开发,希望从事和进一步了解互联网数据仓库以及数据分析的学员
收获预期
掌握Hive的基本原理,掌握Hive的基本使用,掌握HiveQL的基本语法和常用优化措施,了解Hive数据仓库设计的方法,能够胜任数据仓库分析和数据开发的角色
课程学费
学费:400元(固定学费:300元 + 逆向学费:100元)
新颖的课程收费形式:“逆向收费”约等于免费学习,课程收取300元固定收费 + 100元逆向学费,学习圆满则全额奖励返还给学员!
特别说明如下
本门课程本来打算完全免费,某位大神曾经说过“成功就是正确的方向再加上适度的压力”。考虑到讲师本身要付出巨大的劳动,为了防止一些朋友在学习途中半途而废,浪费了讲师的付出,为此我们计划模仿某些健身课程,使用“逆向收费”的方法。 在 报名时每位报名者收取400元,其中300元为固定 收费,另外100元是暂存学费,即如果学员能完成全部课程要求,包括完成全部的书面作业,则100元全款退回。如果学员未能坚持到完全所有的学习计划任务,则会被扣款。期望这种方式可以转化为大家强烈的学习愿望和驱动力!
课程授课方式

1、 学习方式:老师发布教学资料、教材,幻灯片和视频,学员通过网络下载学习。同时通过论坛互动中老师对学员进行指导及学员之间相互交流。

2、 学习作业:每课均有布置课后作业,学员完成书面作业后则可进入下一课学习。

3、 老师辅导:通过论坛站内信及邮件等多种方式与老师进行一对一互动。

4、 完成课程:最后一课作业交纳后,老师完成作业批改,即可完成课程并取回相应剩余的逆向学费。

联系我们
咨询Email :edu01@dataguru.cnedu02@dataguru.cn
课程入门讨论咨询QQ群:706821899(群内有培训公开课视频供大家免费观看)
咨询QQ: 点击这里给我发消息 点击这里给我发消息
您是否对此课程还有疑问,那么请 点击进入FAQ,您的问题将基本得到解答
全国统一咨询热线: 4008-010-006
最新技术热点、 最新行业资讯,最新培训课程信息,尽在炼数成金官方微信,低成本传递高端知识!技术成就梦想!欢迎关注!
打开微信,使用扫一扫功能,即刻关注炼数成金官方微信账户,不容错过的精彩,期待您的体验!!!

授课老师

其他快班课程

【快班】JavaScript从入门到精通
【快班】赢在大数据-人工智能的应用实践
【快班】【免费公开课】《数据科学入门手册》——DSX架构与部署
【快班】【免费公开课】数据科学无难事
【快班】【免费公开课】《Hadoop入门手册》之 虚拟机的安装和使用
【快班】【免费公开课】玩转数据艺术-数据展示技巧应用实战
【快班】【免费公开课】玩转数据科学——IBM DSX
【快班】【免费公开课】《Hadoop入门手册》——Apache Hadoop集群安装
【快班】【免费公开课】赢在大数据-数据化运营落地实战
【快班】大数据管理
【快班】Streams流计算引航公开课
【快班】抽样调查
【快班】LATEX公式排版系统引航
【快班】Watson Analytics数据分析应用实战公开课
【快班】数据陷阱解读
【快班】R七种武器之文本挖掘包tm
【快班】R七种武器之可视化JS库HTMLWidgets包
【快班】R七种武器之数据加工厂plyr
【快班】R七种武器之交互化展示包shiny
【快班】R七种武器之网络爬虫RCurl
【快班】R七种武器之数据可视化包ggplot2
【快班】R七种武器之金融数据分析quantmod
【快班】Java经验谈
【快班】Go语言实战编程
【快班】DB2 V11新特性全解析
【快班】DB2数据库引航公开课
【快班】STATA统计分析入门
【快班】初识正则表达式
【快班】perl语言入门
【快班】Scala语言入门
【快班】Puppet 运维自动化
【快班】Qt编程快速入门
【快班】python web框架企业实战详解
【快班】数据治理及数据仓库模型设计
【快班】DevSecOps安全交付应用实战
【快班】JavaScript突击-从精通到项目实战
【快班】R语言魔鬼训练营
【快班】基于案例学习bash脚本编程
【快班】量化投资基础计算与模型
【快班】老板说服术之玩转数据展示
【快班】数据库系统实现技术内幕
【快班】Goldengate从入门到精通
【快班】Oracle 12c特性解读-容器数据库和灾备
【快班】Oracle 12C RAC集群原理与管理实战
【快班】Mycat从入门到精通
【快班】基于案例学SQL优化
【快班】大型电商分布式系统实践
【快班】深入理解Storm与大数据实战
【快班】Java魔鬼训练营
【快班】面试突击-数据结构与算法速成
【快班】Excel数据分析师突击—从入门到精通到项目实战
【快班】自己动手实践神经网络
【快班】自然语言处理软件实验
【快班】Redis技术实战
【快班】推荐系统
【快班】MongoDB实战
【快班】应用系统架构优化方法与案例实战
【快班】HBase从入门到精通
【快班】Hadoop数据分析平台
【快班】数据分析与SAS
【快班】比特币
【快班】机器读心术之文本挖掘与自然语言处理
【快班】机器读心术之神经网络与深度学习
【快班】快速上手Jmeter性能测试工具
【快班】软件性能测试
【快班】软件自动化测试Selenium2
【快班】大数据必知的java基础
【快班】快速数据挖掘平台RapidMiner
【快班】R语言编程技巧
【快班】深入BI之Kettle篇
【快班】基于案例学Java服务器端程序设计
【快班】Scala从基础到开发实战
【快班】供应链物流—电商发展的“核”动力
【快班】详解SQL与PL/SQL
【快班】Oracle职业直通车
【快班】深度玩转Excel
【快班】Hadoop应用开发实战案例
【快班】大数据的Linux基础
【快班】机器学习
【快班】量化投资
【快班】SPSS数据分析入门与提高
【快班】Python数据分析
【快班】NoSQL与NewSQL数据库引航
【快班】大数据算法导论
【快班】大数据的矩阵计算基础
【快班】R语言数据分析、展现与实例
【快班】大数据的统计学基础

热招课程

◆ ROS机器人操作系统实战(第五期)
◆ Python数据分析(第15期)
◆ Java Web开发精讲(第三期)
◆ 金融的人工智能革命(第六期)
◆ 股票投资基础之基本面分析(第二期)
◆ Python数据科学商业实践(第一期)
◆ 【百万年薪系列】视觉的盛宴:深度玩转人脸识别(第三期)
◆ 【免费公开课】R七种武器之网络爬虫RCurl(第19期)
◆ Python3入门到精通实战特训(第三期)
◆ 从零入门金融业信贷风控算法(第二期)
◆ R语言数据分析、展现与实例(第34期)
◆ 深入浅出Git(第六期)
◆ Python数据分析案例实战(第十期)
◆ 人工智能前沿系列之生成式对抗网络(第八期)
◆ 【免费公开课】数据陷阱解读(第34期)
◆ 基于R的Kaggle实战案例详解(第六期)
◆ Oracle特殊恢复原理与实战(DSI系列)(第五期)
◆ 机器读心术之神经网络与深度学习(第12期)
◆ 系统运维之基础服务进阶实战(第二期)
◆ Tensorflow工程师职场实战技(第三期)
◆ 人脸识别90天速成特训班(第二期)
◆ 【免费公开课】数据库设计(第27期)
◆ 股票投资基础之技术分析(第四期)
◆ Spark大数据平台应用实战(第六期)
◆ 大数据的统计学基础(第24期)
◆ Qt编程快速入门(第六期)
◆ Python全栈学习——Python基础及Web开发(第二期)
◆ locust性能测试实战(第一期)
◆ 【免费公开课】Julia快速数据分析(第七期)
◆ OpenCV计算机视觉产品实战(第七期)
◆ Oracle DBA从小白到入职实战应用(第九期)
◆ Python金融投资分析实践(第九期)
◆ 深入浅出Spring(第八期)
◆ 深度学习框架Tensorflow学习与应用(第八期)
◆ 【免费公开课】R七种武器之金融数据分析quantmod(第40期)
◆ Python突击—从入门到精通到项目实战(第13期)
◆ MySQL DBA从小白到大神实战(第11期)
◆ 大数据的Linux基础(第23期)
◆ Python金融业数据化运营实战(第二期)
◆ Kafka原理剖析及实战演练(第11期)
◆ Elastic Stack实战(第一期)
◆ 【免费公开课】数据科学无难事(第二期)
◆ 敏捷Agile快速入门(第四期)
◆ 区块链技术从入门到精通(第九期)
◆ Python自然语言分析(第12期)
◆ 股票投资高手武器系列之缠论系统(第三期)
◆ 测试架构师核心技术(第二期)

GMT+8, 2018-10-21 08:27 , Processed in 0.565458 second(s), 33 queries .