课程培训
云计算分布式大数据Hive数据仓库最佳实践培训课程

课程大纲:

  第一部分:

  第1个主题:云计算的四大核心技术

  HDFS、MapReduce、HBase、Hive

  第2个主题:Hive集群与管理

  1、Hadoop集群的搭建

  2、Hadoop集群的监控

  3、Hadoop集群的管理

  4、集群下运行MapReduce程序

  5、安装并启动Hive

  6、测试Hive

  第3主题:Hive的命令、数据类型和文件格式

  1、Hive的CLI

  2、Hive的集合数据类型

  3、编码和模式

  第4主题:开发Hive

  1. 连接Java调试器到Hive

  2. 通过Eclipse来开发Hive代码

  3. Hive的单元测试

  第5题:HQL

  1. HQL的数据定义

  2. 使用HQL操作数据

  3. 深入HQL查询

  第6题:HQL的视图和索引

  1、HQL的视图:降低查询的复杂度和限定特定的条件

  2、HQL的索引:索引的创建和管理、定制索引

  第二部分:

  第1个主题:Hive中的函数

  1. 使用Hive中已有的函数

  2. 自定义聚合函数

  3. 自定义表生成函数

  4. 在自定义函数中访问缓存

  第2个主题:Hive的存储过程

  1、为何需要Hive中的存储过程

  2、 在后台中运行的存储过程

  3、HiveStorageHandler

  4、 存储过程的具体编写和使用

  第3个主题:Hive架构优化

  1、 降低IO负载

  2、 表的分区、动态分区

  3、 压缩

  4、分布式缓存

  第4个主题:彻底优化HQL

  1、 HQL优化的具体策略和方式

  2、 Map和Reduce

  3、数据倾斜

  4,执行计划

  第5个主题:在AWS上使用Hive

  1. 使用并管理EMR Hive集群

  2. EMR集群的详细配置

  3.持久层、元数据

  4.集群中的HDFS和S3(配置、日志等)

  第6个主题:Hive的Thrift

  1. 配置、启动、使用Thrift

  2. Thrift的管理

  3. 管理Hive Server

  4.ThriftMetaStore




如果您想学习本课程,请预约报名
如果没找到合适的课程或有特殊培训需求,请订制培训
除培训外,同时提供相关技术咨询与技术支持服务,有需求请发需求表到邮箱soft@info-soft.cn,或致电4007991916
技术服务需求表下载请点击

服务优势:
丰富专家资源,精准匹配相关行业,相关项目技术精英,面向用户实际需求,针对性培训或咨询,互动式交流,案例教学,精品小班,实际工程项目经验分享,快捷高效,节省时间与金钱,少走弯路与错路。

专家力量:
中国科学院相关研究所高级研究人员
西门子,TI,vmware,MSC,Ansys,MDI,Mentor, candence,Altium,Atmel 、Freescale,达索,华为等
大型公司高级工程师,项目经理,技术支持专家
中科信软培训中心,资深专家或讲师
大多名牌大学,硕士以上学历,相关学历背景专业,理论素养高
多年实际项目实践,大型复杂项目实战案例分享,热情,乐于技术分享
针对客户实际需要,真实案例演示,互动式沟通,学有所值
报名表下载
联系我们 更多>>

咨询电话010-62883247

                4007991916

咨询邮箱:soft@info-soft.cn  

 

微信号.jpg

  微信咨询

随时听讲课

聚焦技术实践

订制培训 更多>>
技术支持:帮做网络