学员将学习和掌握使用高级脚本语言或类SQL语言来编写MapReduce任务,而无需掌握Java编程语言和熟悉Hadoop API。通过掌握Hive和/或Pig,将极大缩短数据分析人员设计编写和调试常见数据分析问题的周期,提高工作效率;从而为企业节省费用,缩短分析结果市场化的周期。
Hive如何扩展MapReduce 如何使用Hive创建和操作表 Hive基本和高级数据类型 对数据进行分区和分组 高级Hive特性 如何用Pig加载和操作数据 PigLatin编程语言的特性 用Pig解决实际数据分析问题。Hadoop分布式文件系统(HDFS)和MapReduce的工作原理 如何优化Hadoop机群所需要的硬件配置 搭建Hadoop机群所需要考虑的网络因素 如何利用Hadoop配置选项进行系统性能调优 如何利用FairScheduler为多用户提供服务级别保障 Hadoop机群维护和监控 如何使用Flume从动态生成的文件加载数据到Hadoop 如何使用Sqoop从关系型数据库加载数据 使用其他Hadoop相关系统工具(诸如Hive,Pig和HBase)所涉及到的系统管理问题。Hadoop分布式文件系统(HDFS)和MapReduce的工作原理 如何利用JAVA API或者其他编程语言来开发MapReduce应用 MapReduce任务开发中的注意事项 如何在Hadoop上实现常见算法 Hadoop开发和调试的最佳实用经验
k8凯发集团