中级会员
- 威望
- 17
- 贡献
- 18
- 热心值
- 0
- 金币
- 325
- 注册时间
- 2020-6-22
|
课程介绍:
Hadoop 的调优和运维对于 Hadoop 来说是很重要的一个环节。对于大规模数据集来说更是如此。性能调优对于 Hadoop 来说无异于打通“任督二脉”,对于 Hadoop 的计算能力会有质的提升,而运维之于 Hadoop 来说,就好像"金钟罩,铁布衫"一般,有了稳定的运维, Hadoop 才能在海量数据中大展拳脚,两者相辅相成,缺一不可。
课程目录:
1.选择合适的硬件
2.操作系统调优与 JVM 调优
3. Hadoop 参数调优
4. Hive 性能调优
5. Hadoop 运维
软件环境: CDH
是否提供资料:是
课程等级:中级
适合人群:
有一定的 Hadoop 使用经验者
1 选择合适的硬件
Hadoop 调优的第一步就是选择合适的硬件,选择硬件应当从数据出发,才能合理规划计算和存储资源。
2 操作系统调优与 JVM 调优
介绍基于操作系统、 Java 虚拟机的调优
3 Hadoop 参数调优
Hadoop 有非常多的参数,其中和性能相关的有80多个,如何对其进行调优使其工作在最佳状态
4 Hive 性能调优(上)
Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。
5 Hive 性能调优(下)
Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。
6 Hadoop 运维
运维也是 Hadoop 重要的组成部分,集群故障,服务故障都会造成损失 |
|