Hadoop 性能调优与运维

成为vip会员,免费看所有精品课程
  • 目录

    目录 收起>

    Hadoop 性能调优主要分为四个维度,硬件、操作系统、 Java 虚拟机和 Hadoop 参数这几个方面进行,并且 Hive 也有自己独有的调优方式。运维主要从日常运维、故障恢复、故障排查这几个方面进行。

    1.选择合适的硬件 00:05:27

    Hadoop 调优的第一步就是选择合适的硬件,选择硬件应当从数据出发,才能合理规划计算和存储资源。

    2.操作系统调优与 JVM 调优 00:04:43

    介绍基于操作系统、 Java 虚拟机的调优

    3.Hadoop 参数调优 00:08:49

    Hadoop 有非常多的参数,其中和性能相关的有80多个,如何对其进行调优使其工作在最佳状态

    4.Hive 性能调优(上) 00:05:02

    Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。

    5.Hive 性能调优(下) 00:04:34

    Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。

    6.Hadoop 运维 00:04:44

    运维也是 Hadoop 重要的组成部分,集群故障,服务故障都会造成损失
  • 提问

    提交问题
  • 下载

  • 线路

    视频太卡?试试切换线路 √ 线路1 √ 线路2
  • 收藏

    收藏课程
  • 分享

连播

连续播放

关灯

关灯模式
视频加载太慢?

我们有两条线路可以选择,试试切换线路吧

Hadoop 性能调优与运维

6课时,33分钟2015-12-16
达达尼昂
达达尼昂

极客学院签约布道师

课程背景:
Hadoop 的调优和运维对于 Hadoop 来说是很重要的一个环节。对于大规模数据集来说更是如此。性能调优对于 Hadoop 来说无异于打通“任督二脉”,对于 Hadoop 的计算能力会有质的提升,而运维之于 Hadoop 来说,就好像"金钟罩,铁布衫"一般,有了稳定的运维, Hadoop 才能在海量数据中大展拳脚,两者相辅相成,缺一不可。

核心内容:
1.选择合适的硬件
2.操作系统调优与 JVM 调优
3. Hadoop 参数调优
4. Hive 性能调优
5. Hadoop 运维

软件环境: CDH

是否提供资料:

课程等级:中级

适合人群:
有一定的 Hadoop 使用经验者
  • 技术问答
  • 1

    选择合适的硬件

    05:27

    Hadoop 调优的第一步就是选择合适的硬件,选择硬件应当从数据出发,才能合理规划计算和存储资源。

  • 2

    操作系统调优与 JVM 调优

    04:43

    介绍基于操作系统、 Java 虚拟机的调优

  • 3

    Hadoop 参数调优

    08:49

    Hadoop 有非常多的参数,其中和性能相关的有80多个,如何对其进行调优使其工作在最佳状态

  • 4

    Hive 性能调优(上)

    05:02

    Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。

  • 5

    Hive 性能调优(下)

    04:34

    Hive 作为 Hadoop 最重要的工具,有自己独特调优方式。

  • 6

    Hadoop 运维

    04:44

    运维也是 Hadoop 重要的组成部分,集群故障,服务故障都会造成损失