HDFS 架构详解 认证专享

成为vip会员,免费看所有精品课程
  • 目录

    目录 收起>

    本课程主要介绍 HDFS 底层架构,并演示在 Linux 中开发 Java 程序操作 HDFS 中的数据,以及如何通过 HDFS Shell 命令操作数据。

    1.HDFS 底层架构 00:24:35

    本课时主要讲解 HDFS 架构思想,并分析其优点与缺点、介绍各大守护进程的作用。

    2.HDFS Shell 操作 00:17:24

    本课时主要讲解 HDFS Shell 相关命令的使用,以及如何开启 HDFS 的垃圾回收机制,着重演示归档 HDFS 中的小文件。

    3.Linux 开发环境搭建 00:06:43

    本课时主要讲解在 Centos 系统中安装配置 JDK、Maven、Eclipse,并演示通过 XManager 远程操作 Centos,实现在 Linux 系统下的编程。

    4.HDFS Java 编程 00:11:51

    本课时主要讲解编写 Java 程序操作 HDFS 中的文件。
  • 提问

    提交问题
  • 下载

  • 线路

    视频太卡?试试切换线路 √ 线路1 √ 线路2
  • 收藏

    收藏课程
  • 分享

连播

连续播放

关灯

关灯模式
视频加载太慢?

我们有两条线路可以选择,试试切换线路吧

HDFS 架构详解

4课时,61分钟
Wil1
Wil1

极客学院签约布道师

课程背景:
HDFS(Hadoop Distributed File System)作为 Hadoop 下的一个子项目,是目前使用极为广泛的分布式文件系统。它的设计目的是提供一个高容错,且能部署在廉价硬件的分布式系统;同时,它能支持高吞吐量,适合大规模数据集应用。

核心内容:
1.HDFS 架构
2.HDFS 守护进程职责
3.HDFS Shell
4.HDFS Java API

软件环境:Centos6.4、hadoop2.7.1

是否提供资料:

课程等级:高级

适合人群:
具有 Linux 基础
  • 技术问答
  • 1

    HDFS 底层架构

    24:35

    本课时主要讲解 HDFS 架构思想,并分析其优点与缺点、介绍各大守护进程的作用。

  • 2

    HDFS Shell 操作

    17:24

    本课时主要讲解 HDFS Shell 相关命令的使用,以及如何开启 HDFS 的垃圾回收机制,着重演示归档 HDFS 中的小文件。

  • 3

    Linux 开发环境搭建

    06:43

    本课时主要讲解在 Centos 系统中安装配置 JDK、Maven、Eclipse,并演示通过 XManager 远程操作 Centos,实现在 Linux 系统下的编程。

  • 4

    HDFS Java 编程

    11:51

    本课时主要讲解编写 Java 程序操作 HDFS 中的文件。

相关课程

  • Hadoop 管理与调优

    本课程主要介绍 Hadoop 整合 Hue、Hadoop 数据添加 LZO 压缩调优,同时也会讲解 Hadoop 升级原理并进行升级演示。

    4课时 59分钟
    高级
    5555人学习
  • Hadoop CDH5 集群管理

    本课程主要介绍 Hadoop 各大主流发行版本,并使用 Cloudera Manager5 来管理 Hadoop 集群。

    2课时 40分钟
    高级
    5273人学习
  • Hadoop 高可用集群

    本课程主要讲解 Hadoop 基于 QJM 方式的高可用集群,着重讲解其原理,并且跟随官方文档搭建一个高可用集群

    4课时 64分钟
    高级
    5285人学习
  • Hadoop Federation

    本课程讲解的是 Hadoop Federation 产生的背景、架构及其原理,着重讲解使用 Hadoop Federation 解决单集群 Namenode 的问题。

    3课时 53分钟
    高级
    4106人学习