Hadoop 分布式文件系统 HDFS
Hadoop 分布式文件系统 HDFS
1万+ 人选课
更新日期:2025/05/15
开课平台阿里云课堂
开课高校-
开课教师-
学科专业工学计算机类
开课时间-
课程周期-
开课状态-
每周学时-
课程简介
学习 HDFS产生背景及定义、 HDFS优缺点、 HDFS组成架构、 HDFS块的大小设置、 HDFS Shell命令(开发重点)。
 
 
 
 
课程大纲
    HDFS基础
  • 课程介绍
  • HDFS产生背景及定义
  • HDFS优缺点
  • HDFS组成架构
  • HDFS块的大小设置
  • HDFS Shell命令(开发重点)
  • 副本数设置
  • 客户端环境准备
  • 客户端环境测试
  • 学习总结
  • HDFS API操作
  • 文件上传
  • 参数优先级说明
  • 文件下载
  • 文件夹删除
  • 修改文件的名称
  • 查看文件的详情
  • 判断是文件还是文件夹
  • HDFS I/O流操作
  • 文件IO流上传
  • 文件IO流下载操作
  • 定位读取文件
  • HDFS数据流操作
  • 写数据流程(面试重点)
  • 网络拓扑-节点距离计算
  • 机架感知-副本存储节点选择
  • 读数据流程(面试重点)
  • NN(名称节点)和2NN(第二名称节点)
  • NN和2NN工作机制(面试重点)
  • Fsimage和Edits解析
  • CheckPoint时间设置
  • NN故障处理_案例
  • HDFS安全模式
  • 集群安全模式_案例
  • NN多目录配置_案例
  • 学习总结
  • DN(数据节点)
  • DN工作机制(面试重点)
  • 数据完整性
  • 掉线时限参数设置
  • 服役新节点_案例
  • 添加白名单_案例
  • 黑名单退役_案例
  • DN多目录配置_案例
  • HDFS新特性
  • 集群间数据拷贝
  • 小文件归档案例
  • 回收站案例
  • 快照管理