Hadoop分布式HDFS入门到精通

黑马程序员-1057播放 0弹幕
AC 284729292021-5-4
Hadoop是一种分析和处理大数据的平台。HDFS是Hadoop分布式文件系统的简称。HDFS是Hadoop核心组件之一，作为最底层的分布式存储服务而存在。
随着数据量越来越大，一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是管理和维护极不方便，于是迫切需要一种系统来管理多台机器上的文件，这就是分布式文件系统。HDFS具有高容错性，数据自动保存多个副本，通过增加副本的方式，提高容错性，若某一个副本丢失后，它可以自动分配到其它节点作为新的副本。能够处理的数据规模可以达到GB，TB。
0

选段62P

查看全部

  • 01_课程介绍

  • 02_了解分布式文件系统应用场景

  • 03_了解文件系统

  • 04_了解什么是分布式文件系统

  • 05_了解常见的分布式文件系统

  • 06_HDFS概念和作用

  • 07_HDFS重要特性

  • 08_使用VMware虚拟机安装CentOS

  • 09_CentOS安装JDK

  • 10_搭建三台CentOS服务器

  • 11_CentOS安装和配置Hadoop

  • 12_shell操作HDFS1

  • 13_shell操作HDFS2

  • 14_shell操作HDFS3

  • 15_搭建HDFS开发环境

  • 16_构造客户端对象

  • 17_HDFS文件上传

  • 18_修改HDFS上传副本数量

  • 19_HDFS文件下载

  • 20_HDFS文件、文件夹删除

  • 21_HDFS文件名更改

  • 22_HDFS查看文件详情

  • 23_HDFS文件和文件夹判断

  • 24_Java API操作HDFS小结

  • 25_IO流操作HDFS介绍

  • 26_IO流操作HDFS文件上传

  • 27_IO流操作HDFS文件下载

  • 28_HDFS文件随机位置进行读取

  • 29_显示HDFS上文件的内容

  • 30_IO流操作HDFS小结

  • 31_了解和下载ECharts

  • 32_ECharts快速入门

  • 33_ECharts-折线图使用

  • 34_ECharts-柱状图

  • 35_ECharts-饼图

  • 36_ECharts-雷达图

  • 37_ECharts-异步加载

  • 38_了解整体流程及架构

  • 39_案例演示和分析

  • 40_案例-搭建开发环境

  • 41_案例-使用程序生成播放记录，并保存到HDFS上

  • 42_案例-编写Controller，读取HDFS上的数据进行相应指标的统计

  • 43_案例-编写Controller，读取HDFS上的数据进行相应指标的统计

  • 44_案例-编写网页，使用ECharts异步加载数据

  • 45_案例小结

  • 46_了解NameNode和DataNode

  • 47_了解HDFS写数据流程

  • 48_了解HDFS读数据流程

  • 49_了解HDFS元数据管理机制上

  • 50_了解HDFS元数据管理机制下

  • 51_HDFS HA介绍

  • 52_HDFS HA主备状态切换流程

  • 53_HDFS HA edits log共享

  • 54_配置HDFS HA_安装Zookeeper

  • 55_配置HDFS HA_安装Hadoop

  • 56_启动和测试HDFS HA集群

  • 57_了解HDFS Federation的原理上

  • 58_了解HDFS Federation的原理下

  • 59_配置HDFS Federation-HA准备环境

  • 60_配置HDFS Federation-HA集群

  • 61_启动和访问HDFSFederation-HA集群

  • 62_课程总结

选段62

  • 01_课程介绍

  • 02_了解分布式文件系统应用场景

  • 03_了解文件系统

  • 04_了解什么是分布式文件系统

  • 05_了解常见的分布式文件系统

  • 06_HDFS概念和作用

  • 07_HDFS重要特性

  • 08_使用VMware虚拟机安装CentOS

  • 09_CentOS安装JDK

  • 10_搭建三台CentOS服务器

  • 11_CentOS安装和配置Hadoop

  • 12_shell操作HDFS1

  • 13_shell操作HDFS2

  • 14_shell操作HDFS3

  • 15_搭建HDFS开发环境

  • 16_构造客户端对象

  • 17_HDFS文件上传

  • 18_修改HDFS上传副本数量

  • 19_HDFS文件下载

  • 20_HDFS文件、文件夹删除

  • 21_HDFS文件名更改

  • 22_HDFS查看文件详情

  • 23_HDFS文件和文件夹判断

  • 24_Java API操作HDFS小结

  • 25_IO流操作HDFS介绍

  • 26_IO流操作HDFS文件上传

  • 27_IO流操作HDFS文件下载

  • 28_HDFS文件随机位置进行读取

  • 29_显示HDFS上文件的内容

  • 30_IO流操作HDFS小结

  • 31_了解和下载ECharts

  • 32_ECharts快速入门

  • 33_ECharts-折线图使用

  • 34_ECharts-柱状图

  • 35_ECharts-饼图

  • 36_ECharts-雷达图

  • 37_ECharts-异步加载

  • 38_了解整体流程及架构

  • 39_案例演示和分析

  • 40_案例-搭建开发环境

  • 41_案例-使用程序生成播放记录，并保存到HDFS上

  • 42_案例-编写Controller，读取HDFS上的数据进行相应指标的统计

  • 43_案例-编写Controller，读取HDFS上的数据进行相应指标的统计

  • 44_案例-编写网页，使用ECharts异步加载数据

  • 45_案例小结

  • 46_了解NameNode和DataNode

  • 47_了解HDFS写数据流程

  • 48_了解HDFS读数据流程

  • 49_了解HDFS元数据管理机制上

  • 50_了解HDFS元数据管理机制下

  • 51_HDFS HA介绍

  • 52_HDFS HA主备状态切换流程

  • 53_HDFS HA edits log共享

  • 54_配置HDFS HA_安装Zookeeper

  • 55_配置HDFS HA_安装Hadoop

  • 56_启动和测试HDFS HA集群

  • 57_了解HDFS Federation的原理上

  • 58_了解HDFS Federation的原理下

  • 59_配置HDFS Federation-HA准备环境

  • 60_配置HDFS Federation-HA集群

  • 61_启动和访问HDFSFederation-HA集群

  • 62_课程总结

APP内打开

    查看更多
    打开AcFun，查看更多精彩内容

    下载APP，观看完整视频

    点击前往

    取消
    继续
    立即领取