栏目分类:
子分类:
返回
终身学习网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
终身学习网 > IT > 软件开发 > 后端开发 > Java

Hadoop的体系架构

Java 更新时间:发布时间: 百科书网 趣学号
1、HDFS的体系架构

2、NameNode的职责 3、DataNode的职责

4、SecondaryNameNode的职责

5、Yarn的体系架构和任务调度过程

 

6、Yan的资源分配方式

 

7、HBase的体系架构简介

8、操作HDFS

8.1、Web Console网页工具

(1)NameNode:端口50070

(2)SecondaryNameNode:端口50090

8.2、命令行

  •  普通的操作命令:hdfs dfs ******

         -mkdir  在HDFS中创建目录,如果父目录不存在,使用-p参数先创建父目录

hdfs dfs -mkdir /aaa

         -ls  查询HDFS的某个目录

          -ls -R   查询HDFS的某个目录,包含子目录

  1. 管理的命令:hdfs  dfsadmin ******

8.3、Java API

 9、HDFS的原理解析(重要)

9.1、数据上传的过程

9.2、数据下载的过程

10、HDFS的底层实现:

10.1、RPC(remote procedure call远程过程调用)

10.2、java的代理对象Proxy

11、HDFS的高级特性

11.1、回收站

11.2、快照 SnapShot :备份(本质:CP命令)

11.3、配额Quota

  • 名称配额
  • 空间配额 

11.4、安全模式 SafeMode

11.5、权限管理:类似linux

11.6、HDFS的集群

  • 联盟 Federation
  • HA

转载请注明:文章转载自 www.051e.com
本文地址:http://www.051e.com/it/956848.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 ©2023-2025 051e.com

ICP备案号:京ICP备12030808号