hadoop是做什么的
2024-05-22 02:35:15
好评回答
1、Hadoop主要是分布式计算和存储的框架,所以Hadoop工作过程主要依赖于HDFS(Hadoop Distributed File System)分布式存储系统和Mapreduce分布式计算框架。
2、分布式存储系统HDFS中工作主要是一个主节点namenode(master)(hadoop1.x只要一个namenode节点,2.x中可以有多个节点)和若干个从节点Datanode(数据节点)相互配合进行工作。
3、HDFS主要是存储Hadoop中的大量的数据,namenode节点主要负责的是:接收client用户的操作请求,这种用户主要指的是开发工程师的Java代码或者是命令客户端操作。维护文件系统的目录结构,主要就是大量数据的关系以及位置信息等。管理文件系统与block的关系。
4、Hadoop中大量的数据为了方便存储和管理主要是以block块(64M)的形式储存。一个文件被分成大量的block块存储之后,block块之间都是有顺序关系的,这个文件与block之间的关系以及block属于哪个datanode都是有namenode来管理。
声明:本网站信息来自网络,所有数据仅供参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:abc5566@foxmail.com。
- 上一篇:补水面膜可以天天敷吗
- 下一篇:经期可以吃什么水果
猜你喜欢
-
多肉植物紫珍珠的繁殖方法
阅读量:94 -
电蚊香液可以横着插吗
阅读量:48 -
碧玉分株方法
阅读量:16 -
六月雪分株方法
阅读量:85 -
白雪姬扦插方法
阅读量:90 -
白木耳汤怎么做才好吃
阅读量:96 -
鸡腿油豆腐怎么做
阅读量:93 -
无骨的鸡腿肉怎么做
阅读量:34 -
大红豆种子种植方法
阅读量:10 -
复活节活动有哪些
阅读量:45
猜你喜欢
-
阅读量:89
-
阅读量:13
-
阅读量:32
-
阅读量:75
-
阅读量:42
-
阅读量:47
-
阅读量:90
-
阅读量:20
-
阅读量:52
-
阅读量:31