文章插图
【hadoop是做什么的 hadoop的资料】1、Hadoop主要是分布式计算和存储的框架,所以Hadoop工作过程主要依赖于HDFS(Hadoop Distributed File System)分布式存储系统和Mapreduce分布式计算框架 。
2、分布式存储系统HDFS中工作主要是一个主节点namenode(master)(hadoop1.x只要一个namenode节点,2.x中可以有多个节点)和若干个从节点Datanode(数据节点)相互配合进行工作 。
3、HDFS主要是存储Hadoop中的大量的数据,namenode节点主要负责的是:接收client用户的操作请求,这种用户主要指的是开发工程师的Java代码或者是命令客户端操作 。维护文件系统的目录结构,主要就是大量数据的关系以及位置信息等 。管理文件系统与block的关系 。
4、Hadoop中大量的数据为了方便存储和管理主要是以block块(64M)的形式储存 。一个文件被分成大量的block块存储之后,block块之间都是有顺序关系的,这个文件与block之间的关系以及block属于哪个datanode都是有namenode来管理 。
推荐阅读
- 钢铁是怎么样炼成的关于生命的格言
- 王者和吃鸡的健康时间是共享的吗
- 纤维的成分是什么 膳食纤维的主要成分是什么
- 蓝鲸的寓意是什么 蓝鲸的寓意指什么
- 百度机器人是什么
- 一般罐头食品的保质期很长这主要是因为 一般罐头食品的保质期很长原因解析
- 巴西比戈是什么东西?
- 雪佛兰是哪国的品牌 雪佛兰是哪里的
- 侵占罪相关法律法规的规定是什么
- 茄子烧鸡软骨步骤 茄子烧鸡软骨做法