hadoop是做什么的 - 考驾照网
考驾照网> 数码> 正文

hadoop是做什么的

来源:考驾照网更新时间:2021-02-08 08:32

  1、Hadoop主要是分布式计算和存储的框架,所以Hadoop工作过程主要依赖于HDFS(Hadoop Distributed File System)分布式存储系统和Mapreduce分布式计算框架。

  2、分布式存储系统HDFS中工作主要是一个主节点namenode(master)(hadoop1.x只要一个namenode节点,2.x中可以有多个节点)和若干个从节点Datanode(数据节点)相互配合进行工作。

  3、HDFS主要是存储Hadoop中的大量的数据,namenode节点主要负责的是:接收client用户的操作请求,这种用户主要指的是开发工程师的Java代码或者是命令客户端操作。维护文件系统的目录结构,主要就是大量数据的关系以及位置信息等。管理文件系统与block的关系。

  4、Hadoop中大量的数据为了方便存储和管理主要是以block块(64M)的形式储存。一个文件被分成大量的block块存储之后,block块之间都是有顺序关系的,这个文件与block之间的关系以及block属于哪个datanode都是有namenode来管理。

考驾照网(KAOJIAZHAO.COM)

免责声明:本文仅代表作者个人观点,与本站无关。其原创性以及文中陈述文字和内容未经本站证实,如果侵犯了您的版权,请联系我们,本站将在3个工作日内删除。

2024年小车科目一模拟试题

2024年小车科目四模拟试题

驾校相关信息:
  • 厦门驾校排行榜
  • 厦门驾车陪练
  • 厦门汽车违章查询
  • 北京驾校排行榜
  • 北京驾车陪练
  • 北京驾车违章查询
  • 无锡车辆违章查询
  • 无锡驾驶证扣分查询
  • 无锡新区驾校排行
  • 北京驾校优惠信息
  • 周边城市驾校:
    驾校-热门城市:

    考驾照网(www.kaojiazhao.com) 旗下平台: 驾校平台 教练平台 陪练平台 考试平台

    考驾照网举报投诉方式:电话: QQ: 邮箱:(接受色情、低俗、侵权、虐待等违法和不良信息的投诉)

    Powered by 考驾照网 © 2001-2013 KAOJIAZHAO    XXXXXXXXXX