Hadoop的基础知识点有哪些

技术Hadoop的基础知识点有哪些本篇内容主要讲解“Hadoop的基础知识点有哪些”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Hadoop的基础知识点有哪些”吧!一、had

本文主要讲解“Hadoop的基本知识点有哪些?”感兴趣的朋友不妨看看。本文介绍的方法简单、快速、实用。让边肖带你学习“Hadoop的基本知识点有哪些”!

00-1010有很多在线信息,这里就不浪费时间介绍了。有兴趣的话自己找“杜娘”。

注意:狭义的hadoop指的是单独的软件hadoop。从广义上讲,hadoop指的是大数据生态系统,包括许多其他软件。

在接下来的章节中,没有特别的说明,我们都会提到hadoop软件。

Hadoop生态大致包括以下技术

Hadoop的基础知识点有哪些

一、hadoop的发展历史

0.x系列版本:hadoop最早的开源版本,从1.x和2.x版本演变而来。

1.x版本系列:hadoop版本的第二代开源版本,主要修复0.x版本的一些bug等。

2.x版本系列:架构发生了重大变化,引入了纱线平台等诸多新功能,这也是生产环境中使用最多的版本。

3.x版本系列:在2.x版本的基础上,引入了hdfs的一些新特性,开发出了稳定的版本,公司未来会用到。

注意:我们未来的课程会以hadoop3.x版本3.x为例,有些地方的配置和概念与2.x不同。

二、hadoop的版本介绍

Hadoop三个发布版本:Apache、Cloudera和Hortonworks。

Apache版本是最原始(基础)的版本,对于初学者来说是最好的。

Cloudera广泛应用于大型互联网企业。

霍顿工程文件更好。

注:Cloudera和Hortonworks可以理解为Linux和Centos的关系。

三、 hadoop生产环境版本选择

Hadoop的基础知识点有哪些

Hadoop由三个模块组成:分布式存储HDFS、分布式计算MapReduce和资源调度引擎three。

Hadoop的基础知识点有哪些

HDFS模块:

名称节点:主节点主要负责HDFS集群的管理和元数据信息管理。

Datanode:从节点主要负责存储用户数据。

Secondarynamenode:协助namenode管理元数据信息和元数据信息的冷备份。

纱线模块:

ResourceManager:主节点,主要负责资源分配。

NodeManager:从节点主要负责执行任务。

至此,相信大家对“Hadoop的基本知识点有哪些”有了更深的理解,让我们在实践中去做吧!这是网站。更多相关内容,可以去相关渠道查询,关注我们,继续学习!

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/139127.html

(0)

相关推荐

  • 树莓派上如何安装SVN服务器

    技术树莓派上如何安装SVN服务器这篇文章主要介绍了树莓派上如何安装SVN服务器,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。sudo apt-get in

    攻略 2021年11月20日
  • 中国标志性建筑,中国最具标志性的建筑有哪些

    技术中国标志性建筑,中国最具标志性的建筑有哪些每个国家都拥有一些标志性建筑,一看到它就能唤起对于它的记忆,标志性建筑也是一个国家的名片和象征。要说中国有哪些标志性建筑中国标志性建筑?不同的思考维度有不同的答案,如果从建筑

    生活 2021年10月27日
  • 页码设置怎么从第三页开始,页码从第三页开始怎么设置

    技术页码设置怎么从第三页开始,页码从第三页开始怎么设置1页码设置怎么从第三页开始、点击【插入】→【页眉和页脚】→【页码】-【页面底端】选择一种样式的页码。文档开始出现页码,但是是从第一页开始的。2、将光标定位到第二页文章

    生活 2021年10月29日
  • Hive表字段Comment中文乱码怎么办

    技术Hive表字段Comment中文乱码怎么办这篇文章主要为大家展示了“Hive表字段Comment中文乱码怎么办”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Hive表字段

    攻略 2021年12月10日
  • Win10系统下如何将VSCode配置到右键菜单中

    技术Win10系统下如何将VSCode配置到右键菜单中这篇文章将为大家详细讲解有关Win10系统下如何将VSCode配置到右键菜单中,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。教程新

    攻略 2021年11月12日
  • 如何将Linux上的PDB数据库转移到windows上的CDB数据库

    技术怎么将Linux上的PDB数据库传输到windows的CDB数据库本篇内容主要讲解“怎么将Linux上的PDB数据库传输到windows的CDB数据库”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。

    攻略 2021年12月21日