hbase寻址机制的示例分析

技术hbase寻址机制的示例分析小编给大家分享一下hbase寻址机制的示例分析,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!hbase寻址机制

边肖将与您分享一个hbase寻址机制的示例分析。相信大部分人都不太了解,所以分享这篇文章给大家参考。希望你看完这篇文章会有很多收获。我们一起来看看吧!

hbase寻址机制的详细说明

系统如何找到某一行键(或某一行键范围)所在的区域大表?使用三层B-tree类结构来存储区域位置。

第一层是将文件保存在zookeeper中,zookeeper保存了根区域的位置。

第二级根区域是。META。的其他区域的位置。存储了META.z表。通过根区域,我们可以访问的数据。META。桌子。META。是第三层,它是一个特殊的表,保存着hbase中所有数据表的位置信息。

//见图

hbase寻址机制的示例分析

描述:

1根区域永远不会被分割,这确保了定位任何区域最多需要三次跳转。

2.2.META. table保存每一行中一个区域的位置信息,行键由表名表的最后一个代码编码。

3为了加快访问速度,所有地区的。META。表存储在内存中。

假设一行。META。表占用内存约1KB。并且每个区域限制为128MB。

那么上述三层结构可以存储的区域数量为:

(128 MB/1KB)*(128 MB/1KB)=2(34)个区域

4客户端将查询到的位置信息保存在缓存中,缓存不会主动失效。因此,如果客户端上的缓存完全失效,需要六次网络往返才能定位到正确的区域(其中三次查找缓存失效,三次获取位置信息)。

从上面的路径中,我们可以看到用户需要3个请求才能到达用户的Table的真实位置,这导致了某些程序的性能下降。在0.96之前使用3层设计的主要原因是考虑到元数据可能需要很多。但是在实际的集群操作中,元数据的大小其实很容易计算。在BigTable的论文中,METADATA数据每行的存储大小约为1KB。根据一个128M的Region的计算,三层设计可以支持的区域数为2.34,两层设计可以支持的区域数为2.17 (131072)。然后,在2层设计的情况下,一个集群可以存储4P数据。这只是该地区仅有1.28亿人的一个例子。如果是10G呢?因此,通过计算,其实双层设计可以满足集群的需求。因此,在0.96版本之后,删除了-ROOT-表。

提示:有不同的版本,分为老寻址方式和新寻址方式。

以上就是文章《hbase寻址机制实例分析》的全部内容。感谢阅读!相信大家都有一定的了解,希望分享的内容对大家有所帮助。想了解更多知识,请关注行业资讯频道!

内容来源网络,如有侵权,联系删除,本文地址:https://www.230890.com/zhan/138995.html

(0)

相关推荐

  • MySQL加锁机制的验证记录是什么

    技术MySQL加锁机制的验证记录是什么本篇内容介绍了“MySQL加锁机制的验证记录是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,

    攻略 2021年10月22日
  • selenium测试过程动了键盘(selenium判断点击事件是否成功)

    技术selenium中键盘事件的示例分析这篇文章主要介绍了selenium中键盘事件的示例分析,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。例:from

    攻略 2021年12月17日
  • js数组去重效率最高的方法(js数组遍历的三种方法)

    技术七种JS实现数组去重的方式分别是什么这篇文章将为大家详细讲解有关七种JS实现数组去重的方式分别是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。例:将下面数组去除重

    攻略 2021年12月14日
  • 如何探讨Java代理模式与反射机制的实际应用

    技术如何探讨Java代理模式与反射机制的实际应用如何探讨Java代理模式与反射机制的实际应用,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。Java提供了一套

    攻略 2021年11月21日
  • 抖音刷点赞,,抖音怎么获得大量点赞?

    技术抖音刷点赞,,抖音怎么获得大量点赞?如今越来越多的人玩抖音,可以说是生活中的一件必备品,它拥有很多的知识、乐趣和经验。希望玩抖音的人,肯定少不了要很多粉丝,那怎么能让自己的粉丝涨得更快一点呢?怎样才能验出来希望玩抖音

    测评 2021年11月11日
  • 游戏加速首选香港轻量云

    技术游戏加速首选香港轻量云由于现在很多海外游戏都锁国区,或者大陆地区没有服务器,因此很多玩家都会利用SOCK5代理来防止锁区或者改善游戏的网络环境,那么自建SOCK5代理有什么推荐方案呢。建议首选香港轻量云规避在线限制

    礼包 2021年12月16日